免费阅读
返回
菜单
上一章查看最新章节下一章

第1741章 别被技术细节吓住

作品:重生87:开局截胡港岛女神作者:极地苍狼
如果本章错误,请点击报错10秒纠正

办公室的白板上写满了字。

李明的粉笔停在半空,眉头皱成一个疙瘩。

他转身看向另外四个同伴,又看看坐在会议桌旁的贾瀞雯。

“贾总,这个‘网页爬虫’的概念……我们研究了三天,还是有点不明白。”他放下粉笔,拍了拍手上的粉灰,“文档上说,要让程序像蜘蛛一样在网上爬,自动发现和收集网页。

但具体怎么实现?”

张涛推了推眼镜,翻开陈浩写的技术框架文档:“这里写了一些思路--从几个种子网站开始,提取页面上的链接,然后访问这些链接,再提取新链接。

理论上可行,但实际做起来问题很多。”

“什么问题?”贾瀞雯问。

“比如,有些网站不允许被访问。”说话的是王磊,团队里最年轻的一个,北大研究生在读,“还有,网页格式千奇百怪,怎么准确提取链接?再比如,如果程序陷入死循环怎么办?”

贾瀞雯点点头。

这些她也不懂,但她知道该问谁。

“今天先到这里。”她看看表,“晚上我打电话问问陈总。

大家继续研究其他部分,分词算法那边有进展吗?”

张涛摇摇头:“更难。

英文有空格分隔单词,中文是连在一起的。

‘中华人民共和国’怎么分?是‘中华’‘人民’‘共和国’,还是‘中华人民’‘共和国’?不同的分法,意思差别很大。”

会议室里一阵沉默。

五个年轻人你看看我,我看看你,都从对方眼里看到同样的困惑--这个项目,比他们想象的要难得多。

晚上八点,贾瀞雯在办公室拨通了陈浩的电话。

“喂?”陈浩的声音有点喘,背景里有嘈杂的人声。

“在忙?”

“刚下戏,换衣服呢。”陈浩走到安静的地方,“说吧,今天遇到什么问题了?”

贾瀞雯把白天的讨论复述了一遍。

陈浩听完,笑了:“正常,这些确实是难点。

你记一下,我一个个说。”

贾瀞雯拿起笔。

“第一,爬虫的伦理问题。

我们要遵守rObOtS协议,就是网站根目录下的一个文本文件,告诉爬虫哪些页面可以访问,哪些不行。

这个必须遵守,不然我们会惹麻烦。”

“第二,网页格式问题。

…。。
   本章没完,请点击下—页继续阅读!如果被转码了请退出转码或者更换浏揽器即可。
  温馨提示:亲爱的读者,如果你觉得本站还好,为了避免丢失和转马,请勿依赖搜索访问,建议你使用[华为刘揽器]或[Firefox火狐刘揽器]访问并收蔵【二零小说】 m.20012001.net。我们将会持续为你更新,还建议你注册会员使用书架功能追书阅读更方便。
上一页 1234下一页
上一章查看最新章节下一章
临时书架加入书签回顶部↑

看了《重生87:开局截胡港岛女神》的书友还喜欢看

错把刘宏当爹,他送貂蝉做我老婆
作者:吾名张飞
简介: 【何蔡貂乔甄,吕甘糜邹陈】\n【不虐,不漏】\n刘必意外穿越到东汉末年的洛阳,获得了...
更新时间:2026-10-26 21:28:42
最新章节:第455章 要不,我去找刘辟谈谈?
开局自曝系统,父皇举国助我娶妻
作者:卿柒
简介: 开局自曝万嗣呈祥,娶妻生子都会得到奖励!于是,皇帝老爹为赵辰安疯狂赐婚!
<...
更新时间:2026-10-26 20:33:07
最新章节:第495章 封印九成修复,域外却早已被布满棋子
天堂刽子手
作者:惊悚541
简介: 上帝睡了片刻,醒来见人间遍地满了强暴。就呼唤死神来到祂的宝座前。

...
更新时间:2026-10-26 21:27:00
最新章节:第157章 全面反攻
我一杂役,怎么成掌门孩子他爹了?
作者:三月雨
简介: 叶长天在路边摊买了一本阴阳造化诀,意外穿越成为太玄宗的一名杂役弟子。
更新时间:2026-10-26 21:32:22
最新章节:第355章 献祭洛青衣,开启洛族祖地封印!
方寸道主
作者:愤怒的乌贼
简介: 这世界,有帝王一言而为天下法,有兵仙一剑可当百万师,有儒圣一卷春秋定纲常,有道尊一指...
更新时间:2026-10-26 21:27:00
最新章节:第405章 天生降圣人
九鼎
作者:上汤豆苗
简介: 皇朝末年,风起云涌。徐野穿越而至,父母双亡孑然一身,只剩一座富贵却无权势庇佑的侯府,...
更新时间:2026-10-26 21:32:00
最新章节:099【公道】
书名:

本站若有图片广告属于第三方接入,非本站所为,广告内容与本站无关,不代表本站立场,请谨慎阅读。

Copyright © 2020 二零小说 All Rights Reserved.kk

SiteMap