都市:规则程序员,利用万物漏洞

第17章 爬虫

“接下来,就是试试获取小说的内容了。”</p>

接下来,他开始编写程序以获取小说的详细信息和内容。</p>

由于小说内容比较庞大,他决定把获取内容的频率放低。</p>

毕竟是在奶茶店,店里面还有不少的人在使用着店里面提供的wifi。</p>

如果他瞬时间向服务器的请求量过大,其他人的网络,基本上就会陷入瘫痪的状态。</p>

他现在只是手痒痒了,想试试手,真正要爬取到足够多的小说数据,至少需要好几天的时间。</p>

“接下来,就是见证奇迹的时刻。”</p>

他开始启动他的爬虫程序,程序开始在小说网站上爬取小说的内容。</p>

无数本小说的内容文字一闪而过,便进入了数据库之中。</p>

“哟,还有点意思。”</p>

他发现,在爬取的过程中,点娘小说网站的反爬虫机制还算是不错,他的爬虫程序很快就被封禁了。</p>

针对ip的。</p>

不过,他快速升级了他的爬虫程序,加入了无数的ip池,以及强大的识别验证码能力,使其更难被网站检测到。</p>

“咦,看来我这掌握的五级信息技术,比我想象之中的要强!”</p>

经过一番小小的折腾,点娘都市小说分类下的数百万本小说,全部进入了他的数据库里面。</p>

“最强的点娘的反爬虫机制也不过如此。看来获取数据集的过程,会比我想象的简单不少。“</p>

”那现在就是时间的问题了,等我爬取到足够多的小说数据集,就可以开始训练我的写小说ai模型了!”他心中充满了自信。</p>

现在,就让小说模型先跑着吧。</p>

今天是周末,奶茶店的人比往常多上不少,等到了快要歇业的时间里,铺子里还有不少的人。</p>

林小玲没办法,只好延长了奶茶店的营业时间。</p>

连带的,王卿一遍看着ai模型的训练,一遍记着单词。</p>

“喂,我要下班了,咱们一起走吧。”</p>

王卿还沉迷于互联网世界的新奇时,林小玲的声音传了上来。</p>

他抬头一看,“都已经十二点了啊。”</p>

“等我一会儿。”</p>

“好,我在门口等你。”</p>

林小玲没有上楼去,今天太累了,她就在楼下等着王卿收拾东西。</p>

“怎么还没出来呀。”</p>

她在店门口等了两三分钟,王卿那边还没有动静,就想上楼去看看。</p>

还没有走到门口,便看到他扛着一台巨大的电脑主机和一个显示器,不禁笑了起来。</p>

王卿嘴里喘着粗气,额头上挂着一粒粒细密的汗珠,身上的衬衫湿漉漉的贴在了背上。</p>

他双手抱着一台电脑主机和一个显示器,像只蚂蚁一样艰难地从二楼的楼梯上下了来。</p>

电脑主机和显示器一字排开,整齐地被王卿抱在了怀里。</p>

本章未完,点击下一页继续阅读。

人气小说推荐More+

瞧我把大明朝都弄成啥样了
瞧我把大明朝都弄成啥样了
周宁魂穿到天启年间,作为一名学识浅薄、身娇体弱的小道士,原本是没什么宏图大志的。可他偏偏就遇到了臭名昭着的皇帝奶娘客氏,接着意外走上了一条另类的拯救大明之路。本文以宫廷政治为切入点,站在反派立场来考虑延续大明国祚的可行方案。
立在山峰的太阳
穿越海岛求生,误惹红发疯批大佬
穿越海岛求生,误惹红发疯批大佬
+++++++君弑臣:“红是我的命,君是我的姓,睡你是我命中注定。”原本完成99个世界任务的上官婉儿,准备开始度假生活!谁料在时空旅行中被撕成碎片,系统自降等级带着她来到了一个全民海岛求生世界,并绑定了一个商人系统。作为商人的第一单就是把自己售出去了,开局爆屏红色长发纹身大佬。君弑臣:“shui了,就跑?天涯海角我
猫猫爱吃番茄酱
天道弃我,那便噬天
天道弃我,那便噬天
林无道天生绝道,无法修炼,既然天地弃我,那我便噬天而行,玄幻,单女主,不玩花样,主角不圣母,智商在线
不正经的老登
斗罗:抢夺机缘后,我成就双神位
斗罗:抢夺机缘后,我成就双神位
就因为骂了唐三一句挂逼,温宁穿到了斗罗大陆。还多了一个系统,系统告诉她,有它在,主角的所有机遇都可以抢夺。温宁:想要冰火两仪眼系统:你的温宁:想要海神传承系统:你的温宁:修罗神神只?系统:你的温宁:我承认我之前说话有点大声,以后我就是新的挂逼。开局双生武魂,先天满魂力,被武魂殿和两大帝国争抢,温宁果断选择武魂殿,和
忧郁葡萄干
三国:起死回生,诸侯的噩梦
三国:起死回生,诸侯的噩梦
福布斯百岁大佬过完百岁寿诞当天,穿越到了一千八百多年前的汉末三国。成为了丁原的一个叫贾秦的义子。眼看着丁原被他最为骄傲的义子吕布弑杀,而他却无能为力。好在系统出现,而且很逆天,能够在一定条件下令人死而复生!于是丁原得以起死回生。之后,贾秦凭着麾下强悍的部队,以及便宜老父贾秦的勤奋,令各诸侯颤抖。董卓无法迁都,洛阳,
诸侯的奔驰