都市:规则程序员,利用万物漏洞

第17章 爬虫

“接下来,就是试试获取小说的内容了。”</p>

接下来,他开始编写程序以获取小说的详细信息和内容。</p>

由于小说内容比较庞大,他决定把获取内容的频率放低。</p>

毕竟是在奶茶店,店里面还有不少的人在使用着店里面提供的wifi。</p>

如果他瞬时间向服务器的请求量过大,其他人的网络,基本上就会陷入瘫痪的状态。</p>

他现在只是手痒痒了,想试试手,真正要爬取到足够多的小说数据,至少需要好几天的时间。</p>

“接下来,就是见证奇迹的时刻。”</p>

他开始启动他的爬虫程序,程序开始在小说网站上爬取小说的内容。</p>

无数本小说的内容文字一闪而过,便进入了数据库之中。</p>

“哟,还有点意思。”</p>

他发现,在爬取的过程中,点娘小说网站的反爬虫机制还算是不错,他的爬虫程序很快就被封禁了。</p>

针对ip的。</p>

不过,他快速升级了他的爬虫程序,加入了无数的ip池,以及强大的识别验证码能力,使其更难被网站检测到。</p>

“咦,看来我这掌握的五级信息技术,比我想象之中的要强!”</p>

经过一番小小的折腾,点娘都市小说分类下的数百万本小说,全部进入了他的数据库里面。</p>

“最强的点娘的反爬虫机制也不过如此。看来获取数据集的过程,会比我想象的简单不少。“</p>

”那现在就是时间的问题了,等我爬取到足够多的小说数据集,就可以开始训练我的写小说ai模型了!”他心中充满了自信。</p>

现在,就让小说模型先跑着吧。</p>

今天是周末,奶茶店的人比往常多上不少,等到了快要歇业的时间里,铺子里还有不少的人。</p>

林小玲没办法,只好延长了奶茶店的营业时间。</p>

连带的,王卿一遍看着ai模型的训练,一遍记着单词。</p>

“喂,我要下班了,咱们一起走吧。”</p>

王卿还沉迷于互联网世界的新奇时,林小玲的声音传了上来。</p>

他抬头一看,“都已经十二点了啊。”</p>

“等我一会儿。”</p>

“好,我在门口等你。”</p>

林小玲没有上楼去,今天太累了,她就在楼下等着王卿收拾东西。</p>

“怎么还没出来呀。”</p>

她在店门口等了两三分钟,王卿那边还没有动静,就想上楼去看看。</p>

还没有走到门口,便看到他扛着一台巨大的电脑主机和一个显示器,不禁笑了起来。</p>

王卿嘴里喘着粗气,额头上挂着一粒粒细密的汗珠,身上的衬衫湿漉漉的贴在了背上。</p>

他双手抱着一台电脑主机和一个显示器,像只蚂蚁一样艰难地从二楼的楼梯上下了来。</p>

电脑主机和显示器一字排开,整齐地被王卿抱在了怀里。</p>

本章未完,点击下一页继续阅读。

人气小说推荐More+

妾若安好那还得了
妾若安好那还得了
她本是将门嫡女、家破人亡她不得不隐姓埋名、被迫为妾.她争的从来不是男人的宠爱、而是男人背后的如画江山、步步为营不过是为了帮为尽忠报国却被冤枉杀的父亲报仇雪恨、鸣冤平反!她可以一直隐姓埋名、她必须要让父亲和哥哥们青史留名、让害他们家破人亡的全都不得好死、永远丁哥在历史耻辱柱上!
小羊羔白又白
女王之路,从变种寄生开始
女王之路,从变种寄生开始
陨石浩劫之下,母星一片废土。当寒冬降临,变种肆虐,苏澄却能在困境中游刃有余。然而,这并非是幸运女神的特别关照。随着谜团的逐一揭开,危险一波接一波地袭来。寄生,机甲,虫族……到底哪一个才更接近她的来历?十字星审判、基因暗杀、星际悬赏……又是谁在幕后操纵着一切?曾经被迫放弃过,所以当面临更严重的危机,她选择力挽狂澜!不
三柳十八
悠闲的修仙时光
悠闲的修仙时光
在一个遥远而神秘的世界里,修仙者们踏上了一条与常人截然不同的道路。他们追寻着天地间的奥秘,渴望突破生死轮回,获得超凡的力量与永恒的生命。修仙之途,充满了无尽的挑战与机遇。修仙者们需引灵气入体,淬炼经脉,以强化自身的根基。他们在深山幽谷中闭关修炼,感悟天地法则,力求与自然融为一体。每一次突破境界,都是对自身的一次超越
拥有瞳术的喵语者
守护灵的圣杯是我
守护灵的圣杯是我
要问东北人的守护灵,可能就属东北几大仙儿,黄鼠狼(黄仙),狐狸(狐仙),蟒或蛇(柳仙),刺猬(白仙),灰仙(老鼠),还有鬼仙顾名思义鬼魂这些动物在东北地区被认为具有特别的灵性和神力,能够影响个人福祸、家道兴衰以及其他世间事务。因此,人们会通过种种方式供奉这些动物,或者与其交流沟通,以期望得到它们的庇护和福佑。东北民
爱吃的食肆林立
十玄门
十玄门
(不系统,不无敌,不无脑,不套路,介意者甚入。)一段迷离身世开启一场荒唐故事。道不尽的是身不由己,放不下的是功名利欲。正宗邪魔,你方唱罢我方登场。慈悲喜舍,悲欢过后又是离合。强者雄长天下,弱者苟且偷安。天命难违,到头来不过都是一场闹剧。世事如棋,胜负难测,然细看之下,不过是黑中有白,白中有黑而已!
卖文小生