糖果小说

手机浏览器扫描二维码访问

第17章 爬虫(第1页)

“接下来,就是试试获取小说的内容了。”

接下来,他开始编写程序以获取小说的详细信息和内容。

由于小说内容比较庞大,他决定把获取内容的频率放低。

毕竟是在奶茶店,店里面还有不少的人在使用着店里面提供的IFI。

如果他瞬时间向服务器的请求量过大,其他人的网络,基本上就会陷入瘫痪的状态。

他现在只是手痒痒了,想试试手,真正要爬取到足够多的小说数据,至少需要好几天的时间。

“接下来,就是见证奇迹的时刻。”

他开始启动他的爬虫程序,程序开始在小说网站上爬取小说的内容。

无数本小说的内容文字一闪而过,便进入了数据库之中。

“哟,还有点意思。”

他现,在爬取的过程中,点娘小说网站的反爬虫机制还算是不错,他的爬虫程序很快就被封禁了。

针对Ip的。

不过,他快升级了他的爬虫程序,加入了无数的Ip池,以及强大的识别验证码能力,使其更难被网站检测到。

“咦,看来我这掌握的五级信息技术,比我想象之中的要强!”

经过一番小小的折腾,点娘都市小说分类下的数百万本小说,全部进入了他的数据库里面。

“最强的点娘的反爬虫机制也不过如此。看来获取数据集的过程,会比我想象的简单不少。“

”那现在就是时间的问题了,等我爬取到足够多的小说数据集,就可以开始训练我的写小说aI模型了!”他心中充满了自信。

现在,就让小说模型先跑着吧。

今天是周末,奶茶店的人比往常多上不少,等到了快要歇业的时间里,铺子里还有不少的人。

林小玲没办法,只好延长了奶茶店的营业时间。

连带的,王卿一遍看着aI模型的训练,一遍记着单词。

“喂,我要下班了,咱们一起走吧。”

王卿还沉迷于互联网世界的新奇时,林小玲的声音传了上来。

他抬头一看,“都已经十二点了啊。”

“等我一会儿。”

“好,我在门口等你。”

林小玲没有上楼去,今天太累了,她就在楼下等着王卿收拾东西。

“怎么还没出来呀。”

她在店门口等了两三分钟,王卿那边还没有动静,就想上楼去看看。

还没有走到门口,便看到他扛着一台巨大的电脑主机和一个显示器,不禁笑了起来。

王卿嘴里喘着粗气,额头上挂着一粒粒细密的汗珠,身上的衬衫湿漉漉的贴在了背上。

他双手抱着一台电脑主机和一个显示器,像只蚂蚁一样艰难地从二楼的楼梯上下了来。

热门小说推荐
怎么办!闪婚后傲娇老公变忠犬

怎么办!闪婚后傲娇老公变忠犬

简介关于怎么办!闪婚后傲娇老公变忠犬季冉和6成江一见不钟情,本以为,一别两宽,再无瓜葛。谁承想!男人不依不饶追来要结婚,还顺手解决了她的难题。闪婚后,二人约法三章,互不干涉。没想到,后来高冷霸总变成从妻狂魔。默默支持她的一切老婆追求事业,我投钱!老婆极品亲戚,偷偷打跑。老婆渣男前任,手撕。...

快穿:任务目标靠脑补自我攻略了

快穿:任务目标靠脑补自我攻略了

简介关于快穿任务目标靠脑补自我攻略了在魔界吃喝玩乐,打架切磋的魔界小公主清梦觉得这个世界实在是太无聊了,想着要找些事情打打时间。想到自家大哥和好姐妹都去三千世界了,她也想要去看看这三千世界到底有什么好的,随手抓了一只魔兽当指引者,可是谁能告诉她为什么这些小世界里总有一个男人看着自己的眼神和说的话这么奇怪?她只是想去海里游个泳,清冷指挥官却慌了神梦梦,你不要我了吗?娃综上,幼年小反派悄咪咪凑到她耳边问我好喜欢你呀,可以跟我回家吗?体育系大佬恶狠狠道小同桌,你敢收下他的情书试试?修仙门派小师弟跟在魔尊大人身后魔尊大人,我愿意当你的魔尊夫人~隔壁小疯子邻居主动牵起她的手没关系,别害怕,我来当你的眼睛。末世刚捡到的丧尸大哥拉着自己的手努力开口m,ma,梦梦,贴贴一直扮演乖巧徒儿的某人师尊,这次可是你先动手的,待会可别清梦捂着自己的小腰感慨看来她也要从三千世界带一个对象回魔界了。凌轩你以为的不期而遇,其实是我蓄谋已久的喜欢。...

天灾末世:绝美总裁叫主人

天灾末世:绝美总裁叫主人

末世小说,非无脑无敌爽文,前期剖析末世人性,看不到六十章的建议勿点李逸帆从末日重生后回到末日爆前15天,却现他只有3o天寿命,而且没有所谓的空间来囤物资,只带回来一个奇怪的手表。为了在末世活得滋润,李逸帆抽干了贝加尔湖搬空漂亮国百亿仓库偷走岛国电子百货商场无意中现他那绝美总裁居然可以帮他续命?然而天灾末世绝美总裁叫主人...

盗墓:不小心成为九门独苗

盗墓:不小心成为九门独苗

又本书又名忽悠人技术哪家强,中国山东找萌萌。看萌萌如何靠着已知剧情做任务,拿奖励。顺便把这群人精中的人精忽悠瘸?嘿嘿!!七分真来两分假,还有一分靠你猜。做任务我没意见,但是你这任务能不能一块儿发,才将任务一认盗笔主线人物做爸爸的任务做完。你又让我认盗笔重要人物当大哥?系统兄弟,你这任务出的是认真的吗?重要人物,什...

《离婚后,跟前夫发生了意外》纪明烟霍清寒

《离婚后,跟前夫发生了意外》纪明烟霍清寒

纪明烟霍清寒纪明烟霍清寒霍清寒纪明烟霍清寒纪明烟离婚后,跟前夫发生了意外纪明烟霍清寒...

重回一把火

重回一把火

此人已彻底堕落,需要回炉重造。职场精英余文钢因为浪过头,被意外送回了世纪之交前的一九九九。重生后的他只有一个小目标,那就是活成自己喜欢的样子。重回一把火...

每日热搜小说推荐