有啥推荐的小说我抓取过来一块看呗

好奇爬虫是如何实现的？方便的话共享下思路
搜索没有的小说是否会自动抓取？ 是否要手动处理 怎么取正文的内容
之前在做的 一直无法做得很好

目前小说是要手工录入的，还没做到那么自动化
取正文的内容用的php dom对象的xpath实现的，针对不同的网站实现不同的匹配就行了，是个体力活

555 跟我实现的一样 但当有几百个人在看不同类型的小说时 就崩溃了 完全无法满足

这还不简单，在淘宝上买个带数据库的小说站，自己倒一遍就行了，就几十块钱

//我居然看到了凤凰面具
网页似乎没有居中啊……
linux + Chrome

都是已有小说就没有吸引力了 处理的绝大部份都是正在连载的小说

大陆的所谓奇幻和武侠修真的都没法看啊楼主

网络小说的话，已完结的推荐《阿里布达年代祭》、《风姿物语》，未完结的有《妖刀记》、《六朝清羽记（系列）》（呃。。除了风姿物语，其他三个都是H的。。。）
上述这些都是台湾作者的，仅仅是做推荐阅读，但是否适合放到你这个站上，个人觉得不太合适，毕竟涉及版权。

凡人修仙传啊。。。。传说中的大坑啊

@jedicxl 别逗了 都抓取了哪还有考虑版权问题

@shierji 凡人修仙传的人物塑造和剧情实在是我看过的网络小说中数得着的烂的，文笔也差的一比。但是很奇特的是想象力却还算不错。整篇小说基本就靠想象力撑起来了

@shierji 我想问一下凡人修传写完没。。。我没毕业就看了，已经5年多了

@jedicxl 冲这个说法我要去看看了。。

等你抓好了我再抓你的

我干过 http://www.shupeng.com/netnovel 是我抓的，带内容

@joyqi 据说要完结了。。。。

D坂杀人事件 (午夜文库) 江户川乱步
龙文身的女孩 斯蒂格拉森 (Stieg Larsson)
日瓦戈医生 (诺贝尔文学经典) 帕斯捷尔纳克
白银时代 (时代三部曲) 王小波
一九八四(译文名著精选) 奥威尔(George Orwell)
动物农场 (译文经典) 乔治奥威尔(George Orwell)
黑客与画家:硅谷创业之父Paul Graham文集 阮一峰
悟空传(完美纪念版) 今何在
诺贝尔文学奖作品典藏书系：鼠疫 A.加缪
福尔摩斯探案大全集(超值金版) (家庭珍藏经典畅销书系：超值金版) 阿瑟柯南道尔(Arthur Conan Doyle)
明朝那些事儿(第5部):帝国飘摇 当年明月
明朝那些事儿(第6部):日暮西山 当年明月
明朝那些事儿(第4部):粉饰太平 当年明月
明朝那些事儿(第7部):大结局 当年明月
明朝那些事儿(第3部):妖孽宫廷 当年明月
明朝那些事儿(第2部):万国来朝 当年明月
明朝那些事儿(第1部):洪武大帝 当年明月
塔希里亚故事集3 吴淼
帝国最后的荣耀:大明1592抗日援朝(套装共2册) 马伯庸
追风筝的人 胡赛尼

刀剑神域
樱花庄的切糕女友

《无限恐怖》

去抓安卓搜狗阅读的api

具体是哪个网站，分析网站的结构，然后抓？

《修真世界》绝对要入啊！

http://www.lkong.net/book.php
龙空的推书榜，个人比较认可。

没人看雪中悍刀行？

我是个算命先生

大家看的书五花八门哈哈，真是繁荣

嗷嗷嗷，我也想做这样一个扒小说的东西很久了，抓文本正文容易，用Readability就行了，就怕是图片正文然后要求重排以适应不同大小屏幕（移动设备），其实貌似也有现成算法和实现了（k2pdfopt）。。。万事俱备，只欠动力。。。

@Tiny 我看。。千万别太监 别太监 别太监。。

livid竟然还没出来说「请不要在V2EX讨论盗版」~

@xlaslx 感觉还有大半没写，期待啊~

赞！喜欢这种不带修饰的文字版站点，就是用 Safari mobile 版本看字略小。

猫腻写的几部都不错啊

猫腻最近停更了啊...
最近在追 升邪, 很有意思

风姿物语

在追方想大大的《不败战神》，最近申请了Mailgun的免费账户，正在写定时抓取更新并将内容发送到邮箱的脚本。