想要爬一些网站练手，纸上谈兵太无聊了。
求可爬网站(反爬策略对新手友好的那种)
求可爬网站(反爬策略对新手友好的那种)
推荐学习书目 Learn Python the Hard Way Python Sites PyPI - Python Package Index http://diveintopython.org/toc/index.html Pocoo 值得关注的项目 PyPy Celery Jinja2 Read the Docs gevent pyenv
This topic created in 2862 days ago, the information mentioned may be changed or developed.
 | 1 ml1344677 Jul 26, 2018  8 反爬策略仅限于验证码的网站：安居客（拿下某地所有房源数据） 封禁 IP 的网站：房天下（拿下某地所有房源数据） 不封禁 IP 但是传给你错误数据的网站：高德地图（点击某个 POI 点出现某地块轮廓，要求大量爬取轮廓） 通过翻页方式和异步加载限制爬虫的网站：豆瓣（个人认为主要考察爬取策略） |
 | 2 dbow Jul 26, 2018 亚马逊试试？ |
 | 3 OpenJerry Jul 26, 2018 via Android 还在上学的话可以试试爬学校教务，做个教务的命令行客户端，或者自动抢课之类的 |
 | 4 XxxxD &bsp; Jul 26, 2018 目前遇到的挺多都还挺友好的，试试盗版小说网站和图片网站 |
 | 5 tt67wq Jul 26, 2018 1 |
 | 6 wzwwzw Jul 26, 2018 淘宝，京东，各大电商网站。 |
 | 7 LeungV2 Jul 26, 2018 PY 爬虫吗？ 好像挺好玩的 |
 | 8 zdnyp Jul 26, 2018 看兴趣呀，比如喜欢玩 LOL 的，把各个英雄的出场率、胜率啥的都抓来，喜欢音乐的就爬音乐站，喜欢电影的爬电影站... 实在没啥兴趣，搞爬虫干啥... |
 | 9 unforgiven Jul 26, 2018 2 如果你是新手 只是练练手的话 最好的实验对象是色情小网站 |
 | 10 alen Jul 26, 2018  |
 | 11 Lwf1995 Jul 26, 2018 via Android @unforgiven 同意，我试过。哇咔咔。 |
 | 13 yykrlc Jul 26, 2018 搜狗.微信欢迎你。XX 小网站一般需要翻墙爬比较快... |
 | 14 nciyuan Jul 26, 2018 via Android 感觉之前 wget -m 就把 Apache Httpd 整站爬下来了.........是不是我有错片场了？ |
 | 15 0x5f Jul 26, 2018 爬电影站 小电影站只要爬的慢一点 不会反爬 |
 | 16 Leigg Jul 26, 2018 via iPhone www.bigcilin.com ，旅途愉快 |
 | 17 dd99iii Jul 26, 2018 按兴趣 |
 | 18 easylee Jul 26, 2018 开着梯子干 91 啊，绝对好爬，兄弟爬到了记得发我一份哈。 |
 | 19 tuding Jul 26, 2018 这车开得猝不及防 |
 | 20 Linxing Jul 27, 2018 今日头条爬一波吧 |
 | 21 ithou Jul 27, 2018 via Android 教务系统吧。期末考试过后成绩还没出完，所以我前几天做了一个爬虫，实时推送教务成绩到邮箱。 链接就不给了，因为每个学校不一样。 |
 | 22 JCZ2MkKb5S8ZX9pq Jul 27, 2018 之前看过几个慈善筹款网站，可以看看资金流量、存量和发起人频度等等的，能有所发现。 |
 | 23 zhangpeter Jul 27, 2018 你可以看一下我的 Python 爬虫项目集合： https://github.com/zhang0peter/spider |
 | 24 MES Jul 27, 2018 |
 | 25 yokon Jul 27, 2018 |
 | 28 sxd96 Jul 29, 2018 学校教务处成绩啊课表啊抢课啊，是不错的，入门这个挺好，还可以给同学用，有成就感。 |
Select Language