发现好多人都在"城市"这个主题下发转租/租房帖子,索性抓了一波到"地图搜租房"里面

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

已注册用户请登录

这是一个创建于 2711 天前的主题，其中的信息可能已经有所发展或是发生改变。

代码没什么看的不 Show 了。

主要逻辑也就抓到数据直接判断 Title 里面是不是包含"租房"、“转租”、“出租”之类的字段，

有的话扔给 jieba 分词尝试提取一下价格，然后再把数据扔给高德 API 尝试获取一下定位经纬度。

效果照旧是这样:

感觉定位也不是很准...

估计还有 Bug?

扩展阅读:

话说管理员不会 gang 我吧....

8 条回复 2018-11-20 21:15:34 +08:00

w2er

2018 年 11 月 20 日 via iPhone

挺好玩，又实用

init6reboot

2018 年 11 月 20 日 via Android

我一直以为是二手交易主题的

CEBBCAT

2018 年 11 月 20 日

robots.txt :
User-agent: *

Disallow: /backstage/
Disallow: /signin
Disallow: /signout
Disallow: /settings
*EOF*
所以应该没有关系？我也没见管理员在某方地方标注出关于爬虫的规则（待求正）

idcspy

2018 年 11 月 20 日

挺好的，大神能把源码放 gayhub 让我学习学习吗？

codelover2016

2018 年 11 月 20 日

@init6reboot 这个...要的话改下代码估计也行.

codelover2016

2018 年 11 月 20 日

@CEBBCAT 本来我想走 API 的,在 V2EX 讨论群也加了主题,然而没人理我.

codelover2016

2018 年 11 月 20 日

@idcspy 你是想看爬这个的代码还是地图的代码?我之前写过这个[半个小时教你写一个毕设之地图搜租房]( t/457018#reply19)

地图定位的基本原理是这里的.

codelover2016

2018 年 11 月 20 日

@idcspy 整个地图搜租房的项目代码在这里:[liguobao/58HouseSearch]( https://github.com/liguobao/58HouseSearch)
不过这个代码估计不太好看.