V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
codelover2016
V2EX  ›  C

发现好多人都在"城市"这个主题下发转租/租房帖子,索性抓了一波到"地图搜租房"里面

  •  
  •   codelover2016 · 2018-11-20 00:10:02 +08:00 · 3002 次点击
    这是一个创建于 1956 天前的主题,其中的信息可能已经有所发展或是发生改变。

    代码没什么看的不 Show 了。

    主要逻辑也就抓到数据直接判断 Title 里面是不是包含"租房"、“转租”、“出租”之类的字段,

    有的话扔给 jieba 分词尝试提取一下价格,然后再把数据扔给高德 API 尝试获取一下定位经纬度。

    效果照旧是这样:

    https://house-map.cn 上海-e2ex

    https://house-map.cn 北京-e2ex

    感觉定位也不是很准...

    估计还有 Bug?

    扩展阅读:

    8102 北上广深租房不靠谱指南

    话说管理员不会 gang 我吧....

    8 条回复    2018-11-20 21:15:34 +08:00
    w2er
        1
    w2er  
       2018-11-20 01:25:29 +08:00 via iPhone
    挺好玩,又实用
    init6reboot
        2
    init6reboot  
       2018-11-20 01:27:14 +08:00 via Android
    我一直以为是二手交易主题的
    CEBBCAT
        3
    CEBBCAT  
       2018-11-20 01:28:06 +08:00   ❤️ 1
    https://www.v2ex.com/robots.txt :
    User-agent: *

    Disallow: /backstage/
    Disallow: /signin
    Disallow: /signout
    Disallow: /settings
    *EOF*
    所以应该没有关系?我也没见管理员在某方地方标注出关于爬虫的规则(待求正)
    idcspy
        4
    idcspy  
       2018-11-20 11:22:08 +08:00
    挺好的,大神能把源码放 gayhub 让我学习学习吗?
    codelover2016
        5
    codelover2016  
    OP
       2018-11-20 21:12:04 +08:00
    @init6reboot 这个...要的话改下代码估计也行.
    codelover2016
        6
    codelover2016  
    OP
       2018-11-20 21:12:55 +08:00
    @CEBBCAT 本来我想走 API 的,在 V2EX 讨论群也加了主题,然而没人理我.
    codelover2016
        7
    codelover2016  
    OP
       2018-11-20 21:14:16 +08:00
    @idcspy 你是想看爬这个的代码还是地图的代码?我之前写过这个[半个小时教你写一个毕设之地图搜租房]( https://www.v2ex.com/t/457018#reply19)

    地图定位的基本原理是这里的.
    codelover2016
        8
    codelover2016  
    OP
       2018-11-20 21:15:34 +08:00
    @idcspy 整个地图搜租房的项目代码在这里:[liguobao/58HouseSearch]( https://github.com/liguobao/58HouseSearch)
    不过这个代码估计不太好看.
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   我们的愿景   ·   实用小工具   ·   4532 人在线   最高记录 6543   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 38ms · UTC 09:58 · PVG 17:58 · LAX 02:58 · JFK 05:58
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.