首页   注册   登录
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  程序员

[python3] B 站用户数据收集...(重发)

  •  2
     
  •   cwjokaka · 65 天前 · 2415 次点击
    这是一个创建于 65 天前的主题,其中的信息可能已经有所发展或是发生改变。

    前天发了一次贴,秒沉。果然还是在大众摸鱼日发合适一点。

    写了一个爬虫,用于收集 B 站用户数据,算是学 python 的实践项目吧^_^

    第 1 条附言  ·  64 天前

    欢迎提建议,打算业余时间会添加新特性(获取更丰富的数据、数据统计等)

    19 回复  |  直到 2019-07-16 08:26:24 +08:00
        1
    locoz   65 天前
    太惨了,帮你捞一下
        2
    cwjokaka   65 天前
    @locoz 感谢,我也自顶一下
        3
    Deteriorator   65 天前
    帮你捞一下
        4
    xwcs   64 天前
    帮你捞一下
        5
    i0error   64 天前
    捞一下
        6
    i0error   64 天前
    去看了一下,很基础啊......建议有数据了分析一波再发。
        7
    cwjokaka   64 天前
    @i0error 是的,目前只是爬取阶段,而且相关数据内容有些少
        8
    hzwjz   64 天前
    按理说,不应该是在原帖的基础之上,想办法么?重复发帖了吧
        9
    cwjokaka   64 天前
    @hzwjz 是可以,但前天发的贴沉到海底,应该上不来了←_←
        10
    SpiderXiantang   64 天前 via Android
    用 dfs 爬取的吗
        11
    cwjokaka   64 天前
    @SpiderXiantang 没有.只简单调下接口而已
        12
    hjq98765   64 天前
    捞一下,学习学习
        13
    lzj307077687   64 天前
    刚开始学 py 学习下~
        14
    cwjokaka   64 天前
        15
    cwjokaka   64 天前
    ↑上去↑
        16
    cwjokaka   64 天前
    有哪里写的不足(bug)的地方可以说一说←_←(个人顶帖行为)
        17
    telnetning   64 天前 via iPhone
    楼主,是不是应该主动显示关闭下数据库连接
        18
    cwjokaka   64 天前
    @telnetning 是有这个问题,但我发现 worker 线程根本不用停下来。。。数据库连接也就不管了
        19
    cwjokaka   64 天前 via Android
    最后一顶
    关于   ·   FAQ   ·   API   ·   我们的愿景   ·   广告投放   ·   感谢   ·   实用小工具   ·   4149 人在线   最高记录 5043   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.3 · 21ms · UTC 02:52 · PVG 10:52 · LAX 19:52 · JFK 22:52
    ♥ Do have faith in what you're doing.