V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
推荐学习书目
Learn Python the Hard Way
Python Sites
PyPI - Python Package Index
http://diveintopython.org/toc/index.html
Pocoo
值得关注的项目
PyPy
Celery
Jinja2
Read the Docs
gevent
pyenv
virtualenv
Stackless Python
Beautiful Soup
结巴中文分词
Green Unicorn
Sentry
Shovel
Pyflakes
pytest
Python 编程
pep8 Checker
Styles
PEP 8
Google Python Style Guide
Code Style from The Hitchhiker's Guide
ZoeYn
V2EX  ›  Python

走爬虫好还是走后端好?

  •  
  •   ZoeYn · 151 天前 · 3904 次点击
    这是一个创建于 151 天前的主题,其中的信息可能已经有所发展或是发生改变。

    python 工作一年了,做过爬虫和小网站

    python 用来爬虫看起来比后端合理?但是以目前的能力阶段可能会更喜欢后端一点,但是仿佛又存在 python 做后端的就业环境,如果做后端是否要转语言呢?

    36 条回复    2021-07-02 10:40:27 +08:00
    wzymmy
        1
    wzymmy   151 天前 via iPhone   ❤️ 14
    爬虫写的好,牢饭吃得早(口胡)
    herich
        2
    herich   151 天前
    我刚开始做过一年左右的爬虫, 后来业务需要用 go 写后端去了,这条路子非常适合现在的你
    yitingbai
        3
    yitingbai   151 天前   ❤️ 1
    后端是 Java 的天下, 虽然有很多人不愿意承认
    Morriaty
        4
    Morriaty   151 天前
    我一直不理解,除了百度、头条爬虫这种级别,其他什么类型的公司需要一个专职做爬虫的岗位...往往说是爬虫工程师,都或多或少带点 web 后端的工作(写个页面展示数据)吧?
    MarkLeeyun
        5
    MarkLeeyun   151 天前
    爬虫不行。后端吧。。。。
    Fenglin0721
        6
    Fenglin0721   151 天前
    走后端,和爬虫不完全冲突,后端方面更广,建议后端。单单做爬虫就把格局做小了
    TAFMT
        7
    TAFMT   151 天前
    我大学是学爬虫的,现在转到后端了。。。
    3dwelcome
        8
    3dwelcome   151 天前
    后端好一些,爬虫每天就是在电脑面前发呆,等着下载进度。

    还要看天吃饭,万一有一天官方不开心封你号,凭空又多一堆麻烦事。
    fire2y
        9
    fire2y   151 天前
    不能做单一的 开始我也是会爬虫 后面公司倒闭了 发现自己只会爬虫 单独爬虫的公司又很少 所以还是建议最起码的后端是要会的
    czfy
        10
    czfy   151 天前
    从长远来看,肯定是走后端好的
    从短期来看,爬虫短时间内工资可能会开得比较高,但风险也更高
    Jooooooooo
        11
    Jooooooooo   151 天前
    后端肯定天花板更高
    no1xsyzy
        12
    no1xsyzy   151 天前   ❤️ 1
    @yitingbai 如果你不确定自己想做什么东西,请使用 Java 。这是一种糟糕的编程语言,但几乎无所不能。
    tumaowolf
        13
    tumaowolf   151 天前 via Android   ❤️ 1
    重要的是 java 吗?重要的是 spring boot
    aru
        14
    aru   151 天前
    还有考虑?肯定是后端啊
    auh
        15
    auh   151 天前
    后端简单,爬虫水深
    zhangxh1023
        16
    zhangxh1023   151 天前
    小爬虫已经转行 java 了。。。。真不行这行当
    ipwx
        17
    ipwx   151 天前
    @Morriaty 数据分析的岗位很可能需要爬虫。比如,做量化投资。。。
    ipwx
        18
    ipwx   151 天前
    不过其实这种公司需要的不仅仅是爬虫,还需要这个岗位的人运维数据库、还要有一点点数据分析的能力才行。那这种岗位肯定是 Python 没跑了。
    HankLu
        19
    HankLu   151 天前
    宁要后端一棵草,不要爬虫一枝花
    luo31
        20
    luo31   151 天前 via Android
    爬虫好
    kingfalse
        21
    kingfalse   150 天前
    能转就早点转,不然后面会发现路越走越窄了.前车之鉴
    Nich0la5
        22
    Nich0la5   150 天前
    大公司 python 要的少 转 java 后端了
    Morriaty
        23
    Morriaty   150 天前
    @ipwx 对的,我的意思是相对于百度爬虫工程师,这种小爬虫工程师更应该称为数据分析工程师吧,核心技能点时 excel 、pandas 和业务理解吧
    Morriaty
        24
    Morriaty   150 天前
    在明确下,如果是大规模爬虫,我觉得还是很有钱途的,核心技能点是大规模队列、分布式数据库
    WilliamYang
        25
    WilliamYang   150 天前
    有人曾经问我,工作里面遇到哪些计算机相关的难题是最难解决的,是分布式,高并发吗,人工智能?我告诉他,这些都不是,爬虫比这些难多了,上面的问题,再难都可以解决,解决了就是解决了,而爬虫,今天弄好的完美的方案,明天就被改了,突然间要排查发生了什么问题,是自己的还是对方的,如果是对方的,又要知道对方更新了什么,知道了又要改,最后周末还在加班都不一定搞完。所以再高工资都没用,根本就不是自己能控制的,写一个自己不能控制稳定运行的程序有意思吗
    linyuyizhizou
        26
    linyuyizhizou   150 天前
    @WilliamYang 爬虫具有对抗性,让工作充满挑战和趣味。=。=
    wuwukai007
        27
    wuwukai007   150 天前
    杭州那边爬虫招的蛮多的
    ch2
        28
    ch2   150 天前
    反爬虫只需要做到让月薪一两万的觉得难度大不合算就够了
    就是因为对付实力更强的有法律武器
    没几个人有月薪三四万的技术能力还去做爬虫的
    有这种实力的人去干爬虫,干得好反手就是一个坐牢
    干后端照样能挣得不少还安全,你说你选哪一个
    wy9899
        29
    wy9899   150 天前
    爬虫好
    xingzhi
        30
    xingzhi   150 天前
    爬虫只能说是研发的一小块分支,即便是大规模分布式爬虫,用到的大部分也是后端的知识。
    爬虫的对抗性问题,更重要的是观察和分析的能力,以及思维是否灵活,来来去去就那些套路而已。
    ZoeYn
        31
    ZoeYn   149 天前
    @kingfalse 越走越窄的意思是....愿闻其详
    ZoeYn
        32
    ZoeYn   149 天前
    @WilliamYang 你说到我心坎儿去了。。。。
    flytsuki
        33
    flytsuki   149 天前
    爬虫容易入狱吧
    SpiderXiantang
        34
    SpiderXiantang   149 天前
    后端
    DogMingDD
        35
    DogMingDD   149 天前
    去搞机器学习呀
    zh584728
        36
    zh584728   147 天前
    我就不一样了,我想走前端
    关于   ·   帮助文档   ·   API   ·   FAQ   ·   我们的愿景   ·   广告投放   ·   感谢   ·   实用小工具   ·   1058 人在线   最高记录 5497   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 29ms · UTC 22:52 · PVG 06:52 · LAX 14:52 · JFK 17:52
    ♥ Do have faith in what you're doing.