V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
推荐学习书目
Learn Python the Hard Way
Python Sites
PyPI - Python Package Index
http://diveintopython.org/toc/index.html
Pocoo
值得关注的项目
PyPy
Celery
Jinja2
Read the Docs
gevent
pyenv
virtualenv
Stackless Python
Beautiful Soup
结巴中文分词
Green Unicorn
Sentry
Shovel
Pyflakes
pytest
Python 编程
pep8 Checker
Styles
PEP 8
Google Python Style Guide
Code Style from The Hitchhiker's Guide
AmberZhang
V2EX  ›  Python

北京——Python 高级爬虫

  •  
  •   AmberZhang · 2016-04-06 21:51:55 +08:00 · 3618 次点击
    这是一个创建于 3156 天前的主题,其中的信息可能已经有所发展或是发生改变。
    [高级爬虫工程师]
    岗位要求:
    1. 3 年以上 Java 或 python 开发经验,熟悉常用的信息抓取策略和数据重组算法;
    2. 精通信息抓取和整合技术,从结构化的和非结构化的数据中获取信息,掌握 XPath 和正则表达式;对模拟登录有经验者优先;
    3. 熟悉大规模网页爬取,深度网页爬取,熟悉分布式爬虫系统设计, Scrapy 、 Nutch 、 Heritrix 、 WebMagic 、 Lucene/Solr 等工具者优先;
    4. 熟悉基于 Linux/Unix 平台的开发,熟悉 TCP/IP , HTTP 等协议;
    5. 了解 Mongodb 、 HBase 、 HIVE 等 NoSQL 数据库,并至少精通一种关系型数据库的开发;
    6. 细致、耐心,能够指导新人;
    岗位职责:
    1. 参与核心爬虫系统架构设计、数据库设计;
    2. 设计策略和算法,提升网页抓取的数量、效率和质量;
    3. 分析爬虫系统的技术缺陷,对策略架构做出合理地调整和改进;
    4. 负责爬取社交网站及论坛文章、评论等,及时高效更新;

    [薪酬范围] : 15---30k

    [地点] :北京朝阳区

    [公司优势] :
    1.具有市场竞争力的薪酬、期权;
    2.富有挑战性和成就感的工作, 和优秀的团队一起打磨卓越产品的平台;.
    3.位于北京 CBD 的园区式办公室,由哈佛大学设计学博士 友情设计;
    4.五百多本中英文原版书的办公室图书馆。从最新的数据挖掘手册,到硅谷,同步的创业新典,到贡布里克的艺术史……


    我的微信: 741966067 (备注姓名)
    投递简历方式: [email protected]

    我是专注 python 领域的猎头 Amber,估计很多 python 工程师已经和我接触过了~~希望多多结交 Python 工程师,期待你的到来~~
    4 条回复    2016-04-08 06:51:48 +08:00
    hh4062703
        1
    hh4062703  
       2016-04-07 07:34:06 +08:00 via iPhone
    支持一下
    Ellen
        2
    Ellen  
       2016-04-07 10:12:10 +08:00
    二排支持一下
    AmberZhang
        3
    AmberZhang  
    OP
       2016-04-07 18:36:10 +08:00
    有人回复,好开心,谢谢支持,以后要常来这里
    mongost3t
        4
    mongost3t  
       2016-04-08 06:51:48 +08:00
    好奇为什么要熟悉 TCP/IP ,自己撸了一套爬虫轮子吗?
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   1420 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 23ms · UTC 23:45 · PVG 07:45 · LAX 15:45 · JFK 18:45
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.