国内外有哪些爬虫大神的博客和书籍可以用来提升自己的？

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

推荐学习书目

› Learn Python the Hard Way

Python Sites

› PyPI - Python Package Index

› http://diveintopython.org/toc/index.html

› Pocoo

值得关注的项目

› PyPy

› Celery

› Jinja2

› Read the Docs

› gevent

› pyenv

› virtualenv

› Stackless Python

› Beautiful Soup

› 结巴中文分词

› Green Unicorn

› Sentry

› Shovel

› Pyflakes

› pytest

Python 编程

› pep8 Checker

Styles

› PEP 8

› Google Python Style Guide

› Code Style from The Hitchhiker's Guide

这是一个创建于 2451 天前的主题，其中的信息可能已经有所发展或是发生改变。

python 爬虫一年，想提升下自己涨点工资？

另外问一下各位老哥，爬虫的 1~2 年的薪资开多少合适？

爬虫

Python

老哥

薪资

24 条回复 • 2018-09-14 16:06:23 +08:00

gamecreating

2018-03-14 17:02:44 +08:00

百度

Nick2VIPUser

2018-03-14 17:04:06 +08:00

@gamecreating 不是不会百度，是想找各位有经验的大神推荐下优质资源～

p2pCoder

2018-03-14 17:06:10 +08:00

学习下 Android 和 ios ？

scriptB0y

2018-03-14 17:12:36 +08:00

不是大神，不过我博客有些爬虫的东西 https://www.kawabangga.com/?s=爬虫

另外涨工资这事我也可以帮你…… 欢迎投简历，邮箱见博客、

shiji

2018-03-14 17:14:00 +08:00 via Android

爬虫技术好像是在天朝发扬光大的。。国外专门搞爬虫的比较罕见。。。

vtwoextb

2018-03-14 17:24:47 +08:00

https://github.com/hizdm/dynamic_ip

Nick2VIPUser

2018-03-14 18:54:38 +08:00 via iPhone

@p2pCoder 为啥学安卓和 ios，现在不是岗位很少嘛～

Nick2VIPUser

2018-03-14 18:55:04 +08:00 via iPhone

@scriptB0y 谢谢大佬，很有帮助！！

p2pCoder

2018-03-14 19:06:57 +08:00 via Android

@Nick2VIPUser 用安卓和 ios 做爬虫功能

sadscv

2018-03-14 21:53:00 +08:00 via Android

《 Python 爬虫开发与项目实战》这本还不错，出版时间也不长，我就是跟着它学的。

https://item.m.jd.com/product/12206762.html

snal123

2018-03-14 22:00:54 +08:00 via iPhone

马克以后来看

golmic

2018-03-14 22:44:50 +08:00 via Android

公众号 pydatame，专注 python 数据相关，可以关注一下

yb0554

2018-03-14 23:15:45 +08:00 via Android

第一次回复，mark 一下，还不会需要的小白也很感兴趣

binux

2018-03-14 23:19:33 +08:00 via Android

@shiji 因为国外的爬虫很多都是用的第三方服务，不像国内每家公司都自建。

byis

2018-03-14 23:28:29 +08:00 via Android

@golmic 看了一下
养肥了再研究

MrGba2z

2018-03-14 23:43:05 +08:00

14L 就是爬虫大佬

ZoomQuiet

2018-03-15 09:26:51 +08:00 via iPhone

是也乎 ╮(╯▽╰)╭

那什么…爬虫再专精也难涨工资吧…

爬来的数据用起来…才能体现价值吧…

继续自学…完成从爬虫到分析 --> 推荐服务等等的开发?

将爬虫融入到一个完备的业务系统…能给公司带来直接收益~

那么…不涨…你就可以自己开公司了…不是嘛?

NullPoint

2018-03-15 10:02:31 +08:00

@scriptB0y 翻了翻博客，原来是以撒在线图鉴的作者，昨天还在看，emmmmm

soulmine

2018-03-15 10:10:48 +08:00

爬虫只是个苦力活而已你还要学会分析，存数据取数据分析数据然后挖掘数据最后写 ppt

scriptB0y

2018-03-15 10:47:58 +08:00

@NullPoint 那个好久没更新了…… 没有 DLC 的资料……

Nick2VIPUser

2018-03-15 12:55:37 +08:00 via iPhone

@golmic 好的，谢谢了🙏

Nick2VIPUser

2018-03-15 12:56:59 +08:00 via iPhone

@ZoomQuiet 有道理，方向就是往数据分析那块学，不过现在这些公司对数据分析数据挖掘学历专业限制太多了，心里没底

Nick2VIPUser

2018-03-15 12:57:48 +08:00 via iPhone

@soulmine 是了，很有道理，爬虫的技术面略窄

q3031031

2018-09-14 16:06:23 +08:00

楼主,请问爬虫如何进阶,我现在遇到两个瓶颈,一个是 app 的加密参数....完全不知道从哪下手,还有,有的 app 直接抓包失败(不是 https 协议的问题),在手机上无法显示网页,在 fiddler 显示 504 代码