V2EX › nullboy 的所有回复 › 第 22 页 / 共 25 页

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

1 ... 14 15 16 17 18 19 20 21 22 23 ... 25

❮

❯

2019-09-24 16:36:18 +08:00

回复了 iampony 创建的主题 › 云计算 › 百度云智峰惠的云服务器， 1 年的价格很良心，薅一台试试怎么样。

@tf141 没薅到，说每日参加人数已达上限，请明日再来

2019-09-24 15:58:05 +08:00

回复了 Macolor21 创建的主题 › 程序员 › Spotify 是如何做到手机切换电脑的歌曲的.

手机上发送微信，电脑上居然收到了.............

2019-09-24 14:39:22 +08:00

回复了 Tiera 创建的主题 › Linux › 为什么使用 httpd 做正向代理,客户端打不开任何网站?

为啥要这个搞代理？安装一个代理服务不行？

2019-09-23 08:41:50 +08:00

回复了 ClericPy 创建的主题 › Python › selenium 调控 chrome 浏览器做爬虫有什么特殊功能是 cdp 做不到的吗

@ClericPy 我的爬虫放在阿里云上，阿里云 ip 被网站封掉了，然后我在自己家本地搭了一个代理服务，阿里云代理到家里宽带爬取数据，还有一个定时任务，如果监控到 ip 被封，通过 shell 命令重启路由器，重新获取 ip。
另外，个人感觉，selenium 出到 3 之后比以前稳定多了。什么程序挂掉，内存泄漏啥的，自己的程序做好异常处理不就完事了。算了，不说了

2019-09-23 08:36:15 +08:00

回复了 ClericPy 创建的主题 › Python › selenium 调控 chrome 浏览器做爬虫有什么特殊功能是 cdp 做不到的吗

代理自己部署一个 squid，然后在 chrome_options 中指定代理
chrome_options.add_argument('--proxy-server=http://xxxxxx:4128')

2019-09-23 08:34:36 +08:00

回复了 ClericPy 创建的主题 › Python › selenium 调控 chrome 浏览器做爬虫有什么特殊功能是 cdp 做不到的吗

@neoblackcap 无法修改 UA??????????
chrome_options = webdriver.ChromeOptions()
chrome_options.add_argument("user-agent=Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/74.0.3729.131 Safari/537.36")
driver = webdriver.Chrome(options=chrome_options)

2019-09-23 08:26:07 +08:00

回复了 ClericPy 创建的主题 › Python › selenium 调控 chrome 浏览器做爬虫有什么特殊功能是 cdp 做不到的吗

@neoblackcap 部署困难？用 docker 啊，remote driver https://github.com/SeleniumHQ/docker-selenium
功能限制怎么讲？

说内存泄漏的，多半是浏览器没关掉

2019-09-19 09:01:13 +08:00

回复了 kaiyiliu123 创建的主题 › Java › 迷茫…转行程序员 3 年，该会什么技术？

为啥要人带？
----------------------------
"三年没人带"

2019-09-18 18:34:05 +08:00

回复了 nyaruko 创建的主题 › 宽带症候群 › 悲报，江苏联通的 443 端口，不通了

我昨天就挂了。发了贴被移动到水深火热里了....

2019-09-18 11:11:50 +08:00

回复了 Renco 创建的主题 › 程序员 › 测试人员对于一个项目的作用有多大，为什么公司不请专门的测试人员进行测试，让开发人员和业务人员自己测.

作为一个测试人员，来这个公司快一年了就没测试啥项目。一直在搞爬虫...