百度是怎么爬取 Twitter， Google 等被墙网站的网页的？
researchery · 2023-08-12 17:00:46 +08:00 via Android · 1781 次点击这是一个创建于 505 天前的主题，其中的信息可能已经有所发展或是发生改变。
比如在百度中搜索 site:twitter.com
 |
1
opengps 2023-08-12 17:53:34 +08:00
百度有海外节点的，但 twitter 似乎故意不允许 google 之外收录
https://twitter.com/robots.txt |
 |
2
em70 2023-08-12 18:05:48 +08:00
百度云开个海外服务器不就行了
|
 |
3
BugCry 2023-08-12 19:03:14 +08:00 via Android
因为有的百度用户能翻墙(误
|
 |
4
wdlth 2023-08-12 19:22:38 +08:00
百度在美国、日本和香港特区等有服务器
|
 |
5
cocoalovecoke 2023-08-12 19:26:58 +08:00 via Android
企业有境外服务器和专线吧
|
 |
6
Andim 2023-08-12 19:29:38 +08:00
就像楼上各们说的，中国屏蔽了全世界的媒体，但全世界却没屏蔽中国媒体，甚至有 CGTN America 这个在美国的中国电视台
|
Select Language