小赖子的英国生活和资讯

FACEBOOK 爬虫使用 IPv6 地址

阅读 桌面完整版

IPv4 地址已经快不够用了 IPv6 还不是很普及.

FACEBOOK 也有网络爬虫. 取名为 FACEBOT, 它们的USER-AGENT字符串是 (User Agent 是一串可以用来识别爬虫访问者身份的字符串, 可以通过这个英文在线工具 User Agent Parser来分析):

facebookexternalhit/1.1 (+http://www.facebook.com/externalhit_uatext.php)
facebookexternalhit/1.1
Facebot

系统在线 这个网络应用里 我们捕捉到了FACEBOT的身影 并且惊奇的发现 它们是用IPV6地址进行抓取的, 这些来自于 Facebook.

facebots – ipv6

IPV6 的数量据说比 全世界的沙子还多 不知道真的假的.

英文: FACEBOOK 爬虫使用 IPv6 地址

facebook-hacker

强烈推荐

微信公众号: 小赖子的英国生活和资讯 JustYYUK

阅读 桌面完整版
Exit mobile version