一般情况下,百度真蜘蛛的IP是220.181开头和123.125开头,如果统计中出现其他可疑百度蜘蛛的IP,可以通过以下方法进行识别,碰到假的百度IP占用资源的话可以屏蔽它!
windows可以通过cmd命令 nslookup 进行反解析IP
操作流程:
运行——CMD——输入nslookup IP(例如 nslookup 220.181.108.100)然后回车。
这个时候,就能查询到IP的hostname,如果是以 *.baidu.com的格式命名,则为百度真蜘蛛,如果不是。表示为伪装的百度假蜘蛛。
在linux系统,可以使用host ip命令反解ip来判断是否来自Baiduspider的抓取。Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为假蜘蛛
在mac os平台下,您可以使用dig 命令反解ip来 判断是否来自Baiduspider的抓取。打开命令处理器 输入dig xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 来判断是否来自Baiduspider的抓取,Baiduspider的hostname以 *.baidu.com 或*.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为假蜘蛛
© 版权声明
THE END
暂无评论内容