2018年最新搜索引擎蜘蛛大全 http://baijiahao.baidu/s?id=1601356735206436184&wfr=spider&for=pc
参考:php判断是爬虫在访问还是用户浏览器在访问 https://wwwblogs/xuexikun/p/4959441.html
/**
* 获取爬虫是否存在
* ture 去掉秒点#anchor
*/
public function get_spider_ua_exists()
{
$userAgent = strtolower($_SERVER['HTTP_USER_AGENT']);
$spiders = array(
'Baiduspider', // 百度爬虫
'360Spider',// 360爬虫
'Sogou web spider',// 搜狗爬虫
'Sosospider',// soso爬虫
);
foreach ($spiders as $spider) {
$spider = strtolower($spider);
// 查找有没有出现过
if (strpos($userAgent, $spider) !== false) {
return $spider;
}
}
return false;
}
更多推荐
php判断是爬虫在访问还是用户浏览器在访问
发布评论