PHP怎么统计nginx访问日志中的搜索引擎抓取404链接页面路径-创新互联

本篇内容主要讲解“PHP怎么统计nginx访问日志中的搜索引擎抓取404链接页面路径”，感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷，实用性强。下面就让小编来带大家学习“PHP怎么统计nginx访问日志中的搜索引擎抓取404链接页面路径”吧!

创新互联服务项目包括坡头网站建设、坡头网站制作、坡头网页制作以及坡头网络营销策划等。多年来，我们专注于互联网行业，利用自身积累的技术优势、行业经验、深度合作伙伴关系等，向广大中小型企业、政府机构等提供互联网行业的解决方案，坡头网站推广取得了明显的社会效益与经济效益。目前，我们服务的客户以成都为中心已经辐射到坡头省份的部分城市，未来相信会继续扩大服务区域并继续获得客户的支持与信任！

我在服务器上有每天切割nginx日志的习惯，所以针对每天各大搜索引擎来访，总能记录一些404页面信息，传统上我只是偶尔分析下日志，但是对于很多日志信息的朋友，人工来筛选可能不是一件容易的事情，这不我个人自己慢慢研究了一点点，针对谷歌、百度、搜搜、360搜索、宜搜、搜狗、必应等搜索引擎的404访问生成为一个txt文本文件，直接上代码test.php。

复制代码 代码如下:

//访问test.php?s=google
$domain='https://www.jb51.net';
$spiders=array('baidu'=>'Baiduspider','360'=>'360Spider',
'google'=>'Googlebot','soso'=>'Sosospider','sogou'=>
'Sogou web spider','easou'=>'EasouSpider','bing'=>'bingbot');
 
$path='/home/nginx/logs/'.date('Y/m/').(date('d')-1).'/access_www.txt';
 
$s=$_GET['s'];
 
if(!array_key_exists($s,$spiders)) die();
$spider=$spiders[$s];
 
$file=$s.'_'.date('ym').(date('d')-1).'.txt';
if(!file_exists($file)){
    $in=file_get_contents($path);
    $pattern='/GET (.*) HTTP\/1.1" 404.*'.$spider.'/';
    preg_match_all ( $pattern , $in , $matches );
    $out='';
    foreach($matches[1] as $k=>$v){
        $out.=$domain.$v."\r\n";
    }
    file_put_contents($file,$out);
}
 
$url=$domain.'/silian/'.$file;
echo $url;

好就这样了。没有什么高深的技术，只有动手写的过程。

到此，相信大家对“PHP怎么统计nginx访问日志中的搜索引擎抓取404链接页面路径”有了更深的了解，不妨来实际操作一番吧！这里是创新互联建站，更多相关内容可以进入相关频道进行查询，关注我们，继续学习！

当前题目：PHP怎么统计nginx访问日志中的搜索引擎抓取404链接页面路径-创新互联
转载注明：http://cdxtjz.cn/article/ceshgs.html