网管程序员论坛

 找回密码
 注册

QQ登录

只需一步,快速开始

查看: 1106|回复: 0

ITMOP教你怎么查看百度蜘蛛有没有来你的网站

[复制链接]
发表于 2012-10-22 11:18:41 | 显示全部楼层 |阅读模式
怎么看百度蜘蛛有没有来你的网站? seo新手对搜索引擎蜘蛛可能有所了解。百度蜘蛛实际上是一种搜索引擎的一种抓取程序。百度的蜘蛛如果经常来你的网站,说明你的网站价值比较高。百度蜘蛛的经常光临还能提升你的收录率。本文介绍下,怎么看百度蜘蛛有没有来过你的网站?

要观察百度蜘蛛的爬行记录,最好的办法是通过查看网站日志。

只要你的网页被访问过,不管是人还是百度蜘蛛、或者其他搜索引擎蜘蛛。网站日志中都可以把它记录下来。正规的网站空间一般提供网站日志服务。网站日志的下载可以通过ftp。具体的目录可以咨询网站空间商。比较常见的目录有:www_logs、logs等。

如果网站空间不提供网站日志服务,你应该考虑更换网站空间了。因为这是最基本的网站空间服务。如果连网站日志记录功能都没有,说明空间质量肯定不会很高。

另外,如果你的网页是php动态的。即网页后缀为php。我们也可以安装一组查看蜘蛛的代码,来实时记录百度蜘蛛的爬行记录。

代码如下:

<?php

function get_naps_bot()

{

$useragent = strtolower($_SERVER['HTTP_USER_AGENT']);
if (strpos($useragent, ‘googlebot’) !== false){

return ‘Googlebot’;

}

if (strpos($useragent, ‘msnbot’) !== false){

return ‘MSNbot’;

}

if (strpos($useragent, ‘slurp’) !== false){

return ‘Yahoobot’;

}

if (strpos($useragent, ‘baiduspider’) !== false){

return ‘Baiduspider’;

}

if (strpos($useragent, ‘sohu-search’) !== false){

return ‘Sohubot’;

}

if (strpos($useragent, ‘lycos’) !== false){

return ‘Lycos’;

}

if (strpos($useragent, ‘robozilla’) !== false){

return ‘Robozilla’;

}

return false;

}

function nowtime(){

$date=date(“Y-m-d.G:i:s”);

return $date;

}

$searchbot = get_naps_bot();

if ($searchbot) {

$tlc_thispage = addslashes($_SERVER['HTTP_USER_AGENT']);

$url=$_SERVER['HTTP_REFERER'];

$file=”log.txt”;

$time=nowtime();

$data=fopen($file,”a”);

$PR=”$_SERVER[REQUEST_URI]“;

fwrite($data,”Timetime robotsearchbot URLtlc_thispage\n pagePR\r\n”);

fclose($data);

}

?>

将上面的代码保存成一个sp.php文件,将文件上传到网站根目录。然后使用一句php代码调用它即可。

<?php include(“sp.php”);?>        

当然,如果您的空间不支持php的话,或者你的网页为静态页面。则可以通过网站空间提供网站日志来查看百度蜘蛛的访问情况。
您需要登录后才可以回帖 登录 | 注册

本版积分规则

QQ|小黑屋|手机版|Archiver|最新更新|网管程序员社区 鄂ICP备11008024号-3

GMT+8, 2019-11-19 07:28 , Processed in 0.093600 second(s), 26 queries .

Powered by 网管论坛

© 2001-2018 www.027safe.com Inc.

快速回复 返回顶部 返回列表