不用插件，用代码生成wordpress蜘蛛爬行记录

  • A+
所属分类：网站seo

前言：用wordpress程序的都知道，用插件多了，肯定影响网站速度，所以大家做站的尽量少用插件，很文博客之前一直用wp-log-robots，原贴WordPress蜘蛛爬虫记录插件wp-log-robots使用方法，不过有了下面这个，这个插件可以退休了。

出于对网站优化的研究，清楚的了解蜘蛛爬行规律也是很重要的，我们就可以知道蜘蛛的爬行规律，根据这个规律我们再来写文章，这样符合了蜘蛛的胃口是很利于优化的。。。今天就教大家用代码完美实现wordpress蜘蛛爬行记录生成功能！

在wordpress主题文件目录下找到function（有的主题是functions）文件，主题具体路径是/wp-content/themes/里面，用代码编辑软件打开，在<?php ?>内的任意位置增加下面一段代码即可完成wordpress蜘蛛爬行记录生成的功能！

  1. // 蜘蛛爬行记录
  2. function get_naps_bot(){
  3. $useragent = strtolower($_SERVER['HTTP_USER_AGENT']);
  4. if (strpos($useragent, 'googlebot') !== false){
  5. return 'Googlebot';
  6. }
  7. if (strpos($useragent, 'msnbot') !== false){
  8. return 'MSNbot';
  9. }
  10. if (strpos($useragent, 'slurp') !== false){
  11. return 'Yahoobot';
  12. }
  13. if (strpos($useragent, 'baiduspider') !== false){
  14. return 'Baiduspider';
  15. }
  16. if (strpos($useragent, 'sohu-search') !== false){
  17. return 'Sohubot';
  18. }
  19. if (strpos($useragent, 'lycos') !== false){
  20. return 'Lycos';
  21. }
  22. if (strpos($useragent, 'robozilla') !== false){
  23. return 'Robozilla';
  24. }
  25. return false;
  26. }
  27. function nowtime(){
  28. date_default_timezone_set('Asia/Shanghai');
  29. $date=date("Y-m-d.G:i:s");
  30. return $date;
  31. }
  32. $searchbot = get_naps_bot();
  33. if ($searchbot) {
  34. $tlc_thispage = addslashes($_SERVER['HTTP_USER_AGENT']);
  35. $url=$_SERVER['HTTP_REFERER'];
  36. $file="robotslogs.txt";
  37. $time=nowtime();
  38. $data=fopen($file,"a");
  39. $PR="$_SERVER[REQUEST_URI]";
  40. fwrite($data,"Time:$time robot:$searchbot URL:$tlc_thispage\n page:$PR\r\n");
  41. fclose($data);
  42. }

原理：各大搜索引擎的蜘蛛爬行程序都有自己的标识符，例如谷歌的是googlebot，百度的是 baiduspider，当然，随着互联网的发展，上面这段代码在网上很多是没有搜狗、360搜索等引擎的标识符，这里你可以修改第四行到第23行进行修改或者增加标识符。

使用上面这段代码后，最好在网站的根目录创建个robotslogs.txt的文件，并且linux主机设置权限为777，然后过段时间，访问http://网址/robotslogs.txt 即可看到蜘蛛爬行记录了。当然你也可以修改robots.php文件的第36行，把robotslogs.txt换成任意你想要的名字。

一些说使用后出错的朋友，请研究下function文件内，插入的位置！

 

编后语：做站不易，贵在坚持。站长们还是已充实关键词为主，优化关键词，坚持才能实现理想，祝站长们商祺！

1 2 3