IT貓撲網：您身邊最放心的安全下載站！ 最新更新|軟件分類|軟件專題|手機版|論壇轉貼|軟件發(fā)布

您當前所在位置： 首頁 → 網絡編程 → PHP編程 → 用PHP程序統(tǒng)計蜘蛛是否訪問你的網站

用PHP程序統(tǒng)計蜘蛛是否訪問你的網站

時間：2015-06-28 00:00:00 來源：IT貓撲網 作者：網管聯盟 我要評論(0)

搜索引擎的蜘蛛訪問網站是通過遠程抓取頁面來進行的，我們不能使用JS代碼來取得蜘蛛的Agent信息，但是我們可以通過image標簽，這樣我們就可以得到蜘蛛的agent資料了，通過對agent資料的分析，就可以確定蜘蛛的種類、性別等因素，我們在通過數據庫或者文本來記錄就可以進行統(tǒng)計了。

數據庫結構：

#
# 表的結構 `naps_stats_bot`
#

CREATE TABLE `naps_stats_bot` (
  `botid` int(10) unsigned NOT NULL auto_increment,
  `botname` varchar(100) NOT NULL default '',
  `botagent` varchar(200) NOT NULL default '',
  `bottag` varchar(100) NOT NULL default '',
  `botcount` int(11) NOT NULL default '0',
  `botlast` datetime NOT NULL default '0000-00-00 00:00:00',
  `botlasturl` varchar(250) NOT NULL default '',
  UNIQUE KEY `botid` (`botid`),
  KEY `botname` (`botname`)
) TYPE=MyISAM AUTO_INCREMENT=9 ;

#
# 導出表中的數據 `naps_stats_bot`
#

INSERT INTO `naps_stats_bot` VALUES (1, 'Googlebot', 'Googlebot/2.X (+http://www.googlebot.com/bot.html)', 'googlebot', 0, '0000-00-00 00:00:00', '');
INSERT INTO `naps_stats_bot` VALUES (2, 'MSNbot', 'MSNBOT/0.1 (http://search.msn.com/msnbot.htm)', 'msnbot', 0, '0000-00-00 00:00:00', '');
INSERT INTO `naps_stats_bot` VALUES (3, 'Inktomi Slurp', 'Slurp/2.0', 'slurp', 0, '0000-00-00 00:00:00', '');
INSERT INTO `naps_stats_bot` VALUES (4, 'Baiduspider', 'Baiduspider+(+http://www.baidu.com/search/spider.htm)', 'baiduspider', 0, '0000-00-00 00:00:00', '');
INSERT INTO `naps_stats_bot` VALUES (5, 'Yahoobot', 'Mozilla/5.0+(compatible;+Yahoo!+Slurp;+http://help.yahoo.com/help/us/ysearch/slurp)', 'slurp', 0, '0000-00-00 00:00:00', '');
INSERT INTO `naps_stats_bot` VALUES (6, 'Sohubot', 'sohu-search', 'sohu-search', 0, '0000-00-00 00:00:00', '');
INSERT INTO `naps_stats_bot` VALUES (7, 'Lycos', 'Lycos/x.x', 'lycos', 0, '0000-00-00 00:00:00', '');
INSERT INTO `naps_stats_bot` VALUES (8, 'Robozilla', 'Robozilla/1.0', 'robozilla', 0, '0000-00-00 00:00:00', '');

 


PHP程序：

/***************************************************************************
* NAPS -- Network Article Publish System
* ----------------------------------------------
*                                 bot.php
*                            -------------------
*   begin                : 2004-08-15
*   copyright            : (C) 2004 week9
*   homepage             : http://europeautoinsurance.com
*                          http://bbs.itmop.com 
*
***************************************************************************/

/***************************************************************************
*
*   This program is free software; you can redistribute it and/or modify
*   it under the terms of the GNU General Public License as published by
*   the Free Software Foundation; either version 2 of the License.
*
***************************************************************************/

/***************************************************************************
*
*   NAPS產品是自由軟件。你可以且必須根據《GNU GPL-GNU通用公共許可證》的相關規(guī)定
*   復制、修改及分發(fā)NAPS產品。任何以NAPS產品為基礎的衍生發(fā)行版未必須經過飄飄的授權。
*
***************************************************************************/

error_reporting(E_ALL & ~E_NOTICE);

function get_naps_bot()
{
        $useragent = strtolower(
___FCKpd___0
SERVER['HTTP_USER_AGENT']);
if (strpos($useragent, 'googlebot') !== false){
return 'Googlebot';
}
if (strpos($useragent, 'msnbot') !== false){
return 'MSNbot';
}
if (strpos($useragent, 'slurp') !== false){
return 'Yahoobot';
}
if (strpos($useragent, 'baiduspider') !== false){
return 'Baiduspider';
}
if (strpos($useragent, 'sohu-search') !== false){
return 'Sohubot';
}
if (strpos($useragent, 'lycos') !== false){
return 'Lycos';
}
if (strpos($useragent, 'robozilla') !== false){
return 'Robozilla';
}
return false;
}
$tlc_thispage = addslashes(
___FCKpd___0
SERVER['HTTP_USER_AGENT']);
//添加蜘蛛的抓取記錄
$searchbot = get_naps_bot();
if ($searchbot) {
$DB_naps->query("UPDATE naps_stats_bot SET botcount=botcount+1, botlast=NOW(), botlasturl='$tlc_thispage' WHERE botname='$searchbot'");
}
?>

關鍵詞標簽：訪問,網站,是否,蜘蛛,

相關閱讀 ASP代碼中如何屏蔽ip地址 禁止某IP段訪問網站 MSSQL中幾個未公布的訪問注冊表的擴展存儲過程 七招破解Win XP訪問網絡慢的故障 在Oracle里設置訪問多個SQL Server 原神回聲海螺位置-原神回聲海螺攻略 利用A、G、DL、P策略來管理網絡資源訪問權限

文章評論
發(fā)表評論

熱門文章 plsql developer怎么連接數據庫-plsql developer連接數據庫方法 plsql developer怎么連接數據庫-plsql developer連接數據庫方法 2021年最好用的10款php開發(fā)工具推薦 2021年最好用的10款php開發(fā)工具推薦 php利用淘寶IP庫獲取用戶ip地理位置 php利用淘寶IP庫獲取用戶ip地理位置 在 PHP 中使用命令行工具 在 PHP 中使用命令行工具

相關下載

人氣排行 詳解ucenter原理及第三方應用程序整合思路、方法 plsql developer怎么連接數據庫-plsql developer連接數據庫方法 PHP中防止SQL注入攻擊 PHP會話Session的具體使用方法解析 PHP運行出現Notice : Use of undefined constant 的解決辦法 PHP如何清空mySQL數據庫 CakePHP程序員必須知道的21條技巧 PHP采集圖片實例（PHP采集）