亚洲欧美日产综合一区二区三区-亚洲欧美日本综合一区二区三区-亚洲欧美日本一区-亚洲欧美日本国产一区二区三区-国产精品午夜电影

軟文營銷
當前位置: 四五合圍 > 網絡營銷知識 > 軟文營銷
Worepress 禁止PC首頁訪問 不影響蜘蛛抓取的方法
發布日期:2024-01-26 閱讀次數:

                                                                                                                       

作者:導航鴨 

                                                                     

一、wordpress 禁止PC首頁訪問 不影響蜘蛛抓取的方法
  • function block_homepage_for_pc() {
  •     if ( ! is_admin() && ! is_feed() ) {
  •         $user_agent = $_SERVER['HTTP_USER_AGENT'];
  •         if ( strpos( $user_agent, 'Googlebot' ) === false && strpos( $user_agent, 'Bingbot' ) === false && strpos( $user_agent, 'Slurp' ) === false && strpos( $user_agent, 'DuckDuckBot' ) === false ) {
  •             global $wp_query;
  •             $wp_query->set_404();
  •             status_header( 404 );
  •             get_template_part( 404 );
  •             exit();
  •         }
  •     }
  • }
  • add_action( 'template_redirect', 'block_homepage_for_pc' );
二、nginx 屏蔽網站首頁訪問 允許蜘蛛訪問的方法
  • location = / {
  •     if ($http_user_agent !~* (spider|bot|googlebot|bingbot|yandex|msnbot|slurp)) {
  •         return 403;
  •     }
  •     # other rules
  • }
三、NGINX 禁止PC訪問 不影響蜘蛛抓取的方法
  • if ($http_user_agent !~* (android|iphone|ipod|ipad|windows\s*phone|blackberry|symbian|bot|crawl|spider)) {
  •     return 403; # 拒絕所有 PC 訪問請求
  •     }
四、只禁止訪問首頁
  • set $PCindex "/path/to/pc/index.html";

  • location = / {
  •     if ($http_user_agent !~* "bot|crawler|spider") {
  •         return 403;
  •     }
  •     try_files $PCindex =404;
  • }
國內搜索引擎蜘蛛:Baidu: Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)
360: Mozilla/5.0 (compatible; 360Spider/1.0; +http://www.360.cn/spider.html)
Sogou: Sogou web spider/4.0(+http://www.sogou.com/docs/help/webmasters.htm#07)
Shenma: Mozilla/5.0 (compatible; ShenmaBot/1.0; http://www.shenma.com)
Yisou: Mozilla/5.0 (compatible; YisouSpider; +http://www.yisou.com/help/webmaster/spider.html)
Easou: EasouSpider; +http://www.easou.com/search/spider.html
國外搜索引擎蜘蛛:
Google: Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)
Bing: Mozilla/5.0 (compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm)
Yahoo: Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/help/us/ysearch/slurp)
Yandex: Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)
Baidu: Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)
DuckDuckBot: DuckDuckBot/1.0; (+http://duckduckgo.com/duckduckbot.html)
需要注意的是,蜘蛛的 User-Agent 可能會隨著搜索引擎的升級和更新而變化,因此這里列舉的 User-Agent 只是一些常見的,不一定是最新的。


本站訪客:291972 主站蜘蛛池模板: 国产成人综合亚洲一区 | 亚洲国产成人久久综合一区 | 影电影在线观看免费高清完整版 | 青草九九 | 夜色成人| 日韩欧美视频免费观看 | 性色爽爱性色爽爱网站 | 亚洲精品www久久久久久 | 在线精品免费视频 | 自拍偷拍免费视频 | 国产成人精品男人的天堂下载 | 色婷婷六月丁香在线观看 | 国产成人毛片精品不卡在线 | 亚洲短视频在线观看 | 欧美性精品hd在线观看 | 亚洲国产美女精品久久久久∴ | 欧美视频在线一区 | 亚洲一区二区在线成人 | 亚洲国产成人久久一区二区三区 | 免费电视剧在哪里看 | 精品综合网 | 自拍偷拍 欧美日韩 | 亚州无吗 | 免费视频色 | 自拍第二页 | 国产精品毛片久久久久久久 | 久久久午夜视频 | 国产中文久久精品 | 亚洲人成电影在线播放 | 色五月激情五月 | 偷拍视频免费观看 | 国产黄色免费看 | 婷婷四房综合激情五月性色 | 中文精品久久久久中文 | 亚洲精品一级片 | 久久精品成人一区二区三区 | 新国产视频| 久久久久久久国产精品毛片 | 男人天堂.com | 亚洲视频综合 | 丁香导航|