最新公告
  • 欢迎您光临苏果儿博客资源站,本站QQ/微博注册登陆即送SVIP果帝会员 立即加入我们
  • wordpress教程|屏蔽百度等搜索引擎抓取解决方法

    有些站长比较喜欢将站点上线测试(不喜欢在本地测试),但是又不想被百度等搜索引擎抓取,那么应该怎么暂时屏蔽呢?今天 boke112 就跟大家简单介绍几种方法。

    方法一:

    WordPress 站点可以直接登录站点后台 >> 设置 >> 阅读 >> 勾选“建议搜索引擎不索引本站点”并点击【保存更改】即可。

    方法二:

    直接在网站根目录中新建一个 robots.txt 文件,然后在文件中添加以下代码:

    User-Agent: *
    
    Disallow: /
    

    方法三:

    通过 noindex 标记来禁止,直接在站点的头文件 header.php 文件中添加以下代码:

    <meta name="robots" content="noindex" >
    

    方法四:

    通过 PHP 代码禁止(wordpress 站点为例),将以下代码添加到主题目录的 functions.php 当中:

    ob_start("Deny_Spider_Advanced");
    
    function Deny_Spider_Advanced() {
    
    $UA = $_SERVER['HTTP_USER_AGENT'];
    
    $Spider_UA = '/(spider|bot|)/i'; //定义需要禁止的蜘蛛 UA,一般是 spider 和 bot
    
    //如果检测到 UA 不为空而且发现是蜘蛛则返回 404
    
    if($UA && preg_match_all($Spider_UA,$UA)) {
    
    header('HTTP/1.1 403 Forbidden');
    
    header("status: 403 Forbidden");
    
    }
    
    }
    

    可以自行替换或添加以上的 spider|bot,多个用|隔开即可。

    方法五:

    Nginx 禁止,在 server{}中添加以下代码:

    #如果抓取的 UA 中含有 spider 或 bot 时返回 403
    
    if ($http_user_agent ~* "spider|bot") {
    
    return 403; #如果是删除已收录的,则可以返回 404
    
    break;
    

    可以自行替换或添加以上的 spider|bot,多个用|隔开即可。

    方法六:

    Apache 禁止,在.htaccess 中添加以下代码:

    RewriteEngine On
    
    RewriteCond %{HTTP_USER_AGENT} (^$|spider|bot) [NC]
    
    RewriteRule ^(.*)$ - [F]
    

    可以自行替换或添加以上的 spider|bot,多个用|隔开即可。

    1. 本站所有资源来源于用户上传和网络,如有侵权请邮件联系站长![email protected]
    2. 您必须在下载后的24个小时之内,从您的电脑中彻底删除上述内容资源!
    3. 如果你也有好源码或者教程,可以到审核区发布,分享有金币奖励和额外收入!
    4. 本站提供的源码、模板、插件等等其他资源,都不包含技术服务请大家谅解!
    5. 如有链接无法下载、失效或广告,请联系管理员处理!
    6. 本站资源售价只是赞助,收取费用仅维持本站的日常运营所需!
    7. 本站不保证所提供下载的资源的准确性、安全性和完整性,源码仅供下载学习之用!
    8. 如用于商业或者违法用途,与本站无关,一切后果请用户自负!

    苏果儿博客 » wordpress教程|屏蔽百度等搜索引擎抓取解决方法

    常见问题FAQ

    免费下载或者VIP会员专享资源能否直接商用?
    本站所有资源版权均属于原作者所有,这里所提供资源均只能用于参考学习用,请勿直接商用。若由于商用引起版权纠纷,一切责任均由使用者承担。更多说明请参考 VIP介绍。
    提示下载完但解压或打开不了?
    最常见的情况是下载不完整: 可对比下载完压缩包的与网盘上的容量,若小于网盘提示的容量则是这个原因。这是浏览器下载的bug,建议用百度网盘软件或迅雷下载。若排除这种情况,可在对应资源底部留言,或 联络我们.。
    找不到素材资源介绍文章里的示例图片?
    对于PPT,KEY,Mockups,APP,网页模版等类型的素材,文章内用于介绍的图片通常并不包含在对应可供下载素材包内。这些相关商业图片需另外购买,且本站不负责(也没有办法)找到出处。 同样地一些字体文件也是这种情况,但部分素材会在素材包内有一份字体下载链接清单。
    苏果儿资源博客
    一个高级程序员模板开发平台

    发表评论

    升级SVIP果帝尊享更多特权立即升级