900字范文,内容丰富有趣,生活中的好帮手!
900字范文 > wordpress抓取 测试的网站不想被百度抓取 – wordpress – 前端

wordpress抓取 测试的网站不想被百度抓取 – wordpress – 前端

时间:2019-02-03 17:07:05

相关推荐

wordpress抓取 测试的网站不想被百度抓取 – wordpress – 前端

方法一:WordPress站点的直接后台设置

WordPress站点可以直接登录站点后台 >> 设置 >> 阅读 >> 勾选“建议搜索引擎不索引本站点”并点击【保存更改】即可。

方法二:通过robots.txt禁止

直接在网站根目录中新建一个robots.txt文件,然后在文件中添加以下代码:

User-Agent: *

Disallow: /

方法三:通过noindex标记来禁止

直接在站点的头文件header.php文件中添加以下代码:

<meta name=”robots” content=”noindex” >

方法四:通过PHP代码禁止(WordPress站点为例)

将以下代码添加到主题目录的functions.php当中:

ob_start(“Deny_Spider_Advanced”);

function Deny_Spider_Advanced() {

$UA = $_SERVER[‘HTTP_USER_AGENT’];

$Spider_UA = ‘/(spider|bot|)/i’; //定义需要禁止的蜘蛛UA,一般是spider和bot

//如果检测到UA不为空而且发现是蜘蛛则返回404

if($UA && preg_match_all($Spider_UA,$UA)) {

header(‘HTTP/1.1 403 Forbidden’);

header(“status: 403 Forbidden”);

}

}

可以自行替换或添加以上的spider|bot,多个用|隔开即可。

方法五:Nginx禁止

在server{}中添加以下代码:

#如果抓取的UA中含有spider或bot时返回403

if ($http_user_agent ~* “spider|bot”) {

return 403; #如果是删除已收录的,则可以返回404

break;

}

可以自行替换或添加以上的spider|bot,多个用|隔开即可。

方法六:Apache禁止

在.htaccess中添加以下代码:

RewriteEngine On

RewriteCond %{HTTP_USER_AGENT} (^$|spider|bot) [NC]

RewriteRule ^(.*)$ – [F]

可以自行替换或添加以上的spider|bot,多个用|隔开即可。

总结

理论上以上6种方法都有效,建议找适合自己站点的一种办法来使用即可。一般采用方法二比较普遍,如果能够结合方法五或六来使用估计效果更佳。

@ WordPress452火车头免登陆发布接口模块怎么用?

方法/步骤1. 将火车头采集器及WordPress网站安装好,并下载1818乐淘淘提供的wordpress4.5.2web免登陆在线发布模块。2配置火车头采集器1.新建任务2.制作采集规则3.发布:勾选web发布—web发布配置管理—导入wordpress4.5.2.wpm然后选择wordpress4.5.2 web发布模块3选择网站编码—填写接口密码—填写网站网址—不需要登陆上传php文件到网站根目录获取列表—保存web发布模块WordPress4.5.2火车头免登陆发布接口模块 支持图片上传自动设置特色图像,附件上传,自定义字段,时间,tag标签。。。。

@ wordpress是否能二次开发?

既然要开发大型门户网站,还用wordpress干什么呢?

wordpress本身是一个博客系统,不适合做大型门户或其他网站,只是很多爱好者使用插件接口开发了各种应用,才让大家觉得它是万能的。

既然你要做大型门户网站,另外两种方式更适合:

1.从底层开始自己开发,做一个专业的门户网站系统;

2.使用更为专业的门户CMS系统,在此基础上二次开发,如dedecms、PHPCMS等等。

@ 如何建站个人网站wordpress建站教程?

网站早已不再神秘,再也不是什么高技术活。普通用户也可以轻松的建立出相对专业的网站。下面向大家简单介绍一下个人建站的一些流程和注意事项。

一、域名

要想让人家访问自己的网站,域名是必不可少的。域名要尽可能的短、尽可能的方便记忆,比如.top域名,当然现在好记的、有特征的域名已经不多了,这需要你自己进行考虑,只要觉得有一定的规律或便于用户记忆即可。

二、空间

要建网站,其次必须要有一个空间,即存放网站的地方。对于个人用户,建议购买虚拟主机。在购买虚拟主机时要看其服务、速度、响应时间等。一般选择有一定名气的服务商即可。

注:域名、空间目前国内比较好的服务商像阿里云、西部数码、中国数据等都是非常好的选择。

三、网站程序

网站程序当然是选择现成的,因为个人没有必要去从头开始编制一个网站程序,也没有那个实力。现在网上有现成的网站管理系统,这类系统还有很多,可以在自己综合试用的基本上进行选择。

在选择网站程序时,还必须考虑到其通用性和二次开发。对于通用性不好、不利于二期开发的,虽然功能强大但不建议选用,因为网站有了一定规模后需要进行个性化功能设计时会很麻烦。另外程序尽量选择asp,PHP、JSP等在国内不是特别流行;在asp和之间也尽量选用,毕竟其基于.net架构是发展的潮流。

四、网站设计

选择好了网站程序后,则需要根据自己的需要进行网站设计。一般来说,如果有专业的美工和程序员进行修改自然最好。不过个人站长可能不一定具备这种条件,可以选择服务商的智能建站。

目前市场上的域名品种很多,常见的有com、top、cn等等,域名注册一般通过域名注册平台注册,比如阿里云、百度云、中数等等,注册域名需要你在注册平台注册一个账户,然后查询你想注册的域名是否能注册,如果可以注册就进入付款步骤,整个过程通过电脑或者手机就可以完成,不需要本人到场。

@ wordpress怎么确定源代码位置?

当大家面对一个手机的页面需要确定它所对应的源码时,可以通过如下两个方面来寻找源码:

1.使用sdk\tools\hierarchyviewer.bat工具(适用于userDebug版本)找到该页面对应的信息:

2.包名确定以后使用adb shell pm path package-name可以找对对应的应用安装目录信息:

应用名PermissionControl.apk确定了,基本上就可以在packages\apps或者vendor\mediatek\proprietary\packages\apps目录下找到对应的应用了。

本内容不代表本网观点和政治立场,如有侵犯你的权益请联系我们处理。
网友评论
网友评论仅供其表达个人看法,并不表明网站立场。