1、网站想要取消限制搜索引擎抓取可以直接在网站后台进行设置，通过上传robots文件或者在服务器上面利用网站安全狗软件设置静止抓取等方式。
2、方法：修改robots文件，取消该页面的屏蔽，robots的标准写法百度百科里有详细介绍：网页链接 在百度站长平台（已更名为百度资源平台）更新网站robots，过一段时间，您的这个网站就会被正常抓取收录了。
3、首先在手机中打开百度浏览器，点击我的，然后在打开的个人中心页面里，点击设置图标，接着在设置界面。点击清除浏览数据，然后勾选Cookies和应用打开拦截记录。最后选择完成之后，点击一键清理，这样浏览器中就解除了禁止访问。
4、打开手机自带的浏览器，点击下方的三点图标，点击设置。点击安全与隐私，将【安全浏览】右侧的开关关闭即可解除网站访问限制。网站就是一种人机沟通交流的工具。它由3大部分组成，即网站的三要素，域名、空间、源文件。
5、取消百度收录。你的意思是不想被百度的网站收录？机器人直接写，拒绝纳入全站，就像淘宝一样。把robots文件放在根目录下，百度就不会收集和抓取网页了。
6、方法二：首先提交进行站停保护；然后去掉对网站不利的部分(包括删除垃圾信息)，三天后提交给网站，等待网站正常抓取。一般一周就正常了。
方法：修改robots文件，取消该页面的屏蔽，robots的标准写法百度百科里有详细介绍：网页链接 在百度站长平台（已更名为百度资源平台）更新网站robots，过一段时间，您的这个网站就会被正常抓取收录了。
出现这种问题，只需要登录服务器空间，一般用ftp就可以，然后打开robots.txt文件，把里面的禁用删掉就可以了。
用其他搜索引擎试试。这个 robots.txt 东西是一种“协议”告诉搜索引擎，请不要搜索这个文件里所声明的东西。这不是必须遵守的，但是一般正规服务商都会自动遵守这个协议。
1、【处理方式】：修改Robots封禁为允许，然后到百度站长后台检测并更新Robots。在百度站长后台抓取检测，此时显示抓取失败，没关系，多点击抓取几次，触发蜘蛛抓取站点。在百度站长后台抓取频次，申请抓取频次上调。
2、网站想要取消限制搜索引擎抓取可以直接在网站后台进行设置，通过上传robots文件或者在服务器上面利用网站安全狗软件设置静止抓取等方式。
3、方法：修改robots文件，取消该页面的屏蔽，robots的标准写法百度百科里有详细介绍：网页链接 在百度站长平台（已更名为百度资源平台）更新网站robots，过一段时间，您的这个网站就会被正常抓取收录了。
4、解决方法：使用管理员账户登入FTP 进入web根目录下，将robots.txt文件中对应代码删除即可。
5、用其他搜索引擎试试。这个 robots.txt 东西是一种“协议”告诉搜索引擎，请不要搜索这个文件里所声明的东西。这不是必须遵守的，但是一般正规服务商都会自动遵守这个协议。
