亲注册登录道勤网-可以查看更多帖子内容哦!(包涵精彩图片、文字详情等)请您及时注册登录-www.daoqin.net
您需要 登录 才可以下载或查看,没有账号?立即注册
x
这节课视频较长,加载稍慢,请大家耐心等待10-20秒中后观看!主讲内容:robots协议之偷梁换柱-懒人模式
(无法观看请刷新页面等待10-20秒,单击播放器右下角可全屏观看) 什么是Robots协议?
Robots协议也称为爬虫协议、机器人协议,网站通过Robots协议告诉搜索引擎哪些页面可以抓取,哪些页面不能抓取。 Robots协议一般是一个文本文件,命名为robots.txt并且存放在网站根目录。 Robots协议的作用: 1、告诉搜索引擎网站上面的页面哪些可以抓取,不该抓取的就不要抓取。 2、告诉搜索引擎可以重点或者首先抓取哪个页面,配合网站地图效果更佳。 如何设置Robots协议? 工具:http://tool.chinaz.com/robots/ Robots协议一般命名为robots.txt,存放在网站根目录。 备注:如果网站根目录没有robots.txt,那么说明该网站允许所有搜索引擎抓取。
高清视频下载地址:
seo课程下载地址.txt
(31 Bytes, 下载次数: 2, 售价: 15 金钱)
|