立即注册 找回密码

QQ登录

只需一步,快速开始

查看: 3777|回复: 0

【SEO教程】第二十课 robots协议之偷梁换柱-懒人模式 道勤网录制

[复制链接]
发表于 2015-1-7 12:10:36 | 显示全部楼层 |阅读模式
道勤网-数据www.daoqin.net

亲注册登录道勤网-可以查看更多帖子内容哦!(包涵精彩图片、文字详情等)请您及时注册登录-www.daoqin.net

您需要 登录 才可以下载或查看,没有账号?立即注册

x
这节课视频较长,加载稍慢,请大家耐心等待10-20秒中后观看!主讲内容:robots协议之偷梁换柱-懒人模式

(无法观看请刷新页面等待10-20秒,单击播放器右下角可全屏观看)
什么是Robots协议?

Robots协议也称为爬虫协议、机器人协议,网站通过Robots协议告诉搜索引擎哪些页面可以抓取,哪些页面不能抓取。

Robots协议一般是一个文本文件,命名为robots.txt并且存放在网站根目录。

Robots协议的作用:

1、告诉搜索引擎网站上面的页面哪些可以抓取,不该抓取的就不要抓取。

2、告诉搜索引擎可以重点或者首先抓取哪个页面,配合网站地图效果更佳。

如何设置Robots协议?

工具:http://tool.chinaz.com/robots/

Robots协议一般命名为robots.txt,存放在网站根目录。

备注:如果网站根目录没有robots.txt,那么说明该网站允许所有搜索引擎抓取。


高清视频下载地址: seo课程下载地址.txt (31 Bytes, 下载次数: 2, 售价: 15 金钱)
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

道勤网- 推荐内容!上一条 /2 下一条

!jz_fbzt! !jz_sgzt! !jz_xgzt! 快速回复 !jz_fhlb! !jz_lxwm! !jz_gfqqq!

关于我们|手机版|小黑屋|地图|【道勤网】-www.daoqin.net 软件视频自学教程|免费教程|自学电脑|3D教程|平面教程|影视动画教程|办公教程|机械设计教程|网站设计教程【道勤网】 ( 皖ICP备15000319号-1 )

GMT+8, 2024-3-29 23:04

Powered by DaoQin! X3.4 © 2016-2063 Dao Qin & 道勤科技

快速回复 返回顶部 返回列表