robots文件生成对象有良多，文件上面引见两个较为经常独霸的生成robots文件生成对象__ChinaZ站长对象和爱站SEO对象包 ，具体引见以下。对象

1.站长对象成立

起首在搜刮引擎中搜刮“站长对象”
，文件然掉落踪队进到站长对象首页，生成在首页的对象导航栏被选择“robots.txt生成”。

进“robots文件生成”页面，文件在该页面中输进限制搜刮引擎访谒的生成网站目次和Sitemap，再选择所要独霸的对象搜刮引擎
 ，末尾单击“生成”按钮便可。文件

2.爱站SEO对象包成立

独霸爱站 SEO 对象包生成 robots.txt 文件的生成独霸编制特别很是复杂。不过 ，对象起首需求下载爱站SEO对象包软件，文件注册小我账号并登录。生成为登录后的对象软件首页。

在首页导航栏中单击“合用小对象”
，在“合用小对象”下方可以看到“Robots建造”选项
，单击进进便可。

单击“Robots建造“选项后，便可以看到“robots建造”界面
，在该界面中添加限制目次、Sitemap后选择所要独霸的搜刮引擎，末尾单击“生成”按钮
。

上面引见的是robots.txt文件建造编制，假定网站运营人员因为独霸欠妥封禁了robots文件 ，该若何措置呢 ？上面以258网站为例 ，引见封禁了robots文件的措置编制

258.com是企业互联网+一站式处事平台，由厦门二五八群集科技集团股分无穷公司倾力打造，戮力于为中小微企业供给建站、奉行 、转化等全方位处事
。该网站连络集团一站式企业处事产品和袒护全国的外埠化处事商，并开放接进精细企业级独霸 ，将中小微企业、外埠处事商、企业级独霸举办深度迟滞融合，打造全新的企业处事（B2B）局限的生态圈 。

258网站在斥地2.0版本时，技能人员选择了在线斥地 ，为了不搜刮引擎抓取斥地版本，是以请求技能人员设置了robots封禁措置。网站2.0版本斥地周期为1个月 ，1个月后网站版本迭代
，直接袒护了1.0版本
，包含robots封禁文件 ，2天后创作创造流量除夜幅降低，搜检收录创作创造800万收录降至0条 ，关头词除夜量损掉落踪落线

网站运营人员创作创造这类气候后，马前程行了措置。起首 ，网站运营人员将robots封禁改削为准予 ，然后到百度站长布景检测并更新了 robots 文件。可是在百度站长布景举办抓取检测时，页面展示的仍是是抓取损掉落踪落败
，网站运营人员只好点击多次后才成功触发搜刮引擎蜘蛛抓取网站。然后在百度站长布景央求抓取频次上调 ，并在链接提交处设置数据主动推送（及时）
。此外，他们还更新网站地图，从头提交百度 ，天天提交一次。两天此后，网站数据最早慢慢上升 ，到第3地利根本上升到正常外形

上述案例中，因为事恋人员独霸欠妥封禁了robots文件，使网站的流量及收录都除夜幅降低
，所以成立robots文件后必定要细心搜检及检测。

meta robots标签

meta robots标签是页面head部分meta标签的一种，用于指令搜刮引擎阻拦索引本页内容
，是以也就不会涌如今搜刮下场中。

最复杂的meta robots标签格式为：

＜meta name＝＂robots＂ content＝＂noindex,nofollow＂ ＞

上述标签的意义是阻拦全数搜刮引擎搜刮本页面，阻拦跟踪本页面上的链接。

Google 支撑的标签有 noined ，陈述搜刮引擎蜘蛛不要索引本页面；nofollow ，陈述搜刮引擎蜘蛛不要跟踪本页面上的链接；nosnipprt，陈述搜刮引擎不要在搜刮下场中展示摘要文字；noarchive，陈述搜刮引擎不要展示快照；noodp ，陈述搜刮引擎不要独霸开放目次中的问题和描摹。如今，百度的官方说法是只支撑nofollow和noarchive。

独霸了meta robots标签的页面会被抓取（只需robots没有阻拦），但不会被索引，页面URL不会涌如今搜刮下场中，这一点与robots不合
。

尽对路途与绝对路途

文件路途是指文件在电脑中的职位，在网页筹划中经由过程路途可以展示链接、拔出图象
、Flash、Css文件的职位 。文件路途有两种编制，分袂是绝对路途和尽对路途 。

3. 尽对路途

尽对路途是指带有网址的路途，比如有一个域名（www.dreamdu.com）和一个网站空间
。若硬盘文件上的路途为上面的文件 ：

d:\dreamdu\exe\1.htmld:\dreamdu\exe\first\2.htmld:\dreamdu\exe\first\3.htmld:\dreamdu\exe\first\second\4.html

那么屈就以上给出的前提，该文件的尽对路途便可以展示为 ：

＜a href＝＂http://www.dreamdu.com/exe/1.html＂＞链接到1.html＜/a＞＜a href＝＂http://www.dreamdu.com/exe/first/2.html＂＞链接到2.html＜/a＞＜a href＝＂http://www.dreamdu.com/exe/first/3.html＂＞链接到3.html＜/a＞＜a href＝＂http://www.dreamdu.com/exe/first/second/4.html＂＞链接到4.html＜/a＞

4. 绝对路途

绝对路途是指由这个文件地址的路途激起的跟其他文件（或文件夹）的路途相干。独霸绝对路途可以带来特别很是多的利便 。比如，在外埠硬盘中有两个文件，分袂是index.htm和01.htm
 ，它们要彼此做超链接
。

假定index.htm文件想要链接到01.htm文件，切确的链接编制理应是这个格式。相反，假定01.htm要想链接到index.htm这个文件，可以在01.htm文件里面添加一句“../../other/index.htm”，这里的．./展示上一级。