< 返回新闻公告列表

robots.txt的写法

发布时间:2020/2/11 16:05:31    来源: 易天数据

robots.txt的写法
(1)美国站群服务器允许所有的robot访问
User-agent: *
Disallow:
或者
User-agent: *
Allow: /
或者建一个空文件”robots.txt”即可。
(2)仅禁止某个机器人访问您的网站,如Baiduspider。
User-agent: Baiduspider
Disallow: /

CopyRight © 2017-2017 易天数据 版权所有

《中华人民共和国增值电信业务经营许可证》闽B1-20170068

公司地址:河南郑州市金水区