织梦dedecms标准robots.txt
时间 : 2023-12-27 01:32:02 声明: : 文章内容来自网络,不保证准确性,请自行甄别信息有效性
最佳答案
以下是一个标准的DedeCMS的robots.txt文件示例:
User-agent: *
Disallow: /data/
Disallow: /dede/
Disallow: /include/
Disallow: /js/
Disallow: /member/
Disallow: /plus/
Disallow: /theme/
Disallow: /tags/
Disallow: /special/
Disallow: /search/
Disallow: /feedback/
Disallow: /install/
Disallow: /templets/
Disallow: /uploads/
Disallow: /user_files/
Disallow: /*.html$
Disallow: /*.jsp$
Sitemap: http://www.example.com/sitemap.xml
请注意,这只是一个基本的示例,您可能需要根据自己的网站的具体情况进行修改。以下是对上述示例的一些解释:
- `User-agent: *`:适用于所有搜索引擎的指令。
- `Disallow: /data/`:禁止搜索引擎访问存储DedeCMS数据的目录。
- `Disallow: /dede/`:禁止搜索引擎访问DedeCMS后台管理目录。
- `Disallow: /include/`:禁止搜索引擎访问DedeCMS的include目录。
- `Disallow: /js/`:禁止搜索引擎访问JavaScript文件目录。
- `Disallow: /member/`:禁止搜索引擎访问会员管理相关目录。
- `Disallow: /plus/`:禁止搜索引擎访问DedeCMS的扩展模块目录。
- `Disallow: /theme/`:禁止搜索引擎访问主题文件目录。
- `Disallow: /tags/`:禁止搜索引擎访问tag相关页面。
- `Disallow: /special/`:禁止搜索引擎访问专题页面。
- `Disallow: /search/`:禁止搜索引擎访问搜索结果页面。
- `Disallow: /feedback/`:禁止搜索引擎访问用户反馈页面。
- `Disallow: /install/`:禁止搜索引擎访问DedeCMS的安装页面。
- `Disallow: /templets/`:禁止搜索引擎访问模板文件目录。
- `Disallow: /uploads/`:禁止搜索引擎访问上传文件目录。
- `Disallow: /user_files/`:禁止搜索引擎访问用户文件目录。
- `Disallow: /*.html$`:禁止搜索引擎访问所有以.html结尾的页面。
- `Disallow: /*.jsp$`:禁止搜索引擎访问所有以.jsp结尾的页面。
最后,`Sitemap: http://www.example.com/sitemap.xml`用来指示搜索引擎网站地图的位置,可根据需要进行修改为您网站的实际网址。
其他答案
# Dedecms标准Robots.txt示例文件
User-agent: *
Disallow: /plus/
Disallow: /member/
Disallow: /templets/
Disallow: /data/
Disallow: /include/
Disallow: /install/
Disallow: /iis_show_404.aspx
User-agent: Baiduspider
Disallow: /plus/
Disallow: /member/
Disallow: /templets/
Disallow: /data/
Disallow: /include/
Disallow: /install/
Disallow: /iis_show_404.aspx
Disallow: /*/comment/
Disallow: /*/member/
Disallow: /*/feed/
Disallow: /*/tag/
Disallow: /*/rss/
User-agent: Bingbot
Disallow: /plus/
Disallow: /member/
Disallow: /templets/
Disallow: /data/
Disallow: /include/
Disallow: /install/
Disallow: /iis_show_404.aspx
Disallow: /*/comment/
Disallow: /*/member/
Disallow: /*/feed/
Disallow: /*/tag/
Disallow: /*/rss/
User-agent: Googlebot
Disallow: /plus/
Disallow: /member/
Disallow: /templets/
Disallow: /data/
Disallow: /include/
Disallow: /install/
Disallow: /iis_show_404.aspx
Disallow: /*/comment/
Disallow: /*/member/
Disallow: /*/feed/
Disallow: /*/tag/
Disallow: /*/rss/
User-agent: Yandex
Disallow: /plus/
Disallow: /member/
Disallow: /templets/
Disallow: /data/
Disallow: /include/
Disallow: /install/
Disallow: /iis_show_404.aspx
Disallow: /*/comment/
Disallow: /*/member/
Disallow: /*/feed/
Disallow: /*/tag/
Disallow: /*/rss/
User-agent: Twitterbot
Disallow: /
User-agent: Slurp
Disallow: /
User-agent: Scooter
Disallow: /
User-agent: SiteBot
Disallow: /
User-agent: Teoma
Disallow: /
User-agent: Baiduspider-mobile
Disallow: /
User-agent: Baiduspider-image
Disallow: /
User-agent: Baiduspider-news
Disallow: /
User-agent: Baiduspider-video
Disallow: /
User-agent: Baiduspider-favo
Disallow: /
User-agent: Gigabot
Disallow: /
User-agent: MJ12bot
Disallow: /
User-agent: Sogou spider
Disallow: /
User-agent: Sosospider
Disallow: /
User-agent: YoudaoBot
Disallow: /
User-agent: YoudaoFeedFetcher
Disallow: /
User-agent: 360 spider
Disallow: /
User-agent: 360Spider
Disallow: /
User-agent: EasouSpider
Disallow: /
User-agent: Exabot
Disallow: /
User-agent: AhrefsBot
Disallow: /
User-agent: DotBot
Disallow: /
User-agent: BaiDuSpider
Disallow: /
Sitemap: https://www.example.com/sitemap.xml
以上是一份标准的Dedecms Robots.txt示例文件,你可以根据自己的需求进行适当的修改和调整。请确保保存为UTF-8格式的纯文本文件,并将其放置在网站的根目录下。
上一篇
宝塔面板数据库远程访问
下一篇
制作帝国cms响应式模版
https/SSL证书广告优选IDC>>
推荐主题模板更多>>
推荐文章







