织梦dedecms标准robots.txt
时间 : 2023-12-27 01:32:02 声明: : 文章内容来自网络,不保证准确性,请自行甄别信息有效性

最佳答案

以下是一个标准的DedeCMS的robots.txt文件示例:

User-agent: *

Disallow: /data/

Disallow: /dede/

Disallow: /include/

Disallow: /js/

Disallow: /member/

Disallow: /plus/

Disallow: /theme/

Disallow: /tags/

Disallow: /special/

Disallow: /search/

Disallow: /feedback/

Disallow: /install/

Disallow: /templets/

Disallow: /uploads/

Disallow: /user_files/

Disallow: /*.html$

Disallow: /*.jsp$

Sitemap: http://www.example.com/sitemap.xml

请注意,这只是一个基本的示例,您可能需要根据自己的网站的具体情况进行修改。以下是对上述示例的一些解释:

- `User-agent: *`:适用于所有搜索引擎的指令。

- `Disallow: /data/`:禁止搜索引擎访问存储DedeCMS数据的目录。

- `Disallow: /dede/`:禁止搜索引擎访问DedeCMS后台管理目录。

- `Disallow: /include/`:禁止搜索引擎访问DedeCMS的include目录。

- `Disallow: /js/`:禁止搜索引擎访问JavaScript文件目录。

- `Disallow: /member/`:禁止搜索引擎访问会员管理相关目录。

- `Disallow: /plus/`:禁止搜索引擎访问DedeCMS的扩展模块目录。

- `Disallow: /theme/`:禁止搜索引擎访问主题文件目录。

- `Disallow: /tags/`:禁止搜索引擎访问tag相关页面。

- `Disallow: /special/`:禁止搜索引擎访问专题页面。

- `Disallow: /search/`:禁止搜索引擎访问搜索结果页面。

- `Disallow: /feedback/`:禁止搜索引擎访问用户反馈页面。

- `Disallow: /install/`:禁止搜索引擎访问DedeCMS的安装页面。

- `Disallow: /templets/`:禁止搜索引擎访问模板文件目录。

- `Disallow: /uploads/`:禁止搜索引擎访问上传文件目录。

- `Disallow: /user_files/`:禁止搜索引擎访问用户文件目录。

- `Disallow: /*.html$`:禁止搜索引擎访问所有以.html结尾的页面。

- `Disallow: /*.jsp$`:禁止搜索引擎访问所有以.jsp结尾的页面。

最后,`Sitemap: http://www.example.com/sitemap.xml`用来指示搜索引擎网站地图的位置,可根据需要进行修改为您网站的实际网址。

其他答案

# Dedecms标准Robots.txt示例文件

User-agent: *

Disallow: /plus/

Disallow: /member/

Disallow: /templets/

Disallow: /data/

Disallow: /include/

Disallow: /install/

Disallow: /iis_show_404.aspx

User-agent: Baiduspider

Disallow: /plus/

Disallow: /member/

Disallow: /templets/

Disallow: /data/

Disallow: /include/

Disallow: /install/

Disallow: /iis_show_404.aspx

Disallow: /*/comment/

Disallow: /*/member/

Disallow: /*/feed/

Disallow: /*/tag/

Disallow: /*/rss/

User-agent: Bingbot

Disallow: /plus/

Disallow: /member/

Disallow: /templets/

Disallow: /data/

Disallow: /include/

Disallow: /install/

Disallow: /iis_show_404.aspx

Disallow: /*/comment/

Disallow: /*/member/

Disallow: /*/feed/

Disallow: /*/tag/

Disallow: /*/rss/

User-agent: Googlebot

Disallow: /plus/

Disallow: /member/

Disallow: /templets/

Disallow: /data/

Disallow: /include/

Disallow: /install/

Disallow: /iis_show_404.aspx

Disallow: /*/comment/

Disallow: /*/member/

Disallow: /*/feed/

Disallow: /*/tag/

Disallow: /*/rss/

User-agent: Yandex

Disallow: /plus/

Disallow: /member/

Disallow: /templets/

Disallow: /data/

Disallow: /include/

Disallow: /install/

Disallow: /iis_show_404.aspx

Disallow: /*/comment/

Disallow: /*/member/

Disallow: /*/feed/

Disallow: /*/tag/

Disallow: /*/rss/

User-agent: Twitterbot

Disallow: /

User-agent: Slurp

Disallow: /

User-agent: Scooter

Disallow: /

User-agent: SiteBot

Disallow: /

User-agent: Teoma

Disallow: /

User-agent: Baiduspider-mobile

Disallow: /

User-agent: Baiduspider-image

Disallow: /

User-agent: Baiduspider-news

Disallow: /

User-agent: Baiduspider-video

Disallow: /

User-agent: Baiduspider-favo

Disallow: /

User-agent: Gigabot

Disallow: /

User-agent: MJ12bot

Disallow: /

User-agent: Sogou spider

Disallow: /

User-agent: Sosospider

Disallow: /

User-agent: YoudaoBot

Disallow: /

User-agent: YoudaoFeedFetcher

Disallow: /

User-agent: 360 spider

Disallow: /

User-agent: 360Spider

Disallow: /

User-agent: EasouSpider

Disallow: /

User-agent: Exabot

Disallow: /

User-agent: AhrefsBot

Disallow: /

User-agent: DotBot

Disallow: /

User-agent: BaiDuSpider

Disallow: /

Sitemap: https://www.example.com/sitemap.xml

以上是一份标准的Dedecms Robots.txt示例文件,你可以根据自己的需求进行适当的修改和调整。请确保保存为UTF-8格式的纯文本文件,并将其放置在网站的根目录下。