魔扣论坛

魔扣源码论坛业务
查看: 14|回复: 1

[织梦教程] 织梦DedeCMS站点robots文件详细写法以及优化

[复制链接]
  • TA的每日心情
    奋斗
    1 小时前
  • 签到天数: 1489 天

    [LV.10]论坛老兵

    7712

    主题

    7931

    帖子

    6万

    积分

    管理员

    Rank: 30Rank: 30Rank: 30Rank: 30Rank: 30Rank: 30Rank: 30Rank: 30

    魔扣币
    264070
    贡献
    25424
    威望
    19816

    最佳新人活跃会员热心会员推广达人宣传达人突出贡献优秀版主荣誉管理论坛元老

    发表于 2020-3-19 21:54:31 | 显示全部楼层 |阅读模式
    魔扣币兑换比例:【 50以下 : ¥1 = 10 魔扣币 】丨【 50 - 100 :¥1 = 20 魔扣币】丨【 100以上:¥1 = 30 魔扣币 】
    阿里云ECS

    本帖子中包含更多资源

    您需要 登录 才可以下载或查看,没有帐号?立即注册

    x
    织梦DedeCMS本身自带有一个robots.txt文件,但是里面的设置很简单,并不能完全满足网站的优化要求,尤其是对于使用伪静态的网站来说,robots.txt文件的优化,要怎样做才行呢?
    下面是我的一点想法,适用于伪静态的DedeCMS网站。

      User-agent: *
      Disallow: /dede 织梦管理后台目录,需要改名,具体设置在下面详细说明
      Disallow: /include 程序核心文件目录
      Disallow: /member 会员管理目录,有些文件可以开放
      Disallow: /plus 插件及辅助功能目录
      Disallow: /templets 织梦模板文件存放目录
      Disallow: /data 系统缓存或其它可写入数据存放目录
      Disallow: /uploads 上传下载文件保存目录,不想搜索引擎引用图片的话,禁止
      Disallow: /images 系统默认模板图片存放目录
      Disallow: /index.php 网站默认首页,静态化的话,最好禁止
      Disallow: /404.html 404错误页面
      Allow: /plus/search.php 开放禁止目录里的具体文件

    下面着重讲下后台管理目录和栏目页的设置:
      1、dede后台管理目录,为了网站安全考虑需要改名。然而改名之后,大家不免疑惑:改了名,应该在robots.txt文件里怎么设置禁止搜索引擎抓取呢?如果直接禁止抓取,就泄露了后台目录,等于改名无效。我们可以通过下面的设置解决这个问题,如我们设置后台目录为dedecms:
      在robots.txt文件里面加上“Disallow: /d*ms”这句就可以了。
      这样我们就能即禁止了搜索引擎的抓取,又不会泄露了后台目录名称。
      2、栏目页。有些人会注意到,如果网站不做伪静态优化的话,栏目分页后会有两个链接指向栏目首页,如*/web/和*/web/list_1_1.html,为了网站优化,建议先将栏目分页优化以下(具体做法大家可以在网上找),把首页和第一页的链接改为*/web/的形式,然后在robots.txt文件里做以下设置:
      在robots.txt文件里面加上“Disallow: /*1.html$“这句。
      以上就是DEDECMS robots.txt文件的设置,大家可以根据自己网站的情况具体设置。

    注意事项:
    1.为安全起见,最好按官方说明设置好网站目录权限;
    2.后台目录改后的名称开头字母和结尾字母不要和其他目录有相同之处;
    3.设置完成后最好用百度站长工具测试一下robots.txt文件设置是否有效。

    会员购买:>> 点击购买 << | 魔扣币购买:>> 点击购买 <<
    承接业务:服务器代维丨网站托管丨SEO
    联系客服:微信:morko-net | QQ:1367681973

    该用户从未签到

    3

    主题

    185

    帖子

    368

    积分

    中级魔扣

    Rank: 3Rank: 3

    魔扣币
    183
    贡献
    183
    威望
    0
    发表于 2020-3-19 22:08:39 | 显示全部楼层
    忘掉岁月,忘掉痛苦,忘掉你的坏,我们永不永不说再见。',
    您需要登录后才可以回帖 登录 | 立即注册

    本版积分规则

    • 联系我们
    • 新浪微博 :
    • 在线客服 :魔扣科技 
    • 源码QQ群 :魔扣源码论坛官方总群
    • 联系邮箱 :charlin#morko.net
    • 微信扫一扫
    快速回复 返回顶部 返回列表