关于, robots, txt, 文件, 问题
我发现网站站点跟目录有 robots.txt 文件 具体代码如下如下,会不会影响搜索引擎收录 我网站站点没有需要禁止收录的,是不是我就可以把 robots.txt 文件删除 # # robots.txt for Discuz论坛建站程序系统! X2 # User-agent: * Disallow: /api/ Disallow: /data/ Disallow: /source/ Disallow: /install/ Disallow: /template/ Disallow: /config/ Disallow: /uc_client/ Disallow: /uc_server/ Disallow: /static/ Disallow: /admin.php Disallow: /search.php Disallow: /member.php Disallow: /api.php Disallow: /misc.php Disallow: /connect.php Disallow: /forum.php?mod=redirect* Disallow: /forum.php?mod=post* Disallow: /home.php?mod=spacecp* Disallow: /userapp.php?mod=app&* Disallow: /*?mod=misc* Disallow: /*?mod=attachment* Disallow: /*mobile=yes* |
主机屋主机伪静态设置方法,iis8.5伪静态规则文件常用程序