名站网址导航为大驾家提供DedeCMS站点程序站点教程相关的知识,比如织梦程序安装教程,织梦程序系统故障等教程。
一个合格的织梦程序dedecms网站程序站点,必须在根目录下包含一下robots.txt网站文件,这个网站文件的作用对所有运营织梦程序dedecms网站程序站点的朋友来说并不陌生,网上也提供了很多制作robots.txt网站文件的相关具体操作方法和软件,可谓相当方便。 但是,你真的知道织梦程序dedecms网站程序站点的robots.txt网站文件设置是否合理,哪些网站文件或者目录需要屏蔽、哪些设置相关具体操作方法对织梦程序dedecms网站程序站点运营有好处? 那下面带着这些疑问,笔者会进行详细的解答,希望对新手站长朋友们有所帮助。 一、什么是robots.txt 笔者引用百度站长工具中后段话来解释。各大搜索引擎使用spider程序自动访问互联网上的网页并获取网页信息。spider在访问一个站点时,会首先会检查该站点的根域下是否有一个叫做 robots.txt的纯文本网站文件,这个网站文件用于指定spider在您站点上的抓取范围。您可以在您的站点中创建一个robots.txt,在网站文件中声明 该站点中不想被各大搜索引擎收录的部分或者指定各大搜索引擎只收录特定的部分。 二、robots.txt网站文件对站点有什么好处 1、快速增加站点权重和访问量; 2、禁止某些网站文件被各大搜索引擎索引,可以节省服务器带宽和站点访问速度; 3、为各大搜索引擎提供一个简洁明了的索引系统环境 三、哪些站点的目录需要使用robots.txt网站文件禁止抓取 1)、图片目录 图片是构成站点的主要组成元素。随着现在建站越来越方便,大量CMS的出现,真正做到了会打字就会建站点,而正是因为如此方便,网上出现了大量的同质化模板站点,被反复使用,这样的站点各大搜索引擎是肯定不喜欢的,就算是你的站点被收录了,那你的效果也是很差的。如果你非要用这种站点的话,建议你应该在robots.txt网站文件中进行屏蔽,通常的站点图片目录是:imags 或者 img; 2)、站点模板目录 如上面 图片目录 中所说,CMS的强大和灵活,也导致了很多同质化的站点模板的出现和滥用,高度的重复性模板在各大搜索引擎中形成了一种冗余,且模板网站文件常常与生成网站文件高度相似,同样易造成雷同网站内容的出现。对各大搜索引擎很不友好,严重的直接被各大搜索引擎打入冷宫,不得翻身,很多CMS有拥有独立的模板存放目录,因此,应该进行模板目录的屏蔽。通常模板目录的网站文件目录是:templets 3)、CSS、JS目录的屏蔽 CSS目录网站文件在各大搜索引擎的抓取中没有用处,也无法提供有价值的信息。所以强烈建议站长朋友们在Robots.txt网站文件中将其进行屏蔽,以提高各大搜索引擎的索引质量。为各大搜索引擎提供一个简洁明了的索引系统环境更易提升站点友好性。CSS样式的目录通常情况下是:CSS 或者 style JS网站文件在各大搜索引擎中无法进行识别,这里只是建议,可以对其进行屏蔽,这样做也有一个好处:为各大搜索引擎提供一个简洁明了的索引系统环境; 4)、屏蔽双页面的网站内容 这里拿DEDECMS来举例吧。大驾家都知道DEDECMS可以使用静态网站网页和动态URL进行同一篇网站内容的访问,如果你生成全站静态网站网页了,那你必须屏蔽动态地址的URL链接。这里有两个好处:1、各大搜索引擎对静态网站网页的URL比动态的URL更友好、更容易收录;2、防止静态网站网页、动态URL能访问同一篇文章而被各大搜索引擎判为重复网站内容。这样做对各大搜索引擎友好性来说是有益无害的。 5)、模板系统缓存目录 很多CMS程序都有系统缓存目录,这种系统缓存目录的好处我想不用说大驾家也清楚了吧,可以非常有效的提升站点的访问速度,减少站点带宽,对用户体验也是很好的。不过,这样的系统缓存目录也有一定的缺点,那就是会让各大搜索引擎进行重复的抓取,一个站点中网站内容重复也是大祭,对站点百害而无一利。很多使用CMS建站的朋友都没有注意到,必须要引起重视。 6)被删除的目录 死链过多,对各大搜索引擎优化来说,是致命的。不能不引起站长的高度重视,。在站点的发展过程中,目录的删除和调整是不可避免的,如果你的站点当前目录不存在了,那必须对此目录进行robots屏蔽,并返回正确的404错误页面(注意:在IIS中,有的朋友在设置404错误的时候,设置存在问题,在自定义错误页面一项中,404错误的正确设置应该是选择:默认值 或者 网站文件,而不应该是:URL,以防止各大搜索引擎返回200的状态码。至于怎么设置,网上教程很多,大驾家要吧搜索一下) 这里有一个争议性的问题,关于站点网站的后台管理目录是否需要进行屏蔽,其实这个可有可无。在能保证站点安全的情况下,如果你的站点运营规模较小,就算站点管理目录出现在robots.txt网站文件中,也没有多大问题,这个我也见过很多站点这样设置的;但如果你的站点运营规模较大,竞争夺手过多,强烈建议千万别出现任何你站点网站的后台管理目录的信息,以防被别有用心的人利用,损害你的利益;其实各大搜索引擎越来越智能,对于站点的管理目录还是能很好的识别,并放弃索引的。另外,大驾家在做站点网站的后台的时候,也可以在页面元标签中添加:进行各大搜索引擎的屏蔽抓取。 最后,需要说明一点,很多站长朋友喜欢把站点地图地址放在robots.txt网站文件中,当然这里并不是去屏蔽各大搜索引擎,而是让各大搜索引擎在第一次索引站点的时候便能通过站点地图快速的抓取站点网站内容。这里需要注意一下:1、站点地图的制作一定要规范;2、站点一定要有高质量的网站内容; |
关于DedeCMS站点程序站点教程相关的知识,就说到这里了希望能帮助朋友们。织梦程序DEDECMS教程:给图片加上自动编号