名站网址导航为大驾家提供DedeCMS站点程序站点教程相关的知识,比如织梦程序安装教程,织梦程序系统故障等教程。
前言:这篇文章主要是介绍如何使用采集功能去采集一个图片类的站点。这次选取的目标站点为:站酷网的佳作欣赏栏目,其URL为:http://www.zcool.com.cn/shows/。本文将会涉及到如何处理被采集页面含有分页以及如何使用简单的过滤规则。本文共分为三节:第一节,主要是介绍如何进入采集界面和新增采集节点中的第一步:设置基本信息及网址索引页规则;第二节,主要是介绍新增采集节点中的第二步:设置字段获取规则;第三节,主要是介绍如何采集指定节点和如何导出采集网站内容。e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
下面进入第一节。e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
1.1进入采集节点管理界面e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
如(图1)所示,在网站的后台管理界面的主菜单中单击“采集”,然后单击“采集节点管理”,即可进入采集节点管理界面,如(图2)所示。e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
图1-网站的后台管理界面e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
图2-采集节点管理界面e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
1.2. 增加新节点e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
在采集节点管理界面中,单击左下角的“增加新节点”或者右上角的“添加新节点”(如图2),都可进入“选择网站内容模型”界面,如(图3)所示,e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
图3-选择网站内容模型界面e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
在“选择网站内容模型”界面的下拉站点列表框中,有“普通文章”和“图片集”可供选择。e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
根据被采集页面的类型,选择相应的网站内容模型。本文这里选择“图片集”,单击确定后,便可进入“新增采集节点:第一步设置基本信息及网址索引页规则”界面,如(图4)所示,e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
图4-新增采集节点:第一步设置基本信息及网址索引页规则e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
1.2.1 设置节点基本信息
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
图5-节点基本信息e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
如(图5)所示,这里只是介绍如何获取“目标页面编码”,对于其他的设定,可参见之前的文章。具体操作步骤:e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
(a)打开被采集的目标页:http://www.zcool.com.cn/shows/;e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
(b)单击右键后选择“查看源网站文件”,找到“charset”, 如(图6)所示,e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
图6-查看源网站文件e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
其等号后面的相关具体代码如下就是所需填写的“编码格式”,这里是“utf-8”。e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
填写后,如(图7)所示,e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
图7-设置后的节点基本信息e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
检查无误后,进入下一步设置。e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
1.2.2 设置站点列表网址获取规则
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
图8-站点列表网址获取规则e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
如(图8)所示,这里是设置被采集的文章站点列表页的匹配规则。具体操作步骤:e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
(a)首先,回到已打开的站点列表页,找到浏览器的URL地址栏中显示的网址和页面的换页部分。如(图9)和(图10)所示,e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
图9-浏览器的URL地址栏e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
图10-换页e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
(b)单击“2”,打开文章站点列表页的第二页,再次找到浏览器的URL地址栏中所显示的网址和页面的换页部分,如(图12)和(图13)所示,e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
图11-第二页的网址e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
图12-第二页的换页e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
(c)在已打开的站点列表页的第二页上面,单击(1),回到站点列表页的首页,这时页面的换页部分与之前的图10是相同的,然而浏览器的URL地址栏中所显示的网址与之前图9并不相同,如(图13)所示,e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
图13-第一页的网址e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
(d)由(b)和(c)可推知,这里被采集的站点列表页的网址所遵循规律为:e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
http://www.zcool.com.cn/shows/0!0!0!200!(*)!1!0!0/。稳妥起见,请自行测试更多站点列表页。确定规律后,在“匹配网址”中,填入站点列表页所遵循的规律。e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
(e)最后,根据需要指定采集的页码或者规律数字,并设定其递增规律。e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
到这里,“站点列表网址获取规则”部分就设置结束了。最后结果,如(图14)所示,e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
图14-设置后的站点列表网址获取规则e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
确定正确后,进入下一步设置。e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
1.2.3设置文章网址匹配规则
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
图15-文章网址匹配规则e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
这里是设置被采集的站点列表页的匹配规则。e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
具体操作步骤:e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
(a)对于“区域开始的hTML”,可以在已打开的站点列表首页,单击右键后选择“查看源网站文件”查找出第一篇文章的文章标题“高清壁纸”来获得,如(图16)所示,
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
图16-查看源网站文件中,第一篇文章的文章标题e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
通过观察,不难看出“<ul class="list_left_nr">”为整个站点列表的开始部分。因此,在“区域开始的hTML”中,应填入“<ul class="list_left_nr">”。e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
(b)在源网站文件中,找到最后一篇文章文章标题“阿奴比斯”,如(图17)所示,
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
图17-查看源网站文件中,最后一篇文章的文章标题e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
结合站点列表的开始部分并通过观察可知,第一个“</ul>”为整个站点列表的结束部分,而其后的从“<ul class=”list_left_bottomw”>”到第二个“</ul>”,则为页面的换页部分。因此,在“区域结束的hTML”中,应填入”</ul>”,意思是到第一个</ul>结束。e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
(c)经过观察图16和图17的文章文章标题部分,可以发现,文章标题的链接地址都是含有“=.html”的。因此,可在“必须包含”中,填入“=.html”。e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
到这里,“文章网址匹配规则“就设置结束了。填写后,如(图18)所示,e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
图18-设置后的文章网址匹配规则e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
通过以上的三个小节,新增采集节点的第一步就已经设置完成了。设置后的最终结果,如(图19)所示,e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
图19-设置后的新增采集节点:第一步设置基本信息及网址索引页规则e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
全部完成并检查无误后,单击“保存信息并进入下一步设置“。如果之前设置正确,单击后,将会进入“新增采集节点:测试基本信息及网址索引页规则设置的网址获取规则测试”页面并看到相应的文章站点列表地址。如(图20)所示,e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
图20-网址获取规则测试e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
确定正确无误后,单击“保存信息并进入下一步设置”。否则,请单击“返回上一步进行修改“。e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
到这里,第一节就结束了。下面进入第二节。。。e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
织梦程序dedeCMS留言本类的plus插件具体调用{dede:}标签或头部尾e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
e6fAIChat_企业网址导航_网址分类目录_企业黄页网址提交查询专业网站!
关于DedeCMS站点程序站点教程相关的知识,就说到这里了希望能帮助朋友们。