您现在的位置是:首页 > 学无止境> 网站建设网站首页学无止境网站建设

dede采集使用方法及步骤

dede   采集  
简介今天遇到一个问题,有很多文章,自己一个个填太麻烦了,就想到了织梦的采集功能,没有用过咋办呢,就去问度娘了。现在,把方法给大家介绍下

今天遇到一个问题,有很多文章,自己一个个填太麻烦了,就想到了织梦的采集功能,没有用过咋办呢,就去问度娘了。

现在,把方法给大家介绍下:

第一步:我们打开织梦后台点击采集——采集节点管理——增加新节点

1-1-300x159.png

第二步:这里我们以采集普通文章为例,我们选择普通文章,然后确定

2-1.png

第三步:进入了采集的设置页面,填写节点名称,就是给这个新节点取个名字,这里你可以任意填写。

3-1-300x166.png

第四步:打开你想要采集的文章列表页。(这里我们以这个网站为例http://www.xxx.com/xunyicao/打开这个页面,右键——查看源文件找到目标页面编码,就在charset后面)

4-300x34.png

第五步:填写页面的基本信息,填完后如图

5-300x39.png

第六步:填写列表网址获取规则看看文章列表第一页的地址。
http://www.nanmafan.com/xunyicao/list_49_1.html
对比第二页的地址http://www.xxx.com/xunyicao/list_49_2.html
我们发现了他们除了49_后面的数字不一样,其他的都一样,所以我们可以这样写
http://www.xxx.com/xunyicao/list_49_(*).html
就是把1换成了(*)因为这里只有2页,所以我们就填从1到2每页递增当然是1了,2-1…是等于1吧
这里我们就填写完了
可能大家采集的有些列表没有规则,那就只有手工指定列表网址了,如图

6-300x64.png

61-300x147.png

第七步:填写文章网址匹配规则了,回到文章列表页
右键查看源文件找到区域开始的HTML,就是找文章列表开始的标志。
我们很容易的找到了如图中的“新闻列表”。从这里开始,后面就是文章列表里
我们再找文章列表结束的HTML
就是这个了,一个很容易找到的标志
如果链接中含有图片:
不处理采集为缩略图这里根据自己的需要选择

7-300x117.png71-300x107.png

第八步:对区域网址进行再次筛选:
(使用正则表达式)必须包含:(优先级高于后者)
不能包含:打开源文件,我们可以很清楚的看到,文章链接都是以.html结束的所以,我们在必须包含后面填.html如果遇到有些列表很麻烦,还可以填写后面的不能包含
点击保存设置进入下一步,可以看到我们获得的文章网址
看到这些就是对的了,我们保存信息进入下一步设置内容字段获取规则
我们看看文章有没有分页,随便进入一篇文章看看。。我们看到这里的文章没有分页
所以这里的我们就默认了

8-300x94.png9-300x118.png

第九步:填写文章内容的开始,结束和上面的一样,找到开始和结束标志.

11-300x175.png

注:这里的标签是根据文章内容页来定的,中间的[内容]是固定写法

第十步:你想过滤文章中的什么内容就到过滤规则里写吧,比如要过滤文章中的图片,
选择常用规则,如图
再勾选IMG或其它的
然后确定
这样我们就把正文中的图片过滤了

12-300x163.png

第十一步:设置完毕后点保存设置并预览,
这样一个采集规则就写好了,很简单吧有些网站很难写,可要多下点功夫了哦
我们点保存并开始采集——开始采集网页一会的功夫就采集完了

13-300x157.png

最后:导出数据
首先选择要导入到的栏目,按“请选择”那里即可在弹出的窗口中选择你需要导入的栏目发布选项这里一般默认即可,除非你不想马上发布。每批导入默认是30条,这里修改与否都无所谓,附带选项一般选“排除重复标题”,至于自动生成HTML那个选项建议先别生成,因为我们还要去批量提取摘要和关键字。
文章标题
匹配规则:<title>[内容]</title>
过滤规则:{dede:trimreplace=””}_XXX网站{/dede:trim}



上一篇:thinkphp5 部署

下一篇:dede标签大全

Top