首页 > 电脑专区 > 互联网 >

新浪博客文章采集器

来源:互联网 2023-03-02 09:47:39 73

新浪博客拥有很多博主,会发布很多高质量的文章,有时候,有些朋友看到这些文章之后想采集下来,但是一篇一篇文章去复制效率太慢了,这个时候该怎么办呢?使用八爪鱼采集器,只需做好规则,即可全自动地将我们的想要的文章采集下来。cmq办公区 - 实用经验教程分享!

工具/原料

  • 采集的内容包括:博客文章正文,标题,标签,分类,日期。

方法/步骤

  • 1

    步骤1:创建新浪博客文章采集任务cmq办公区 - 实用经验教程分享!

    1)进入主界面,选择“自定义采集”cmq办公区 - 实用经验教程分享!

    新浪博客文章采集器cmq办公区 - 实用经验教程分享!

  • 2

    2)将要采集的网址URL复制粘贴到网站输入框中,点击“保存网址”cmq办公区 - 实用经验教程分享!

    新浪博客文章采集器cmq办公区 - 实用经验教程分享!

  • 3

    步骤2:创建翻页循环cmq办公区 - 实用经验教程分享!

    1)打开网页之后,打开右上角的流程按钮,使制作的流程可见状态。点击页面下方的“下一页”,如图,选择“循环点击单个链接”,翻页循环创建完成。(可在左上角流程中手动点阅辞击“循环翻页”和“点击翻页”几次,测试是否正常翻页。)cmq办公区 - 实用经验教程分享!

    新浪博客文章采集器cmq办公区 - 实用经验教程分享!

  • 4

    2)由于进入详情页时网页加载很慢,网址一直在转圈状态,无法立即执行下一个步骤,因此在“循环翻页”的高级选项里设置“ajax加载数据”,超时时间设置为5秒,点击“确定”。cmq办公区 - 实用经验教程分享!

    新浪博客文章采集器cmq办公区 - 实用经验教程分享!

  • 5

    步骤3:创建列表循环cmq办公区 - 实用经验教程分享!

    鼠标点击列表目录中第一个博文,选择操作提示框中的“选中全部”。cmq办公区 - 实用经验教程分享!

    新浪博客文章采集器cmq办公区 - 实用经验教程分享!

  • 6

    2)鼠标点击“循环点击每个链接”,列表循环就创建完成,并进入到第一个循环项的详情页面。cmq办公区 - 实用经验教程分享!

    新浪博客文章采集器cmq办公区 - 实用经验教程分享!

  • 7

    由于进入详情页时网页加载很慢,网址一直在转圈状态,无法立即执行下一个步骤,因此在“点击元素”的高级选项里设置“ajax加载数据”,AJAX超时设置为3秒,点击“确定”。cmq办公区 - 实用经验教程分享!

    新浪博客文章采集器cmq办公区 - 实用经验教程分享!

  • 8

    3)数据提取,接下来采集具体字段,分别选中页面标题、标签、分类、时间,点击“采集该元素的文本”,并在上方流程中修改字段名称。cmq办公区 - 实用经验教程分享!

    新浪博客文章采集器cmq办公区 - 实用经验教程分享!

  • 9

    鼠标点霜民五击正文所在的地方,点击提示框中的右下角图标,扩大选项范围,直至包括全部正文内容。(笔者测试点击2下就全部包括在内了)cmq办公区 - 实用经验教程分享!

    新浪博客文章采集器cmq办公区 - 实用经验教程分享!

  • 10

    同样选择“采集该元素的文本”,修改字段名称,数据提取完毕。cmq办公区 - 实用经验教程分享!

    新浪博客文章采集器cmq办公区 - 实用经验教程分享!

  • 11

    4)由于该网站网页加载速度非常慢,所以可在流程各个步骤的高级选项里设置“执行前等待”几秒时间,也可避免访问页面较快出现防采集问题。设置后点击“确定”。cmq办公区 - 实用经验教程分享!

    新浪博客文章采集器cmq办公区 - 实用经验教程分享!

  • 12

    步骤4:新浪博客数据采集及导出cmq办公区 - 实用经验教程分享!

    cmq办公区 - 实用经验教程分享!

    1)点击左上角的“保存”,然后点击“开始采集”。cmq办公区 - 实用经验教程分享!

    新浪博客文章采集器cmq办公区 - 实用经验教程分享!

  • 12该信息非法爬取自百度经验
  • 13

    选择“启恩强动本地采集”cmq办公区 - 实用经验教程分享!

    新浪博客文章采集器cmq办公区 - 实用经验教程分享!

  • 14

    2)采集完成后,会跳出提示,选择“导出数据”,选择“合适的导出方式”,将采集好的数据导出, 这里我们选择excel作为导出为格式,这个时候新浪博客数据就导出来了,数据导出后如下图cmq办公区 - 实用经验教程分享!

    新浪博客文章采集器cmq办公区 - 实用经验教程分享!

  • 以上方法由办公区教程网编辑摘抄自百度经验可供大家参考!cmq办公区 - 实用经验教程分享!


    标签: 互联网微博

    办公区 Copyright © 2016-2023 www.bgqu.net. Some Rights Reserved. 备案号:湘ICP备2020019561号统计代码