大众点评爬虫采集数据方法.docx

大众点评商家（咖啡厅）的采集方法本文介绍采集使用八爪鱼7.0采集大众点评咖啡厅商家详情页数据的方法采集网站：/search/category/7/30/g132示例规则下载：/search/category/7/30/g1使用功能点：网页列表内容提取详情页数据采集相关采集教程：八爪鱼采集原理百度有哪些信誉好的足球投注网站结果采集1688热门商品采集步骤1：/article/javascript:;创建采集任务1）进入主界面，选择“自定义模式”大众点评商家（咖啡厅）的采集方法图12）将上面网址的网址复制粘贴到网站输入框中，点击“保存网址”大众点评商家（咖啡厅）的采集方法图23）保存网址后，页面将在八爪鱼采集器中打开，红色方框中的数据就是我们需要采集的信息大众点评商家（咖啡厅）的采集方法图3步骤2：/article/javascript:;创建翻页循环找到翻页按钮，设置翻页循环1）将页面下拉到底部，找到下一页按钮，鼠标点击，在右侧操作提示框中，选择“循环点击下一页”大众点评商家（咖啡厅）的采集方法图4步骤3：采集详情页数据选中需要点击的商家名称，创建循环点击列表进入详情页创建采集列表1）如图，移动鼠标选中列表中商家的名称，右键点击，需采集的内容会变成绿色，然后点击“选中全部”大众点评商家（咖啡厅）的采集方法图5注意：点击右上角的“流程”按钮，即可展现出可视化流程图。2）然后点击“循环点击每个元素”大众点评商家（咖啡厅）的采集方法图63）网页会跳转到详情页中，移动鼠标选中详情页商家的名称，选择“采集该元素的文本”大众点评商家（咖啡厅）的采集方法图74）鼠标右键点击每个需要采集的文本字段，点击“采集以下数据”大众点评商家（咖啡厅）的采集方法图85）修改采集字段名称，点击下方红色方框中的“保存并开始采集”大众点评商家（咖啡厅）的采集方法图96）根据采集的情况选择合适的采集方式，这里选择“启动本地采集”大众点评商家（咖啡厅）的采集方法图10说明：本地采集占用当前电脑资源进行采集，如果存在采集时间要求或当前电脑无法长时间进行采集可以使用云采集功能，云采集在网络中进行采集，无需当前电脑支持，电脑可以关机，可以设置多个云节点分摊任务，10个节点相当于10台电脑分配任务帮你采集，速度降低为原来的十分之一；采集到的数据可以在云上保存三个月，可以随时进行导出操作。步骤4：/article/javascript:;数据采集及导出1）采集完成后，选择合适的导出方式，将采集好的数据导出大众点评商家（咖啡厅）的采集方法图11八爪鱼——70万用户选择的网页数据采集器。1、操作简单，任何人都可以用：无需技术背景，会上网就能采集。完全可视化流程，点击鼠标完成操作，2分钟即可快速入门。2、功能强大，任何网站都可以采：对于点击、登陆、翻页、识别验证码、瀑布流、Ajax脚本异步加载数据的网页，均可经过简单设置进行采集。3、云采集，关机也可以。配置好采集任务后可关机，任务可在云端执行。庞大云采集集群24*7不间断运行，不用担心IP被封，网络中断。4、功能免费+增值服务，可按需选择。免费版具备所有功能，能够满足用户的基本采集需求。同时设置了一些增值服务（如私有云），满足高端付费企业用户的需要。八爪鱼·云采集服务平台