
搜狗地图景点信息采集方法范本.docx
6页搜狗地图景点信息采集方法 本文介绍使用八爪鱼采集搜狗地图(以惠州-景点为例)的方法 采集网站: /#c=12683571.543198185,2562773.9202291864,1 4 示例规则下载: 使用功能点: ●列表及详细信息采集 /tutorial/fylbxq7.aspx?t=1 ●文本循环教程 /tutorial/wbxh_7.aspx?t=1 ●AJAX点击和翻页 /tutorial/ajaxdjfy_7.aspx?t=1 相关采集教程: 八爪鱼采集原理 百度搜索结果采集 1)进入主界面,选择“自定义采集” 搜狗地图景点信息采集方法图1 2)将要采集的网站URL复制粘贴到输入框中,点击“保存网址” 搜狗地图景点信息采集方法图2 步骤2:输入采集信息 1)在页面右上角,打开“流程”,以展现出“流程设计器”和“定制当前操作”两个板块点击地图上的输入框,然后在右侧操作提示框中,选择“输入文字” 搜狗地图景点信息采集方法图3 2)在操作框提示中,输入想要查询的文本。
这里输入“惠州景点”输入完成后,点击“确定” 搜狗地图景点信息采集方法图4 3)“惠州景点”会自动填充到输入框先点击“搜索”按钮,然后在右侧操作提示框中,选择“点击该按钮” 搜狗地图景点信息采集方法图5 由于此网页涉及Ajax技术,我们需要进行一些高级选项的设置选中“点击元素”步骤,打开“高级选项”,勾选“Ajax加载数据”,设置时间为“2秒” 搜狗地图景点信息采集方法图6 注:AJAX即延时加载、异步更新的一种脚本技术,通过在后台与服务器进行少量数据交换,可以在不重新加载整个网页的情况下,对网页的某部分进行更新表现特征:a、点击网页中某个选项时,大部分网站的网址不会改变;b、网页不是完全加载,只是局部进行了数据加载,有所变化 验证方式:点击操作后,在浏览器中,网址输入栏不会出现加载中的状态或者转圈状态 步骤3:创建翻页循环 1)我们可以看到,页面出现了“惠州景点”的搜索结果将结果页面下拉到底部,点击“下一页”按钮在右侧的操作提示框中,选择“循环点击下一页”,以创建一个翻页循环 搜狗地图景点信息采集方法图7 由于此网页涉及Ajax技术,我们需要进行一些高级选项的设置。
选中“点击元素”步骤,打开“高级选项”,勾选“Ajax加载数据”,设置时间为“2秒”Ajax技术在上述已经提到 搜狗地图景点信息采集方法图8 步骤4:创建列表循环并提取数据 1)移动鼠标,选中页面里第一条商家信息的区块系统会识别此区块中的子元素,在操作提示框中,选择“选中子元素” 搜狗地图景点信息采集方法图9 2)系统会自动识别出页面中的其他10组同类元素,在操作提示框中,选择“选中全部”,以建立一个翻列表循环 搜狗地图景点信息采集方法图10 3)我们可以看到,页面中景点信息区块里的所有元素均被选中,变为绿色右侧操作提示框中,出现字段预览表,将鼠标移到表头,点击垃圾桶图标,可删除不需要的字段字段选择完成后,选择“采集以下数据” 搜狗地图景点信息采集方法图11 4)字段选择完成后,选中相应的字段,可以进行字段的自定义命名完成后,点击左上角的“保存并启动”,启动采集任务 搜狗地图景点信息采集方法图12 。












