网页的采集或执行是通过将网页运行的每一步添加到可视化流程设计中,是用户将需求转化为设计的直观体现方式,掌握好流程设计是应用开发的关键所在。
应用开发及流程设计基础视频教程
1、确定需求:首先你要做的是确定你的需求,比如需要定时每天采集某网站最新新闻,批量下载某宝商品图片,采集某网站检索的信息列表及详情,自动帮我推广文章到微信后台等。
2、制作应用:确定好需求后就要按需求定制一个应用用来执行需求,制作应用的基本思路是通过软件模拟网页操作来完成网页数据的采集与处理。制作者通过设计一个操作流程让程序来模拟运行网页完成采集需求,如制作采集淘宝搜索商品数据应用操作流程:“打开淘宝网(www.taobao.com) ——> 设置搜索框关键字 ——> 鼠标点击搜索按钮 ——> 提取搜索结果中商品信息 ——> 设置导出数据 ——> 导出数据” 以上就是一个完整的应用设计流程。
3、运行应用:运行方式支持直接启动应用、定时运行应用、分发运行应用,可根据实际业务需要来运行。
4、导出数据:应用运行完后用户对数据结果进行导出,可先对数据结果进行筛选、加工、清洗处理,支持导出或发布到excel,文本、数据库、http接口。
以下以采集淘宝搜索商品数据为例,讲解制作使用应用的过程。
首先从软件首页打开定制应用界面
输入淘宝网址
打开流程设计添加起始页
输入搜索关键字
点击搜索按钮
选择提取商品信息
选择需要提取的内容
设置提取选项
依次完成对商品链接、标题、价格及图片的提取
预览提取结果
结束应用,导出数据
创建保存应用
在流程设计窗口打开创建应用打开应用保存窗口,设置应用相关信息后保存
保存应用后在首页我的应用中找到应用启动运行
导出数据