spider-flow 是一个无需写代码的爬虫平台,通过定义流程的方式制定爬虫
更新日志
- 新增自定义函数功能
- 新增输出节点支持输出至数据库或csv文件
- 新增获取元素节点和上级元素方法elementVar.subling()、elementVar.parent()、elementVar.parents()、elementsVar.parents()
-
修复日志文件内容为空的问题 #I1AXQK
- 修复输出时可能出现的ArrayIndexOutOfBoundsException异常
- 优化界面显示,并将右侧属性配置移到底部
- 优化file函数,将下载调整为file.download(path,url)和file.download(path,urls)
- 优化程序逻辑,将递归执行改为非递归执行
原文
https://www.oschina.net/news/114126/spider-flow-0-4-0-released