转载

发表于 2020年03月16日
浏览 (494)
评论 (0)

spider-flow 0.4.0 发布，Java 开源爬虫平台

spider-flow 是一个无需写代码的爬虫平台，通过定义流程的方式制定爬虫

更新日志

新增自定义函数功能
新增输出节点支持输出至数据库或csv文件
新增获取元素节点和上级元素方法elementVar.subling()、elementVar.parent()、elementVar.parents()、elementsVar.parents()
修复日志文件内容为空的问题 #I1AXQK
修复输出时可能出现的ArrayIndexOutOfBoundsException异常
优化界面显示,并将右侧属性配置移到底部
优化file函数,将下载调整为file.download(path,url)和file.download(path,urls)
优化程序逻辑,将递归执行改为非递归执行

原文 https://www.oschina.net/news/114126/spider-flow-0-4-0-released

正文到此结束

所属分类： Java 编程技术

本文标签： URLs 代码 IDE 数据递归配置 id 数据库 IO 下载 https http
版权声明： 本文为互联网转载文章，出处已在文章中说明(部分除外)。如果侵权，请联系本站长删除，谢谢。
本文海报： 生成海报一生成海报二

热门推荐

openfire数据库安装指南

浏览(13,742) 评论(0)
Caffe 深度学习框架上手教程

浏览(10,456) 评论(0)
ReactiveCocoa入门教程：第一部分

浏览(11,287) 评论(0)
开源HIDS-OSSEC使用实例:监测CC攻击

浏览(11,195) 评论(0)
Decorators in ES7

浏览(15,738) 评论(4)
用Electron（Atom编辑器的兄弟项目）开发桌面应用

浏览(28,762) 评论(0)
Windows下JetBrains CLion中文输出乱码的解决方法

浏览(12,215) 评论(1)
同步-@synchronized, NSLock, pthread, OSSpinLock性能比较

浏览(11,177) 评论(0)
Seaweedfs之Volume读请求重定向

浏览(25,455) 评论(3)
HTML、CSS及JavaScript ：有Promise，不会搞大肚子

浏览(13,315) 评论(0)

相关文章

阿里云首购8折

Loading...

其他链接

关于本站

本站定位：个人技术类博客

本站作用：写博客、记日志、闲聊扯淡鼓捣技术。

问题交流

[HBLOG]公众号

HBLOG

HBLOG