spider-flow 0.4.0 发布,Java 开源爬虫平台
时间:2020-03-17 09:50 来源:linux.it.net.cn 作者:IT
spider-flow 是一个无需写代码的爬虫平台,通过定义流程的方式制定爬虫
更新日志
新增自定义函数功能
新增输出节点支持输出至数据库或csv文件
新增获取元素节点和上级元素方法elementVar.subling()、elementVar.parent()、elementVar.parents()、elementsVar.parents()
修复日志文件内容为空的问题 #I1AXQK
修复输出时可能出现的ArrayIndexOutOfBoundsException异常
优化界面显示,并将右侧属性配置移到底部
优化file函数,将下载调整为file.download(path,url)和file.download(path,urls)
优化程序逻辑,将递归执行改为非递归执行
相关链接
(责任编辑:IT)
spider-flow 是一个无需写代码的爬虫平台,通过定义流程的方式制定爬虫 更新日志 新增自定义函数功能 新增输出节点支持输出至数据库或csv文件 新增获取元素节点和上级元素方法elementVar.subling()、elementVar.parent()、elementVar.parents()、elementsVar.parents() 修复日志文件内容为空的问题 #I1AXQK 修复输出时可能出现的ArrayIndexOutOfBoundsException异常 优化界面显示,并将右侧属性配置移到底部 优化file函数,将下载调整为file.download(path,url)和file.download(path,urls) 优化程序逻辑,将递归执行改为非递归执行 相关链接 (责任编辑:IT) |