68 Star 473 Fork 170

bboss / bboss-elastic-tran

2024-02-19 21:38
2024-01-30 21:54
2023-08-21 09:43
bboss

bboss v7.0.8 发布,版本变更:

  1. 数据库输入输出插件改进:增加配置db connection property配置方法addConnectionProperty
    2.持久层改进:增加druid数据库适配支持
    详情浏览文档:
    https://esdoc.bbossgroups.com/#/changelog
最后提交信息为: # v7.0.8 功能改进
2023-06-22 08:52
2023-05-28 19:36
2023-05-28 10:22
2023-03-22 11:08
bboss

数据采集 & 流批一体化工具 bboss v6.8.7 发布

bboss-datatran 由 bboss 开源的数据采集 & 流批一体化工具,提供数据采集、数据清洗转换处理和数据入库以及数据指标统计计算流批一体化处理功能。

v6.8.7 功能改进
扩展 http 输入插件:增加 http 并行查询功能,可以根据需要划分多个参数组,实现 http 服务数据的并行查询功能,从而获得更好的数据采集同步性能

扩展文件采集插件:增加一次性扫描导入本地文件 / FTP 文件功能,通过属性 disableScanNewFiles 进行控制:true 一次性扫描导入本地 / FTP 目录下的文件,false 持续监听本地 / FTP 目录下的新文件(默认值 false)

http 输入插件改进:增加对 http get 请求的支持,http post、http put 请求增加对 request 参数模式的支持(非请求体 dsl 报文模式)
http 输入插件、Elasticsearch 输入插件、数据库输入插件改进:分别在 httpproxy 访问异常、在 Elasticsearch 客户端访问异常、数据库客户端访问异常信息中包含 http dsl、Elasticsearch dsl、db sql 信息,以便快速发现和定位问题,提升排错效率

数据采集 & 流批一体化处理使用指南

https://esdoc.bbossgroups.com/#/etl-metrics

最后提交信息为: 升级框架版本号到6.8.7
2023-03-15 22:32
bboss

数据采集&流批一体化工具bboss-datatran v6.8.6 发布

最后提交信息为: 清理注释代码
2023-03-04 09:45
bboss

开源数据采集&流批一体化工具,提供数据采集、数据清洗转换处理和数据入库以及数据指标统计计算流批一体化处理功能。

最后提交信息为: 完善文档
2022-10-24 09:07
2022-09-29 08:56
bboss

数据采集 ETL 工具 bboss-datatran v6.7.5 发布

最后提交信息为: 升级框架版本号为6.7.5
2022-08-14 13:54
bboss

数据采集 ETL 工具 bboss-datatran v6.7.2 发布,功能改进:
1.数据同步bug修复: 执行destroy方法销毁作业时空指针异常问题修复

2.数据同步改进:优化作业销毁机制

3.数据同步改进:优化filelog插件日志采集多行识别处理增量采集机制和未结束多行记录回滚机制

4.数据同步改进:优化kafka输入插件并行消息处理机制

参考文档
https://esdoc.bbossgroups.com/#/db-es-tool

最后提交信息为: 升级框架版本号为6.7.2
2022-08-02 10:57
bboss

数据采集ETL工具 Elasticsearch-datatran v6.7.1 发布
v6.7.1 功能改进
作业配置增加输入输出参数配置(动态和静态)
http 输入输出插件增加 http header 设置功能(静态 header 和动态 header),
http 输入输出插件增加 jwt 服务认证以及对数据签名功能
http 输出插件增加对 dsl 脚本的支持

最后提交信息为: 升级框架版本到6.7.1
Java
1
https://gitee.com/bboss/bboss-elastic-tran.git
git@gitee.com:bboss/bboss-elastic-tran.git
bboss
bboss-elastic-tran
bboss-elastic-tran

搜索帮助