Skip to content

Releases: alibaba/DataX

datax_v202309

13 Sep 03:42
9a1f887
Compare
Choose a tag to compare
  • 支持Phoenix 同步数据添加 where条件
  • 支持华为 GuassDB读写插件
  • 修复ClickReader 插件运行报错 Can't find bundle for base name
  • 增加 DataX调试模块
  • 修复 orc空文件报错问题
  • 优化obwriter性能
  • txtfilewriter 增加导出为insert语句功能支持
  • HdfsReader/HdfsWriter 支持parquet读写能力

datax_v202308

13 Aug 00:45
d6d3e27
Compare
Choose a tag to compare
  • OTS 插件更新
  • databend 插件更新
  • Oceanbase驱动修复

datax_v202306

18 Jul 09:01
9def837
Compare
Choose a tag to compare

新增插件
neo4jWriter
clickhouseReader

优化插件、修复问题、精简代码
oceanbase、hdfs、databend、txtfile

datax_v202303

23 Mar 07:24
2f5c9cf
Compare
Choose a tag to compare

新增插件

  • adbmysqlwriter
  • databendwriter
  • selectdbwriter

优化插件、修复问题

  • sqlserver
  • hdfs
  • cassandra
  • kudu
  • oss

精简代码

fastjson 升级到 fastjson2

datax_v202210

27 Oct 08:47
f4fe220
Compare
Choose a tag to compare

涉及通道能力更新(OceanBase、TDengine、Doris等),具体如下:

1. 通道能力更新 @TrafalgarLuo @dingxiaobo @johnrobbet @zyyang-taosdata @hf200012

  • OceanBase Reader
    • 支持 OceanBase 4.x
  • OceanBase Writer
    • 支持 OceanBase 4.x
    • 修复 OceanBase 写任务,4位版本号识别失败的问题
  • TDengine Reader / TDengine Writer
    • 更新
  • Doris Writer
    • 新增 Doris 写

2. 新增 Transformer 节点 @XuDaojie

  • DigestTransformer
    • 新增 Transformer 节点,支持 SHA1 MD5 摘要

datax_v202209

30 Sep 09:11
5c554a7
Compare
Choose a tag to compare

涉及通道能力更新(MaxCompute、DataHub、SLS、MySQL、OceanBase、StarRocks、ElasticSearch等)、通用打包更新等,具体如下:

1. 通道能力更新 @TrafalgarLuo @cuiliang16 @dingxiaobo @jtchen-study @LilyGuo @hffariel @johnrobbet

  • MaxCompute Reader
    • 修复分区获取不到问题
  • MySQL Reader / MySQL Writer
    • 升级可以连接8.0的驱动版本:mysql jdbc driver 5.1.46
  • ElasticSearch Writer
    • 支持 ElasticSearch 7.x 版本
    • 新支持更多数据类型
  • OceanBase Reader / OceanBase Writer
    • 支持分区粒度的切分
    • 适配 OceanBase 3.2.3.0版本
  • StarRocks Reader / StarRocks Writer
    • 新增 StarRocks Reader
    • 新增 StarRocks Writer,参见 README
  • DataHub Reader / DataHub Writer
    • 新增 DataHub Reader
    • 新增 DataHub Writer
  • SLS Reader / DataHub Writer
    • 新增 SLS Reader
    • 新增 SLS Writer

2. 通用打包更新 @dingxiaobo

  • fastjson 版本回退
  • 打包时自动复制 properties 文件
  • SQL Server驱动、Oracle驱动、DB2驱动、达梦驱动从本地引用改成中央仓库引用

datax_v202205

11 Jun 04:21
a81ba0c
Compare
Choose a tag to compare

涉及通道能力更新(MaxCompute、Hologres、OSS、Tdengine等)、安全漏洞更新、通用打包更新等,具体如下:

1. 通道能力更新 @jtchen-study @TrafalgarLuo @ttqs5 @zyyang-taosdata

2. 通用能力更新 @TrafalgarLuo

  • 解决打包中遇到的一些依赖无法获取的问题,比如tsdb-client
  • 安全漏洞更新
    • log4j 漏洞更新,将相关依赖升级到 2.17.1 版本
    • fastjson 漏洞更新,升级到 1.2.49 版本
    • postgresql 驱动漏洞更新,升级到 postgresql 42.3.3 版本