[ETL趋势」DB表输出支持事务、循环容器次数无限制、实时数据同步目的地StarRocks和Doris支持DDL等

devtools/2024/11/14 6:44:10/

FineDataLink作为一款市场上的顶尖ETL工具,集实时数据同步、ELT/ETL数据处理、数据服务和系统管理于一体的数据集成工具,进行了新的维护迭代。本文把FDL4.1.10最新功能作了介绍,方便大家对比:(产品更新详情:4.1.10最新功能快速体验)

一、数据源

1、数据管道StarRocks、Doris作为目的地支持DDL同步

作为StarRocks、Doris 作为分布式存储系统,一般户作为数据仓库的存储用途,以应对大规模、高性能的数据存储、分析场景。从4.1.10 版本开始,在数据管道实时同步过程中,当数据源发生表结构变化时,StarRocks、Doris可以同步变动DDL源端支持:MySQL、Oracle、SQL Server、PostgreSQL、DB2DDL目标端支持:MySQL、Oracle、SQL Server、GaussDB 200、PostgreSQL、GreenPlum、TiDB、Amazon RedShift、SeaboxMPP、神通数据库、StarRocks、Doris。

同步源表结构变化

💠详情:同步源表结构变化

2、管道实时同步来源端适配MySQL5.5

在FineDataLink4.1.10及以上版本中,数据管道来源端新增支持 MySQL 5.5版本。

数据连接

💠详情:支持的数据源范围

二、数据开发

1、DB表输出支持事务

在FineDataLink数据开发过程中,数据装载支持以事务的方式:要么全部成功更改目标表数据;要么失败事务回滚,目标表数据不变。当前支持的数据源:Oracle、GreenPlum并行装载、Gbase 8A

DB表输出(事务)-配置界面

💠详情:DB输出(事务)

2、循环容器支持无限制循环次数

在FineDataLink 4.1.10及以上版本中,循环容器的循环次数上限无限制次数,可以通过插件的形式进行放开默认的10000次限制次数。

循环容器次数配置

💠详情:循环容器循环次数无限制插件

三、系统配置

1、登录页背景图片

在FineDataLink 4.1.10及以后的版本中,支持更新默认的登录页背景图片

外观配置页面

💠详情:登录页

💠产品更新详情:4.1.10更新日志

FineDataLink 是一款集实时数据同步、ELT/ETL数据处理、数据服务和系统管理于一体的数据集成工具,可在Windows或Linux环境上单机/集群部署,全程基于B/S浏览器端进行任务开发和任务运维,更多精彩功能,邀您体验,希望能帮您解决企业中数据从任意终端到任意终端的处理和传输问题,让流动的数据更有价值!

免费试用、获取更多信息,点击了解更多>>>体验FDL功能

了解更多数据仓库与数据集成关干货内容请关注>>>FineDataLink官网

往期推荐:

花10个小时,写出了小白也能看懂的数据分层方法-CSDN博客

什么是数据对接的关键?数据对接有哪些工具?-CSDN博客

全面解析ETL:数据仓库架构中的关键处理过程-CSDN博客


http://www.ppmy.cn/devtools/98259.html

相关文章

大数据-96 Spark 集群 SparkSQL Scala编写SQL操作SparkSQL的数据源:JSON、CSV、JDBC、Hive

点一下关注吧!!!非常感谢!!持续更新!!! 目前已经更新到了: Hadoop(已更完)HDFS(已更完)MapReduce(已更完&am…

JVM性能监控工具

文章目录 JDK的命令行工具jps: 虚拟机进程状况工具jstat:虚拟机统计信息监视工具jinfo:Java配置信息工具jmap:Java内存映像工具jhat:虚拟机堆转储快照分析工具jstack:Java堆栈跟踪工具 可视化工具JConsole启动JConsole…

2024年最新盘点!这18款CRM最值得推荐!

CRM 系统对企业至关重要。它不仅能整合客户信息,助力企业提供个性化服务,提升客户满意度,还能通过销售流程自动化,提高销售效率,实现多渠道沟通整合!可以说,CRM系统是企业走上数字化转型道路上不…

【axios get请求 中文乱码】

问题复现 前端请求: company/queryFenByOrgNo?orgNo5&qcNam%D2%BB%C6%DA qcNam 一期 后端接收: CompanyManagementController - 入参 orgNo“5”,qcNamһ�� 问题解决方案 let httpUrl this.httpcompany/queryFenByOrgNo…

Qt五大核心特性之信号与槽

前言 Qt 引入信号与槽(Signal & Slot)机制的主要原因是为了提供一种灵活、松耦合的方式,使对象之间能够进行安全、方便的通信,尤其在事件驱动的编程环境中(如 GUI 应用)特别有效。 松耦合&#xff1a…

C语言 | Leetcode C语言题解之第344题反转字符串

题目&#xff1a; 题解&#xff1a; void swap(char *a, char *b) {char t *a;*a *b, *b t; }void reverseString(char *s, int sSize) {for (int left 0, right sSize - 1; left < right; left, --right) {swap(s left, s right);} }

C语言 | Leetcode C语言题解之第357题统计各位数字都不同的数字个数

题目&#xff1a; 题解&#xff1a; int countNumbersWithUniqueDigits(int n) {if (n 0) {return 1;}if (n 1) {return 10;}int ans 10, cur 9;for (int i 0; i < n - 1; i) {cur * 9 - i;ans cur;}return ans; }

TCP协议中的建立连接机制

目录 客户端与服务器间的三次握手 1、关于SYN_RCVD状态 2、关于系统调用listen的第二个参数 3、为什么服务端操作系统内核中的全连接队列不能太长&#xff1f; 4、服务端操作系统内核中可以没有全连接队列&#xff1f; 客户端与服务器间的三次握手 要想成功创建连接需要客…