全域数据集成平台（ETLCloud）

产品名称：

全域数据集成平台（ETLCloud）

产品简介：

一站式覆盖任务开发、任务编排调度、血缘关系分析、数据质量管理、数据服务开发、任务监控等功能，为企业提供了更高级的数据集成解决方案，重构企业数据融合架构，解决各种复杂、即时、高合规的数据集成需求。全域数据集成平台能够实时连接和整合来自各种来源的数据，并进行数据清洗、转换和分析，以支持企业的决策和业务需求。

产品定位：

一站式覆盖：任务开发、任务编排调度、血缘关系分析、数据质量管理、数据服务开发、任务监控；轻松解决最复杂的数据集成挑战，专注解决大型企业系统及数据的各种复杂集成场景。

产品说明：

全域数据集成平台（ETLCloud）提供丰富的产品功能，集ETL/ELT/CDC/API于一体，主要从数据层面解决企业烟囱式业务系统的数据同步、采集、传输、分析、展示等方面面临的挑战。

企业数据往往分散在多个业务系统中进行存储和管理，数据存储类型多样且复杂(DB、文件、MQ、API等)，而端到端的业务场景往往需要在多个业务系统之间实现数据的实时同步和准确传输从而实现业务操作的连贯性。通过数据集成平台企业可以实现主数据的汇聚分发、业务系统数据的抽取、清洗、补全并准确的传输到业务所需要的地方，通过数据集成平台企业可以实现哪里需要数据，平台就能实时准确的传输到位，从而可以快速支撑业务能力创新。

产品核心功能：

a)毫秒级实时数据集成：

能够自动根据不同的数据库类型捕获数据变化日志可实现数据表的实时毫秒级同步，实时数据可同时并行分发到多个目标库或应用中。

支持实时数据传输到Hive、MongoDB、Doris、MQ中，同时也支持从MongoDB、MQ、文件实时传输到SQL数据库中，支持一对多传输，支持多流合并传输，传输过程中支持数据质量检查，能实时把脏数据分发到指定表中并发送告警通知。

b)离线数据集成：

平台提供ETL和ELT双引擎模块，用户可根据不同业务场景选择使用ETL或ELT组件

ETL可为用户实现复杂的数据集成场景以及数仓反向集成业务系统的ETL过程，同时可为用户快速实现业务数据到数仓及数湖的抽取过程

我们具有单项目上万数据管道的稳定调度实施经验，可为用户提供复杂的数据管道架构方案，以及全球化的数据合规交换

c)分钟级数据服务发布：

依托我们在API领域的强大技术实力，我们可为用户提供业界最为优秀的数据服务发布、数据服务治理等一整套解决方案。

通过专业的API低代码开发平台，可实现分钟级数据服务交付速度，为用户快速构建数据即服务平台（DaaS）

针对大型企业我们提供数据服务可视化编排、高性能数据服务网关等全方位的解决方案

d)简易上手的数据集成平台：

零代码可视化设计只需单击几下即可完成数据管道设计

充分优化的数据处理组件可以让任务开发效率大幅提升

自主研发自动分片和多通道并行传输技术极致传输性能

性能平均比主流开源ETL工具快30%以上，可稳定支撑每日数百亿数据的同步传输

任务开发效率可大幅提升100%以上

e)金融级高可用架构：

数据任务采用最先新的先进先出队列模式产生和执行，所有数据任务执行节点根据自身的CPU以及内存使用率来主动领取任务执行，当CPU或内存被监控到超出指定指标后系统自动停止节点领取新的任务直到内存恢复到正常水平，系统可以保护每一个节点的稳定性避免内存溢出的问题出现、数据执行任务历史记录可以采用MongodDb多副本存储确保任务执行高可用。

产品亮点：

a)亮点1：一站式的数据集成解决方案

b)亮点2：为企业的数据整合提供了全方位、高效便捷的支持。

c)亮点3：集齐一体化的ETL、ELT、CDC、API能力。

d)亮点4：可以在一个统一的平台上完成数据的提取、转换、加载，也可以灵活地进行数据的抽取、加载、转换，实时数据的监听和传输，以及API服务的发布。

e)亮点5：提供全Web界面，可视化拖拉拽开发流程，让用户能够快速轻松上手。

f)亮点6：打造数据集成组件生态，支持100+数据库、1000+组件、1500+数据处理模板。

g)亮点7：零代码构建数据管道，轻松集成数据。

h)亮点8：产品提供“中国最大的数据集成社区”，专为数据集成工程师打造的交流和成长平台。

i)亮点9：提供了丰富学习资源，包括视频、文档、在线直播等，帮助用户轻松掌握平台功能和技巧。

 

产品参数：

产品版本：V5.0	操作系统：Linux7.5及以上、Windows10及以上
所属类别：中间件	上架时间：

 

适用场景： 

数据整合与共享

集成来自各个部门和系统的数据，实现数据的统一管理和共享，消除信息孤岛，提高信息的流通效率，促进校内各个领域之间的协同与合作。

数据仓库和商业智能

将多个数据源的数据集成到数据仓库中，为企业提供一个集中的数据存储和分析平台。为企业提供全面的数据分析和业务洞察，支持商业智能和决策支持系统的建设。

实时数据集成和分析

支持实时数据集成和流式数据处理，使企业能够及时获取最新的数据，提供实时数据查询、展示，或进行实时分析和决策。

数据湖和大数据处理

集成来自不同数据源的大数据，并将其存储在数据湖中，提供对大数据的集成、存储和处理能力。支持企业进行大数据分析、机器学习和人工智能等高级分析和应用。

跨平台和跨云集成

集成不同平台和云服务商的数据，实现跨平台和跨云的数据集成。帮助企业实现混合云环境的数据整合和管理。

IoT数据集成和分析

集成来自物联网设备和传感器的数据，并进行实时处理和分析，助力企业实现物联网数据的价值挖掘和应用。

产品优势：

a)优势1：轻松操作：作为新一代全域数据集成平台提供全Web配置界面，可视化拖拉拽开发流程，效率超越传统ETL10倍以上，90%数据集成工作轻松完成，效率大幅提升。

b)优势2：超强ETL能力：平台提供超强的数据处理能力，可满足任意复杂的数据处理流程的构建，同时提供丰富的组件，通过不同组件的组合使用，解决当前企业中面临的复杂数据集成需求。

c)优势3：简单上手：提供丰富的学习资源，包括视频、文档、在线直播、数据工程师可以轻松掌握平台功能和技巧。

d)优势4：快速成长：社群及论坛汇聚全国优秀数据集成工程师，分享经验、避坑指南。专家交流快速提升个人价值。

e)优势5：功能全面：集ETL/ELT/CDC/API于一体，支持100+数据库、1000+组件、1500+数据处理模板。零代码构建数据管道，轻松集成数据。

f) 优势6：全面适配国产信创环境：聚焦国产化满足稳定兼容需求，构建安全可控的信息技术体系，加快建设信创产品高质量发展，合力共襄信创技术与产业突破。目前ETLCloud已完成相关产品兼容互认证，并成为信创工委会成员单位。