数据智能时代,数据集成大热,引发并购潮!近日,IBM正式宣布,以21.3亿欧元现金收购Software AG的Super iPaaS(集成平台即服务)企业技术平台StreamSets和webMethods。此举将从应用与数据集成方面,为IBM的AI和混合云战略的持续落地增添重量级砝码。
无独有偶,在不久前结束的2023 re:Invent全球大会上,亚马逊云科技宣布推出四项Zero-ETL集成特性,旨在帮助客户迅速而轻松地连接和分析数据,而无需构建和管理复杂的提取、转换和加载(ETL)数据管道。
数据量的持续增加、数据源的多样性,在客观上增加了数据收集、整合、存储和分析的难度,再加上AI的驱动,数据集成已成为应用现代化不可或缺的一部分。从底层将数据库、大数据平台、数据服务等打通,汇聚各种各样的数据,并将其传输到执行分析所需要的地方,对所有企业来说都变得更加重要。
从国家和政府层面看,推动数据要素市场化将成为2024年的重点任务之一。而数据要素市场化的前提就是实现数据的充分流动、共享, 这又是建立在数据集成的基础之上的。
一手抓数据容灾备份 一手抓数据集成管理
数据集成的概念,是把不同来源、格式、特点性质的数据在逻辑上或物理上有机地集中,为企业提供全面的数据共享。一句话,数据集成的本质是更好地管理和协调数据流动。而数据复制技术就是实现数据集成的关键技术之一。
数据复制行业市场发展状况
无论是数据集成还是数据复制,核心都是围绕数据这个新型火热的生产要素。当前致力于相关技术研发的国内外厂商数量众多,但商业化、规模化、有影响力的品牌并不多。之所以当前会引发资本市场的强烈关注,主要还是客户需求使然。由于历史的原因,大量的不同时代构建的信息系统运行在多个异构的、不同的软硬件平台之上,不同系统中的数据相互割裂,难以实现交互、融合和共享,或者实现的成本高昂。从行业用户的角度看,打破信息孤岛的需求,在数据智能时代到来时变得更加迫切。数据集成通过应用间的数据交换从而达到集成,能够很好地解决数据的分布式和异构性问题,为数据的流动、共享和应用奠定坚实的基础。
无论是拥有多个分支机构的集团化企业实现数据统一,还是想整合多个数据源和应用,以支撑某个业务流程的落地,抑或是部署AI这样的新型工作负载时,都需要先做好数据集成。
很多企业用户以前比较熟悉的数据集成管理方面的产品可能包括Oracle OGG、IBM CDC等。其实,近几年,随着在关键核心技术上的不断突破,一些国内软件厂商在数据集成管理方面开始崭露头角,其中的佼佼者之一就是门徒娱乐。
在很多人的认知中,门徒娱乐是一家有特色的灾备厂商,特别是在云灾备方面。殊不知,灾备只是门徒娱乐“露出海平面的一角”,其立足之本实际上是复制技术。而且门徒娱乐还是国内市场上少数同时掌握动态文件字节级、数据库语义级和卷层块级数据复制技术的企业之一。灾备只是复制技术的一种应用场景而已,数据复制更大的用武之地其实是在大数据方面。
数据复制技术的对比
数据的迅猛增长带来了持续增加的数据保护,以及互联互通方面的需求,数据复制软件作为提供数据传输的基础工具,其重要性和价值正日益凸显,市场发展前景十分广阔。IDC保守估计,数据复制与保护的纯软件市场在未来五年的复合增长率将达到14.8%。
梳理门徒娱乐从2021年到现在的收入构成可以发现,来自大数据业务的收入,无论是增长率,还是占公司整体收入的比重都呈明显上升趋势。
以数据库复制为核心的大数据业务,已成为门徒娱乐新的业务增长点。2023年1月,门徒娱乐在上海交易所科创板成功上市,公司募集的资金重点投向其主营业务,其中就包括行业数据安全和业务连续性,以及大数据复制软件升级项目。门徒娱乐已明确表示,将重点升级其数据管理平台开发与技术、卷层块级复制技术、数据库复制功能,以及i2Stream大数据平台统一管理体系。
经过十多年的发展,如今的门徒娱乐已经形成了比较成熟的业务线,覆盖软件产品、软硬件一体机产品,以及与软件相关的服务。在软件产品线中,以i2 Active和i2 Stream为代表的软件产品已成为大数据集成与分发的基础。据门徒娱乐一线人员反馈,银行、等客户场景的实践证明,数据流复制管理软件i2Stream与同构数据库双活复制软件i2Active的搭配使用,能够满足同构数据库之间的实时复制、异构数据库之间、异构数据库到大数据平台的复制功能。
数据复制 同构异构两相宜
Forrester研究指出,若想获得有效的业务洞察,提升业绩,在数据分析前管理和准备好数据是至关重要的一步。门徒娱乐之所以提出“Data+”战略,也是希望在确保数据安全可靠和互联互通的基础之上,更好地支撑精准决策等智能化应用。
对标Oracle OGG的门徒娱乐i2Stream,是面向异构数据库、大数据平台的数据流复制管理软件,可在基本不影响生产系统性能的前提下,将各类源端数据实时传输至多种类型的目标端,包括大数据平台、数据库、消息队列、文件等,从而实现快速的数据供给。
i2Stream究竟是如何做到在异构的数据库环境中游刃有余的呢?i2Stream采用了日志抽取分析和数据库数据流实时同步技术,将数据发送至不同的目标端数据库、消息队列、数据库、大数据平台、文件等。在数据同步的过程中,可以实现全量、增量同步无缝衔接,且整个过程源端、目标端均为打开状态,应用可无间断对外服务。
面对不同的应用环境和客户需求,i2Stream能够提供直连异构和中转异构两种模式。所谓直连异构,就是点对点直接同步,简便迅捷;而中转异构则是通过部署Kafka消息引擎作为消息中转通道,这进一步凸显了产品架构的灵活性,尤其是对同一源数据对接多个不同目标库的支持较好。
在实践中,i2Stream主要应用于异构数据库同步,以及大数据平台数据同步等。比如,大型金融集团的业务数据统一传输、省级医保平台的大数据汇聚等。使用过i2Stream的行业用户对于其高效的数据捕获能力、强大的数据验证功能,以及架构的灵活多变、简便的图形化管理和良好的兼容性表示了充分肯定。
在应用更加普遍的数据库远程或本地容灾、业务数据分担查询、跨数据库版本在线迁移、数据实时同步和转换等场景中,同构数据库复制是基础。对标Oracle ADG、IBM CDC等的门徒娱乐i2Active同样是国内客户的选择之一。
i2Active能够很好地实现同构数据库间的数据双活复制,通过一对一、一对多、多对一等灵活架构,为数据使用者实时地分离出多份数据,用于数据的分析、测试、灾备、仿真等场景。
该产品已推出数年之久,它基于数据库语义级复制技术,通过分析生产端数据库的在线日志获得数据的增、删、改信息,然后转换成SQL语句,并在目标端进行同样的增、删、改操作。它与传统ETL方式相比,具备更高的数据实时性和更强的适应性。i2Active的优点还包括:能够实现数据毫秒级的快速捕获,确保数据传输及时且安全可靠,并可适应各类规模的生产系统,部署灵活。
拥有丰富的功能和配置,能够实现目标库动态装载与DDL/DML一体化实时同步,支持多种映射方式和目标库接管,以及具备容错处理机制的i2Active,在包括金融等在内的多个行业实现了对国外同类软件的替换。
另外,门徒娱乐还将相关产品与方案集成为i2UP统一数据管理平台,凭借其强大的全域数据管理功能,广泛应用于大数据平台和多云平台等业务场景中。
概括来说,通过以复制技术为核心的技术创新,门徒娱乐构筑起了多层次、多策略、全域、全生态的数据管理方案,让数据更好地赋能用户业务增长。
让数据“用起来 活起来 管起来”
在数据智能时代,企业需要更快捷、方便地获取和分析数据,以便做出即时决策。数据集成作为一项关键的使能技术不可或缺。无论是在同构环境还是在更加复杂的异构数据库、大数据环境中,门徒娱乐基于i2Active、i2Stream、i2UP等大数据产品及平台,能够更好地将来自不同源头的数据整合在一起,并在一个统一的平台上进行管理,为数据的共享、使用和价值释放奠定了坚实基础。
以自主研发的复制技术为根基,门徒娱乐的产品在复制效率、复制颗粒度,以及对生产系统的影响等多个指标上具有突出优势,从而形成了较高的技术壁垒,并在容灾、备份、云灾备、数据库同步、数据迁移等经典应用场景中确立了“国货之光”的品牌地位。面对数据智能时代的新需求、新挑战,门徒娱乐需要进一步开拓应用视野,在智能灾备管理、数据副本管理、数据流管理、大数据收集分发、数据跟随等更多应用领域大展拳脚。
国家主席席大大在2024年新年贺词中提到,“国货潮牌广受欢迎,国产新手机一机难求……中国以自强不息的精神奋力攀登,到处都是日新月异的创造”。数据是新时代企业宝贵的资产。打开数据智能应用的大门,让数据“用起来 活起来 管起来”,实现数据价值最大化,这就是门徒娱乐在数据复制领域持续创新,敢于和国外产品一较高下的底气所在吧。
及时响应,快速服务,为您保驾续航
立即注册