动态数据移动包括将数据从传统的rdbms(如oracle)复制到mysql,azuresql数据库,kafka和postgresql等数据库。
数据很有价值,因为它包含代表组织的所有信息。由于客户交易、销售查询、价格波动和采购趋势等因素,生产数据库中的数据会不断变化。它代表您实现业务目标的潜在活动。
有许多新技术和技术可以帮助您的业务分析师、营销专家、销售人员、数据科学家和cxo 解释数据并采取行动。但是,您必须找到确保数据可以在系统之间实时移动的方法,以便从数据中获得最大价值。
什么是数据移动?
在我们(和idc)看来,数据移动是两个子市场:
用于高可用性、灾难恢复和扩展的数据库复制。
动态数据移动是系统之间(主要是)数据异构移动。
数据移动涉及一项您已经熟悉的任务:通过更快地将数据移动到正确的系统来增加数据的价值。
传统上,使用数据复制将其移动到这些系统。这是在多个位置同时更新数据副本的过程。复制的一个目标是使数据始终移动到依赖它来做出决策的用户和需要它来执行事务的客户。其他目标包括高可用性和灾难恢复,以及横向扩展超出数据库的设计范围。
在大多数情况下,您的数据复制相对于rdbms 供应商是同构的。也就是说,您正在从一个oracle 数据库复制到另一个数据库。它稳定、传统且熟悉。
但是,随着您的公司采用开源和nosql 数据库,您会注意到从同构复制到动态数据移动的转变。
这种新的“动态数据移动”是什么?
术语“动态数据移动”通常适用于异构上下文,并使用更改数据捕获(cdc)将数据从数据库移动到其他系统。随着您的组织从oracle 等企业备用设备多样化到mysql、postgresql和 kafka等新供应商,对于越来越常见的用例(如集成应用程序、填充数据湖或数据仓库以及运行现代分析应用程序),它变得非常重要。
例如,在数据仓库中,您可能习惯于传统的etl(提取、转换、加载)产品。问题在于,大多数公司的数据集成要求已经超越了etl。为什么?
首先,您正在处理的数据量不断增长。其次,操作永远不会落山,因此加载批处理的窗口已经缩小,促使您进行近乎实时和事件驱动的数据集成。最后,多数据库平台的趋势(如上所述)会给您留下不匹配的源和目标。
因此,数据移动市场总体上正在随着etl而增长和模糊。分析公司idc将更广泛的数据产品市场分为三类:
数据智能 — 数据质量的关怀和馈送
数据访问 —连接器、数据准备和生命周期管理
数据集成 —提高决策(包括动态数据移动)的数据交付速度
使用shareplextm进行数据移动
shareplex by quest 旨在简化业务需要的所有用例中的复制:
数据复制中的可用性
可扩展性 —用于分布式处理、级联和改进的性能
报告和集成 —用于分析、数据库整合和低影响审计
shareplex 可在同构和异构环境中复制数据,使其成为数据移动的理想选择。典型方案包括:
将oracle操作数据库与开源数据库集成
将所选数据从 oracle数据库复制到开源数据库以进行数据仓库或报告
从 oracle数据库复制业务数据,以便使用azure synapse 和azure ai 等云工具进行分析
使用 shareplex,您可以将完整的数据从oracle 移动到sql server、azuresql database、kafka、azureevent hubs、mysql、postgresql和 jms 队列等各种目标。
诊断和稳定不稳定开关电源的快速提示
如何安装Quad Boot Raspberry Pi
锂电材料领域诞生了一批具备国际竞争力的优秀企业
AlphaGO大胜李世石 但与“划时代”无关
四冲程发动机工作原理 四冲程发动机的四个冲程分别是什么
Quest:什么是动态数据移动?
小蚁科技荣获华创奖 |“新一代信息技术最具成长性企业”
我国云计算企业开启新的征程
双面FPC制造工艺全解
PCIe Clock Buffer-Generator-Si
物联网技术可以实现智慧医院的智能化
人工智能的发展将带动哪些职业?
OPPOR11下月发布:前后四摄像头,拍照+超级快充
MOS管做二极管的原理分析及电路仿真
三星超大型掌机Galaxy Note即将上市
数显便携式离子计的主要技术参数
甲醇快速检测仪的特点及功能
基于RK3568J板卡高铁高清视频监控系统解决方案-迅为电子
abb变频器报21故障怎么维修
考拉悠然董事长申恒涛荣获2022年“科学探索奖”