导语 :在数字世界的深处,一场无声的革命正在酝酿。国产化软硬件的升级替换之路,仿佛一条蜿蜒曲折的探险之道,充满了未知与挑战。
正是这些挑战,催生了行业内专家们的探索与实践,他们在ITPUB举办主题为“国产化软硬件升级替换之路”的第六期线上沙龙现场,分享着最新的研究成果与实践经验,为我们揭示了这条道路上的可能与未来。
在这场充满智慧与激情的碰撞中,我们不仅看到了技术的力量,更看到了坚持与创新的价值。现在,就让我们一起踏上这条充满奇遇的国产化之路,去探寻那些隐藏在挑战背后的宝藏吧!
HTAP:统一业务支撑能力
在国产化的大背景下,新一代信息技术迅猛发展和广泛应用,要求企业能够对数据进行更快速、更准确、更全面的分析处理。
与此同时,用户业务场景的发展趋势也对数据处理提出了“实时化”的要求,用户希望基于原始数据的迭代式。
神舟通用资深架构师王天访强调,在数据领域,传统的基于数据仓库经典理论的分析已经无法适应用户业务场景的发展需求,原有的业务无法将TP和AP业务进行融合统一,TP业务使用通用的数据库,AP用数据仓库,部署和运维成本双高,而HTAP(混合事务分析处理技术)的出现可以使得二者业务可以融合统一,大幅度降低成本。
那么针对目前用户面对无法按需扩展、急需更新与分析共存、精确查询速度慢等等的一系列困扰,王天访站在架构师的角度也给出了解决之道,例如多维并行加速、多模存储引擎以及自动化数据管理等等。
多维并行加速为例,包括了MPP多机并行技术、SIMD矢量化运算技术、SMP多核处理技术等等。
王天访表示,部署架构如果采用MPP(Massively Parallel Processing)集群方式数据组织和存储,可以处理大规模数据集。部署MPP数据库集群涉及多个节点的配置和 协调,每个节点都具有独立的计算和存储资源。
以神通MPP为例,其部署拓扑包括:MPP元数据库、MPP管理服 务、MPP代理服务、MPP节点数据库。
王天访在演讲中还展示了一系列案例,包括国家发改委、航天领域、农业部等等项目,都取得了很好的实施效果。
存算分离数据库硬件设施的实现路径
在应用飞速发展的当下,数据库系统架构的先进设计变得愈发重要。存储是数据的载体,既承担着海量数据存储与管理的重任,又为数据的安全性提供保障,存储作为数字基础设施三大底座之一发挥着至关重要的作用。
宏杉科技作为国内少数具有高端存储自主研发能力的厂商之一,专注于存储技术的全栈自主研发。在存储领域积累了包括 CRAID技术、异构存储虚拟化技术、双活存储技术、NVMe全闪存技术等在内的一系列存储关键技术,构建了完善的存储核心技术体系,其中极致性能NVMe全闪存技术达国际领先水平,为云计算及大数据领域的IT基础设施提供强有力技术支撑。
存算分离架构应用于数据库基础设施场景中时,可以带来系统伸缩能力强,计算与存储资源按需分配、按需扩容;系统容错率高,故障便于排查,点对点修复以及资源分离池化管理,架构灵活等一系列优势。
在存算分离思路的指导下,宏杉科技一直在构建全国产存算分离基础设施。宏杉科技产品部总工程师单东来表示,宏杉科技SAN存储能够通过业界标准接口和云平台、大数据处理平台、高性能计算平台对接,实现统一的数据调用和管理,同时存算分离的架构可以采用100G及更高速率的高速网络,将SAN存储的性能发挥到极致,使得外部存储设备在时延、带宽等关键性能指标的表现上均超越服务器本地硬盘。
谈到数据库存储底座的核心:MVMe,单东来强调,他首先是一个协议,在协议栈中隶属最高层。它制定了主机与SSD之间通讯的命令,以及命令如何执行,可以充分发挥多核CPU的性能。NVMe SSD一般采用PCIe接口,通过接口与PCIe总线直接连接,与CPU直接进行交互。因此相比SAS SSD速度大大提升。
但随着NVMe技术的日趋成熟,PCIe总线由于其传输距离较短,反而限制了NVMe over PCIe进行设备之间的互联与数据传输。宏杉科技在业界率先实现NVMe over RoCE和NVMe over FC两种NVMe over Fabrics传输层协议,自主开发SNSD技术实现智能iNoF,显著改进标准NVMe over RoCE的管理能力,并可通过全以太网NVMe over RoCE技术实现对FC SAN的全面替代。
数据应用服务在国产化之路上的尝试和探索
数智化时代,企业服务的产品形态主要分为两类,包括流程(类)应用服务和数据(类)应用服务,数据类应用服务会嵌入到流程类应用服务中去,同样也存在独立的主题化数据服务。
那么什么是数据服务呢,用友数据应用专家姚健表示,数据服务在企业服务上主要包括两种形态:第一种形态,数据应用服务(dSaaS), 即各种数据服务的工具; 第二种形态,数据资源服务(DaaS)。
姚健强调,数据应用服务是现代企业运营中不可或缺的一部分。可以用一个简洁的公式来表示,数据应用服务=稳态数据仓库+ERP连接器/广连接平台+敏捷BI平台+开箱即用的模型库+N种数据应用场景。
用友数据应用服务,凭借大数据、云计算和人工智能等先进技术,能够有效地连接企业资源规划系统和其他相关系统,优化业务流程,提升管理效率,为企业的决策和业务经营提供强大的数字化支持。
举例来说,用友中高端ERP客户,可以一键连接U8/U8C/U9C/NCC,通过预置领先的行业、领域与基础 数据模型,利用ERP数据即时洞察企业关键问题与创新机会,驱动经营管理优化与降本增效,实 现全业务流程管理与数据驱动流程持续优化的闭环管理,加速企业数智化转型与商业创新。
随着企业业务的快速发展和数字化转型的加速,数据应用服务在企业运营中发挥着越来越重要的作用。用友数据应用服务通过数据资产价值的分析,最终为企业带来了诸多益处。
在最后的讨论环节,专家表示,国产化替代的难点聚焦在生态、数据仓库以及用户习惯等等方面,以生态来举例,现阶段国产化处在百花齐放的阶段,企业的基础设施架构需要适配各种各样的应用和软、硬件设施,非常需要一个国产化的主流标准出现,这样有利于用户方便地进行国产化转型,除此之外,兼容性和迁移也是用户需要考虑的问题。专家特别提到了替换过程中的安全问题,也不能忽视。