星环科技重构数据云平台,持续释放数据红利和价值
2019-06-20 11:24:10   来源:互联网
内容摘要
众所周知,如今的世界正在以加速度进入到智能时代,特别是随着各项业务的云化深入以及万物互联,数据处理能力的进一步提升,智能算法一次又一次的突破,以及云计算在传统产业的更密集的渗透,逐渐形成了“物理世界信息化、信息世界智能化”的新特征。 在此大背景下,传统数据管理平台僵化且集中的架构对企业实现数字化和智…

众所周知,如今的世界正在以加速度进入到智能时代,特别是随着各项业务的云化深入以及万物互联,数据处理能力的进一步提升,智能算法一次又一次的突破,以及云计算在传统产业的更密集的渗透,逐渐形成了“物理世界信息化、信息世界智能化”的新特征。

 在此大背景下,传统数据管理平台僵化且集中的架构对企业实现数字化和智能化转型显然难以提供更长久的支撑。因此,一个以数据为中心,且能够把数据、应用、智能融合为一体的架构和平台,在为企业提供灵活管理和分析处理数据的同时,也能够把数据源源不断的转换为智能和洞察,为企业创造更加敏捷的行动力与速度,已是大势所趋。

 而星环科技创新推出的Transwarp Data Cloud(TDC)数据云平台,就是为满足企业对于数据云需求而打造的全新云原生平台,它采用容器技术,以数据为中心,通过提供完整的数据、应用和智能的开发工具,实现了数据和应用的互通互联,对企业拥抱数字化和智能化,释放数据的红利和价值,可以说提供了坚实的技术架构底座。

 毫无疑问,TDC数据云平台不仅是星环科技在大数据、实时数据处理领域、大数据和云融合领域以及机器学习、人工智能领域技术创新的“集大成者”,同时其以云平台为基础,以数据为中心,以智能化为方向的建设方式,也在整个市场中重新定义了数据基础设施技术升级的新范式和技术选型判断的新标尺。

 数据管理平台演进和迭代

 星环科技研发总监刘汪根告诉我,数据管理平台在此之前经历了大概三个发展阶段:

 星环科技研发总监刘汪根

 2010年之前,以传统的MPP的数据库为主,以Teradata、Oracle RAC为代表的传统时代,这一套数据管理系统为企业产出了各种各样的数据报表,也为企业实现数据分析打下了一定的基础。

 但这种传统的数据管理平台也有很大的“短板”,包括可扩展性差,难以满足企业大规模数据处理的要求;数据分析无法实时产生,无法满足企业对数据实时产出的要求;同时,对非结构化数据无法处理,也让数据的开发和利用只局限在很小的领域,可以称之为数据有限分析的时代。

 2010年左右,以Hadoop、Spark技术为代表的大数据技术逐个兴起,它帮助企业在数据管理中解决了三大痛点,包括性能可扩展的难题;对非结构化数据处理有了支撑;同时数据处理的实时性难题在Spark等新技术的加持下也得以逐渐解决。

 同样在这一时期,企业的业务系统普遍存在“烟囱式”业务系统,从而导致企业的数据管理、应用效率偏低,更多是通过离线的数据接入来满足业务需求。所以,企业开始建设除了分析业务系统以外的在线数据业务系统。但问题也随之而来,那就是数据、应用和AI平台之间相互独立,企业只能通过接口层做有限的数据与应用交互,这也使得数据价值并没有得到充分释放。

 2015年至今,随着各种新技术的发展与融合,又进一步推动了数据管理的发展。特别是云计算、AI、IoT、5G等新技术的先后涌现,使得数据的应用层出不穷,同时也产生了新的数据形态、新的部署环境、以及新的应用模式。

 更重要的是,相比前两个阶段,这一阶段企业的数据管理面临着前所未有的新挑战,具体来说,就是数据资产化、数据业务化和业务智能化。

 一是,数据资产化,是指数据正承载着越来越多的价值,企业从数据中提取洞察的诉求变得越来越急迫,因此数据正逐渐成为企业一项重要的资产,并创造价值。而数据资产化,就是要通过更加简单和高效的方式,让用户可以更好的获取或者使用数据。

 二是,数据业务化,是指需要基于大数据平台与数据仓库之上的数据应用中心,并结合完善的数据治理方案,把数据通过业务模块化、抽象化,最终逐渐完成丰富的数据服务集市,服务前端快速构建所需新型业务。

 三是,业务智能化,是指随着企业业务人员对数据的需求越来越多,企业需要开发出大量新的数据应用来持续的迭代业务,改进用户体验,包括实时类、AI类、在线数据类业务的大量创新和尝试,这就要求数据、AI和应用能够非常有机的融合,最终在一个云上来支持弹性、灵活的数据和应用云。

 在刘汪根看来:“现在业界所提的数字化转型,其本质就是企业希望未来所有的决策流程都能以数据化作为支撑, 这也就意味着企业传统的数据管理方式需要进行升级,同时还必须基于云平台形成新的数据开发方式,最终让数据转换为智能洞察,更好的帮助企业实现数字化和智能化业务的呈现。”

 星环科技重构数据云平台

 正是洞察到了市场的重大变化,星环科技早在2015年就启动了新一代Transwarp Data Cloud(TDC)数据云平台的研发,并于2018年发布了TDC 1.0版本,今年5月又再次发布TDC 2.0版本。

 刘汪根表示,如果说TDC 1.0解决了大数据的云化问题,那么TDC 2.0版本则是业内首个通过云原生技术提供了完整的数据PaaS、应用PaaS和分析PaaS的数据云平台。

 值得一提的是,TDC 2.0与上一版本相比它能更全面的满足不用业务,不同角色的工作需求,为企业数字化的转变提供更完善的支撑;同时也比业内通过混合方式构建的数字化解决方案,能够更好的实现数据、应用和智能的融合。

 首先,在数据平台服务方面,TDC 2.0新增了自研的闪存分析型数据库ArgoDB,以及图数据库StellarDB以及分布式交易型数据库KunDB。目前星环已经覆盖了几乎所有类别的数据库和NoSQL,并且都是基于分布式技术打造,可为企业不同的数据应用场景,提供了全方位的支持。

 其中,KunDB是星环科技专门为新一代云业务提供服务的云原生数据库,可以作为企业微服务化之后的后台数据库对业务提供支撑。同时KunDB采用了多租户设计,可支撑业务建设中心化的趋势,而且作为国产自主可控的数据库,KunDB也可以适配各种国产化硬件,为企业创造完全自主可控的环境。

 “我们数据库的种类到现在为止,已经做到品类的覆盖,并且都是从企业的实际需求出发。每一类数据库,只要星环科技出品我们都做到技术的领先性,对此我们有相当的信心和底气。”刘汪根说。

 其次,在应用平台服务方面,星环科技以自研的容器操作系统(TCOS)为基础,为企业提供了应用开发的各种框架以及中间件,解决了企业应用开发、部署、运维、治理的效率问题,可应对企业面临的各类应用开发和管理障碍。

 具体包括,星环科技提供了基于云原生技术构建的企业应用市场,每个企业可以根据自己的需求来构建自应用市场;提供了完成混合云的管理技术,无论数据、服务是构建在边缘端,还是在公有云或其他私有云,只要通过容器化的技术,TDC都可以实现统一管理和调度,无需关注部署落地细节;此外,提供了融合的安全管理技术,无论是数据还是资源,只要接入星环的管理的API和管理体系,都能够提供整套的数据链路安全管控。

 最后,在数据分析平台服务方面,星环科技提供了统一的数据开发技术,基于SQL的数据开发技术,以及基于Python的数据科学分析,可以满足企业数据分析服务内外开放的需求,同时也允许大量数据工程师、 数据科学家在一个平台上并发工作,促进相互协作。

 刘汪根介绍,一方面星环科技通过企业级数据资产目录Data Catalog解决了企业数据资产管理混乱的问题,同时也为企业数据治理提供可靠、便捷、智能的全流程工具支撑,从而更加有效的发掘和利用信息资产的价值;另一方面,在此基础上,星环科技引入了人工智能平台Sophon,把整个数据建模,数据特征提取,包括最终数据模型的发布,都得到了统一的管理,通过完整的数据分析服务解决了数据的智能化问题。

 由此可见,通过构建数据、应用、智能融合的数据云平台,星环科技真正帮助了企业打通了全域数据链接、建立统一的数据服务能力,并大大推动了企业拥抱数字化和智能化的进程。

 持续释放数据红利和价值

 在我看来,星环科技以及其TDC数据云平台,无论是对企业的数字化和智能化转型,以及持续释放数据的红利和价值,乃至对未来整个数据管理市场的发展和演进,都将起到三个方面的重要价值:

 第一,确立了以数据为中心的建设新理念。目前数据管理平台的建设方式有两种思路,一种是以OpenStack为代表的以资源为中心的建设方式,采用虚拟化技术将底层资源包装成个各种服务,用户可以租用这些资源,在上面构建各种应用。

 但这种方式依然是以资源管理为中心,企业还是采用烟囱式技术栈,比较难在平台上打通应用和数据。而以星环科技TDC为代表的以数据为中心的建设方式,先在上层支撑应用建设,通过提供数据资产服务、应用开发和数据分析的完整工具链,不仅加速了数据、应用和智能三大核心原料的融合,也实现了以数据驱动应用的最终目标。

 第二,推动了数据基础架构升级的新范式。我们知道,如今在IaaS领域正通过过云平台的微服务化和一体化设计建设新一代的私有云,这样不仅可以从交付、运维、升级实现“交钥匙工程”,也使得新一代私有云按需付费的云服务模式得以实现,更让私有云从过去的云软件时代进入云服务的新时代。

 同样,在PaaS领域,以星环科技TDC为代表的数据云平台也采取类似的重构方式,通过容器化技术来运行各种工作负载,提供多租户、自动扩展资源、服务自监控等能力,实现开发与运维的平衡。此外,在数据云平台上又提供了各种数据资源服务,包括大数据、AI、流计算、数据资产等,在为整个技术架构提供坚实底座的同时,更大大推动了数据基础架构升级的新范式。

 第三,释放了数据持续赋能企业的新价值。进入数字化、智能化的新时代,数据正在以惊人的速度增长,几乎触及各行各业,许多企业都被迫寻找新的创造性方法来管理和控制如此庞大的数据,当然这么做的目的不只是管理和控制数据,而是要分析和挖掘其中的价值,以此来促进业务的发展。

 从这个角度来说,星环科技TDC数据云平台以其资源弹性伸缩、快速部署迭代、支撑微服务化开发、资源管理编排等能力,很好的打通了数据与业务之间的链接难题,持续释放了数据的红利和价值,对企业实现数字化和智能化转型都将起到重要的加速作用。

 如刘汪根最后所言:“衡量一个企业数字化和智能化转型,无非就是做好三件事情,即数据、应用和智能,那么如今通过星环科技TDC数据云平台,企业的数据资产无论是从0到1,还是从1到100,都能快速的搭建起来,由此可以推动业务产生更多的价值和作用,而这也是星环科技一直以来践行的科技赋能企业的新方式。”










免责声明:以上内容为本网站转自其它媒体,相关信息仅为传递更多信息之目的,不代表本网观点,亦不代表本网站赞同其观点或证实其内容的真实性。

关键字相关信息: