星环科技基础软件全面升级!关系型分布式数据库性能翻倍

智东西(公众号:zhidxcom)
编译 |  高歌
编辑 |  云鹏

智东西3月25日消息,昨天大数据公司星环科技一连推出大数据平台TDH、分布式数据库ArgoDB和KunDB、数据开发与治理平台TDS、人工智能平台Sophon、数据云TDC等产品的最新技术升级。

此外,郑州地铁信息管理部副部长李昱见还分享了郑州地铁与星环科技的合作案例,星环大学项目副校长周洪明也介绍了星环科技TUO提供的培训服务。

星环科技创始人兼CEO孙元浩在开幕致辞中,回顾了星环科技的成立目标:建设最快的大数字引擎、让大数据平台实现多种模型数据的快速处理。

星环科技基础软件全面升级!关系型分布式数据库性能翻倍▲孙元浩介绍星环科技产品体系发展历程

他提到,星环科技每年都会对其产品进行版本升级、迭代,而今年很多产品的技术进展则尤为关键。

一、TDH大数据平台5层架构,计算、存储资源可分别扩充

星环科技高级产品专家宋宇介绍了最新版本的大数据平台TDH 8.0。宋宇称,与之前版本相比,TDH 8.0采用了首创的5层次统一多模型技术架构,包含了10种核心产品,可以满足客户的多场景需求。

星环科技基础软件全面升级!关系型分布式数据库性能翻倍▲宋宇在介绍TDH技术架构

最底层是资源调度层,也就是星环云操作系统TCOS。该操作系统采用了云原生技术构建,能够适配多种CPU架构,支持不同硬件、操作系统的服务器混合使用,使得客户不用担心新旧设备兼容性问题。

此前,计算与存储资源无法独立扩容,如果用户需要扩充计算资源,还需要同时扩充存储资源;只需要存储资源时也需要扩充计算资源,造成了资源的极大浪费。

根据发布会资料,TDH 8.0的存算解耦架构是星环科技的独门秘籍,可以让用户根据需求申请计算与存储资源。结束使用时,用户还可以释放占用的计算和存储资源,使资源利用率达到最大。

同时,TDH 8.0的工具组件Aquila、Manager、Guardian、Audit也相应进行了升级,使TDH在安装部署、扩容升级、安全防卫、风险告警、权限管理等方面的操作变得更加方便。

二、ArgoDB、kunDB兼容性强,支持多类型服务器混用

星环科技高级研发经理张常淳介绍了关系型分布式数据库ArgoDB的最新版本。

根据张常淳的讲解,ArgoDB 3.0相较于2.0版本,性能提升达到5倍以上。ArgoDB 3.0采用了和TDH 8.0一致的技术架构,更好地体现了其数据多模型兼容、可以进行联邦计算的优点。星环科技基础软件全面升级!关系型分布式数据库性能翻倍▲张常淳在介绍ArgoDB 3.0的性能优势

另外,ArgoDB 3.0也兼容Oracle、DB2、Teradata等多种数据库。主流国产操作系统和国产服务器也可以在ArgoDB 3.0上使用,国产服务器甚至可以与外国品牌服务器混合部署,满足了国产化部署需求。因此,ArgoDB 3.0取代了一些需要专有硬件才能使用的产品。

高级产品专家赵志强则对KunDB进行了详细的阐述,该数据库解决了分布式事务、分布式存储、分布式调度和计算等核心需求,并且支持SQL标准语言作为交互接口,包括Oracle PL/SQL等。

星环科技基础软件全面升级!关系型分布式数据库性能翻倍▲赵志强在介绍KunDB 2.0

除了数据库引擎之外,KunDB还提供了开发工具链和运维工具链。

开发工具主要包括SQL开发工具、数据的导入、导出、同步等。运维工具则包括安装部署、备份还原、监控审计等。这些工具都是结合KunDB的底层原理深度定制的,性能和使用体验上都有企业级产品的保证。

赵志强强调,KunDB还通过了中国信息通信研究院组织的金融核心交易性能测试。在测试中,KunDB完成了高并发转账、查询、代发工资、存款、取款、盘点等银行核心交易业务,性能高于大部分竞品。

与1.5版本相比,KunDB 2.0在TPC测试中的成绩提升了接近两倍。

星环科技基础软件全面升级!关系型分布式数据库性能翻倍▲张常淳在介绍ArgoDB与KunDB的整合方案

星环科技还对ArgoDB与KunDB进行了整合,统一了SQL入口,实现对TP类业务和复杂分析的统一处理,保障了数据的一致性与分析实效性。

根据介绍,目前两种数据库的用户覆盖了政府公共事业、工业、商业、教育、医疗等多个领域。

三、TDS降低数据开发、治理难度

星环科技产品专家王孟清接着介绍了数据开发与治理平台Transwarp Data Studio(TDS )2.2版本。

星环科技基础软件全面升级!关系型分布式数据库性能翻倍▲王孟清在介绍TDS

据她介绍,TDS提供了数据开发、数据治理、数据资产管理、数据标签与服务、数据共享与交易等一系列数据处理工具。与以前的版本相比,新版本增添了两个子产品:

一个是数据质量管理工具Governor,该工具用于管理数据时可能引发的数据质量问题。

星环科技基础软件全面升级!关系型分布式数据库性能翻倍▲TDS实际进行数据开发时的产品界面

另一个是数据商城Transwarp Foresight,它整合了TDS的数据服务开发工具Midgard和标签开发工具StarViewer,可以为业务人员提供数据资产的检索、下载、共享的能力,帮助数据的使用者、开发者和管理者构建其数据运营能力。

星环科技基础软件全面升级!关系型分布式数据库性能翻倍▲使用TDS数据标签时的产品界面

四、Sophon三大产品线带来全流程人工智能管理

星环科技人工智能研发总监杨一帆则带领其团队,带来了对人工智能平台Sophon 2.7 LTS的介绍。

他提到,Sophon 2.7 LTS是Sophon 2.X系列的最后一个长期版本,支持对数据导入、探索、预处理、特征工程、模型训练、性能验证、模型部署、模型管理等数据处理的全流程管理。

星环科技基础软件全面升级!关系型分布式数据库性能翻倍▲杨一帆及其团队在介绍Sophon的三大产品线

Sophon 2.7 LTS有三大子产品线,分别是数据科学平台Sophon Base 2.7 LTS、知识图谱Sophon KG 2.7 LTS,以及边缘计算平台Sophon Edge 2.7 LTS。

星环科技高级研发经理赵大超负责介绍Sophon Base。其平台下的Sophon FL是星环科技自研的高性能学习平台,通过了中国信息通信研究院首批联邦学习产品能力测试认证。

与市场上其他产品相比,Sophon FL对海量数据预处理及训练十分擅长。

星环科技高级产品专家朱菲菲则认为,Sophon KG是企业的第二个大脑。

她谈到,该平台实现了从多模态数据采集、文本智能建图、实时更新到知识融合和推理的完整闭环。其自然语言处理能力较强,能够初步完成文本的智能建图,支持金融等场景的事件识别和时序时间战线。

通俗来说,该平台可以通过识别文本,将事件可视化,按时间顺序进行排列。

星环科技基础软件全面升级!关系型分布式数据库性能翻倍▲Sophon KG事件识别功能的运行界面

星环科技高级研发经理范豪均称,Sophon Edge是一款实时AI分析平台,提供边缘化、场景化、高性能、软硬一体的实时AI分析能力。该平台可以与时序算法结合,实现物联网的边缘智能,能够对时序数据进行实时预测处理。

在新版本中,Sophon Edge增加了场景概念,使用户可以快速使用场景包,不用关心底层的业务配置信息也可以模拟场景,使用户的操作更加容易上手。

五、国内最早数据云:TDC

星环科技数据云研发负责人王天青讲解了星环科技数据云最新版本:TDC 2.4。他称,TDC主要面向企业私有化场景,可帮助企业解决数据管理混乱、资源冲突、效率管理等困难,可以规范应用开发流程,也是国内最早的数据云产品和解决方案。

星环科技基础软件全面升级!关系型分布式数据库性能翻倍▲王天青在介绍TDC的业务、数据、应用和基础设施等方面

王天青称,最新的TDC 2.4版本具备五大特性:支持多种业务类型的工作负载、云原生调度实现数据与计算局部性、分布式计算执行单元场景化扩缩容、支持GPU多租户共享调度、支持异构CPU和操作系统混合部署。

此外,郑州地铁作为星环科技的深度客户,其地铁智能化是TDC应用的经典案例。郑州地铁信息管理部副部长李昱见介绍了郑州地铁的基本情况。

他也谈到了郑州地铁使用TDC建设了自己的云数据平台,将地铁线路数据和企业数据相结合,在保障安全的前提下,推动郑州地铁智能化的步伐。

星环科技基础软件全面升级!关系型分布式数据库性能翻倍▲郑州地铁信息管理部副部长李昱见

六、TUO人才培训平台:培训开发者超40000人

最后,孙元浩在发布会中提到,针对企业与高校人才培养,星环科技提供了Transwarp University Online(TUO)综合培训平台。星环大学项目副校长周洪明简单介绍了TUO平台在高校与企业的使用情况。

TUO平台已经在国防科技大学、南京大学、某省农村信用合作社等学校、企业中落地。该平台为超过1500家企业、300多所高校提供过培训业务,累计培训开发者超40000人。

星环科技基础软件全面升级!关系型分布式数据库性能翻倍▲周洪明在介绍TUO平台的功能

他也介绍了目前TUO平台的课程资源:

目前TUO平台上共有18套讲义素材,30多个行业场景,100多起项目案例与500GB以上的数据集。

结语:适用性或成大型企业数字化转型关键

星环科技作为国内大数据头部玩家之一,技术比较先进,产品动态在某种程度上代表了大数据的一种发展可能。孙元浩此前曾对智东西等媒体谈到,星环科技的产品在使用的适用性、上手难度、兼容性等方面做的比较不错。

在他看来,现在很多数据库软硬件互不兼容,数据迁移难度打,对用户的使用造成了极大的困难。孙元浩提到,有些时候大数据公司应该适当舍弃一些性能优势,在兼容、易上手方面做的更好。

而很多国企、央企、银行业务数据庞大,在企业数据化转型过程中存在业务广泛、部门繁多、数据量庞大、应用场景复杂等问题,简单、便捷的技术发展方向可能会更合适这些企业。