申耀的科技观察
读懂科技,赢取未来!
众所周知,如今的世界正在以加速度进入到智能化时代,特别是随着各项业务的云化深入以及万物互联,数据处理能力的进一步提升,智能算法一次又一次的突破,以及云计算在传统产业的更密集的渗透,逐渐形成了“物理世界信息化、信息世界智能化”的新特征。
这也意味着数字化转型迈入“深水区”,行业竞争加剧,新业态层出不穷,产业颠覆不断袭来,让企业需要更快的加速数字化、智能化转型,快速获取云计算、AI、大数据等新能力,以构筑企业在智能化时代的新竞争力。
在此背景下,5月15日,星环科技召开线上发布会,全面升级ABC三条重要产品线,包括多模异构的数据处理平台TDH7.0;以“联邦云”概念打造的星环科技数据云平台TDC;并发布知识图谱全栈解决方案,以及基于边缘计算的云边一体AIoT解决方案和基于人工智能和复杂网络的实时反欺诈解决方案。
毫无疑问,星环科技ABC三条重要产品线的全面升级,是这家公司在技术创新领域“七年磨三剑,积硅步至千里”的重要印证,这不仅会大大提速企业客户实现数字化转型、智能化升级的步伐,也会让星环科技在未来的“新基建”建设中,扮演更加重要的角色打下坚实的基础。
TDH7.0实现四大“统一”
凯文·凯利曾在《失控》中写到:“最深刻的技术是那些看不见的技术,他们将自己编织进日常生活的细枝末节之中,直到成为人们生活的一部分。”
确实如此,今天各种数据正快速融入人们的日常生活之中,让衣、食、住、行等相关领域的海量数据实现了持续迸发。同时,大数据技术和应用也逐步成为了国家基础性的战略支撑,更成为了推动数字中国、数字经济和新型智慧城市建设的新动能。
在星环科技创始人兼首席执行官孙元浩看来,目前各种大数据技术应用越来越广泛,特别是对于一些单一的典型场景,业界有了不少知名的解决方案,如结构化数据使用Hive;动态列模型使用Bigtable、Hbase;文档处理使用MogoDB;图数据使用Neo4j;搜索引擎ElasticSearch等等。
但是,在实际应用中,用户的使用场景日趋复杂,处理多模型的需求日趋广泛。在处理多模型的需求时,用户不得不采用多工具组合的混合方法,但这种混合方法的运维过于复杂,必须要维护多种数据库来满足不同模型的需求。因此,用户迫切需要一个统一的平台解决日益多样灵活的各类需求。
正是深刻洞察到企业客户在大数据使用中的“痛点”, 星环科技多模型数据数据处理平台Transwarp Data Hub 7.0(TDH7.0)“应运而生”,其主打一站式多模异构数据处理,打破了行业内普遍存在的不同数据库产品切换的不便利,通过一个平台处理多种数据模型,用户无需维护多种数据库即将成为现实。
具体而言,TDH7.0作为一个多模型的数据处理平台,支持7种不同数据模型的存储,分别是:行列混合存储、Key-Value键值存储、全文检索、图存储、文档存储、地理空间存储及非结构化对象存储,并可以实现四个“统一”,即统一的数据操作/查询语言 SQL、统一的数据计算引擎、统一的分布式存储管理系统、统一的资源管理框架,满足利用一个多模异构平台,处理多种数据的需求,其核心优势可以从三个维度来做观察:
首先,极大提升了各个产品的效率。例如,同一份数据需要进行多种不同模型分析:分析查询、模糊匹配查询、关系推理查询。那么,TDH7.0可以针对不同需求采用多种最优存储模型,包括分析查询采用行列混合存储;模糊匹配查询采用全文检索;关系推理查询采用图数据存储。因此,通过多种模式的存储,可以使各场景下的查询分析性能都得到极大优化。
其次,便捷的应用开发。在传统混合模型中,不同模型数据间做关联分析,需要进行跨数据库的数据导入导出,十分复杂。而TDH7.0采用了统一的数据管理,一个简单的SQL语句就可以直接进行关联查询,如同操作同一个数据库一般,使应用开发变得十分便捷,也提升了工作效率。
最后,大大降低运维成本。在传统混合模型中,不同模型需要运维不同数据库。特别当同一份数据存储于多数据库时,数据一致性成为极大挑战。此外,数据总体情况的运维,需要各个运维子系统汇总并二次开发,运维成本巨大。而TDH7.0采用了统一的数据管理,在产品底层服务中直接保障数据一致性,同时对多模型的数据进行整体运维,是天然的一体化系统。
不难发现,TDH7.0以一站式多模异构数据处理的能力,无疑将帮助更多用户开辟新航道,平稳快速的穿越大数据“深水区”,在为各行各业的用户提供“一站式”大数据技术服务的同时,也会真正释放大数据带来的红利价值。
以“联邦云”模式构筑TDC
我们知道,2018年星环科技发布了TDC数据云平台,这是星环科技在大数据、实时数据处理领域、大数据和云融合领域以及机器学习、人工智能领域技术创新的“集大成者”,同时其以云平台为基础,以数据为中心,以智能化为方向的建设方式,也在整个市场中重新定义了数据基础设施技术升级的新范式和技术选型判断的新标尺。(参见《星环科技重构数据云平台,持续释放数据红利和价值》)
在此过程中,星环科技也注意到这个市场发生了一些重要的变化。例如,许多大型客户的数据中心的数量是在增加的,单个数据中心已无法承载他的数据和应用,他们通常会横跨多个数据中心,需要数据在多个数据中心之间能够互联互通,包括资源能够互相调用。
不仅如此,一些大型企业开始上公有云,但是自身也有私有云,需要对公有云和私有云进行互联互通。此外,有些企业通常可能是跨国公司,它们有多个数据中心遍布不同国家,每个国家对数据有不同的保护条例,不能把数据移出本国,因此这就需要有一套框架能够连通,在不同国家的各个数据中心形成一个统一的云。
孙元浩也说:“近期国家也发文号召要把数据作为生产要素进行管理,这就也就意味着企业将来的数据共享会成为趋势。同时,在‘新基建’提速的背景下,企业自身的私有云跟合作伙伴、跟外部的企业的云之间怎么进行数据的互通也会成为一个新的课题。”
基于此,星环科技通过“联邦云”的概念重构了TDC数据云平台,也使之成为TDC 新版本中的一个十分重要的新特性,其核心的架构是:通过将跨多个数据中心甚至公有云的数据、应用和基础设施资源进行统一管理,协同管理企业内部已有的资源和数据,从而构建一套完整、统一、互联互通的数字化基础设施。
“通过联邦云创新的技术架构,星环科技支持在一层公共的PaaS层上构建多个私有云及多个公有云,并能把底层IaaS层的云细节完全隐藏,同时在PaaS层上面,实现了5个层级的联邦化。”孙元浩表示。
第一层,是IaaS云资源的联邦,TDC联邦云支持IaaS层的计算、存储、网络的互通,当一个数据中心的资源不够的时候, PaaS层可以直接调度另外一个公有云或私有云的计算资源,进行弹性扩张。
第二层,是实现数据联邦,TDC联邦云在每一个数据中心都有一个数据资产目录,并通过数据共享交换,使得它们能够在多个数据中心之间非常顺利地找到对方的数据资源、数据目录,能够直接访问对方的数据。
第三层,是实现联邦计算,TDC联邦云能够把一个统计需求,如SQL等发给某一个数据中心,它可以把这个SQL分解成一个计划,分散到多个数据中心上面去进行运算,再把结果进行汇总,这也就意味着通过TDC数据云平台可以同时去访问多个数据中心的数据,也能同时利用多个数据中心的计算资源。
第四层,是实现联邦学习,跟SQL跟统计类似,TDC联邦云可以把机器学习的一个模型分发到多个数据中心上面进行分散计算,再把特征收集回来进行模型训练。这种方式一方面可以利用各个数据中心的数据和计算资源,另一方面也保护了数据隐私,可以保证原有数据不从某个数据中心进入到另外一个数据中心。
第五层,则是应用联邦,是指应用程序通过TDC联邦云,能够在多个数据中心之间统一管理,也能让在一个数据中心部署的应用能够非常顺滑地迁移到另外一个数据中心当中去,可以有效实现应用的平滑迁移。同时,多个数据中心也可以形成一个统一的应用市场,所有的应用也都可以被统一管理。
由此可见,通过五个层级的“联邦化”,TDC联邦云真正打通了企业数据与应用,不仅可以满足企业各种数据管理规范要求,兼顾业务灾备等需求,同时也能通过一套TDC联邦数据云平台支撑企业数字化转型和数字化战略的长期演进,其价值可以说:不止于眼下,更关乎未来。
人工智能技术创新再进化
值得一提的是,星环科技在人工智能领域的创新也不断结出新“硕果”,这就是最新发布的知识图谱全场景解决方案,该方案包含了知识图谱组件SophonKG,图数据库StellarDB,全文检索数据库,以及时空数据库,真正实现了高性能全场景应用。
孙元浩认为,知识图谱解决方案基本上分为三个阶段:第一阶段是通过量化的方法来构建图;第二阶段是通过泛化的方法来找到一个公共的模型;第三阶段是把模型固化成一系列行业图谱,能够应用在某一个行业当中去,用于做知识探索或信息检索。而面向这三个阶段的需求,星环科技也推出了全场景的知识图谱解决方案,帮助客户解决难题。
一是,针对量化的过程,星环提供了多种数据存储模型来构建知识图谱,分别是图数据库(用来构建三元组)、搜索引擎(用来存放和检索文本)以及时空数据库(用来存储时序数据),这三个部分构成了星环科技知识图谱的底层数据源,一个数据存储的平台。
其中,最新发布的图数据库StellarDB3.0版本,除了性能上支持万亿条点边的计算存储之外,还融合深度图计算,包括了超多图检索分析工具,支持10度以上关系钻取。同时,星环科技还从底层进行了全文检索数据库Search3.0的自主研发和深度重构,新的Search展现出强大的企业级特性。性能更加强大,其综合数据入库性能是开源解决方案2倍以上,单集群可支持200+以上的节点数。此外,星环科技的时空数据库,也在今年疫情数据分析期间大展身手,很多知识图谱技术前沿都在研究融入“时空地”等信息,将知识图谱更加具象化,便于分析人员使用。
二是,针对泛化的过程,星环科技的Sophon KG提供了图分析及图算法工具,帮助用户去构建图,通过上百种的图算法帮助用户在图上进行探索分析及知识发现。特别是最新发布的星环科技知识图谱SophonKG2.5更做了全面的升级。
具体包括,SophonKG2.5打通了实验->特征(标签/指标)->图谱的全链路;并可以对接时空数据库融入了时间,空间,地理信息数据实现了轨迹查询,伴随查询,碰撞查询;并可以结合知识库构建了智能问答和智能搜索引擎,凸显了更加便捷操作感。此外,新版SophonKG新增蓝图模版管理,用户可以直接从模版创建图谱,同时也展现出了更友好用户体验等等。
三是,针对固化的过程,星环科技通过把交易的结构固化下来,把它变成是一种类型的检测或者一种类型的工具,能够让用户快速地发现风险。为此,星环科技也提供了一系列的行业模板库,比如法人人口信息的关联信息及关联图谱、金融行业的特定风险模板等,利用这些模板,用户可以快速地能构建自己的知识图谱应用。
除此之外,为了更好地识别、量化、预测和防范欺诈风险,星环科技还结合自己的产品技术优势和在金融业多年的落地经验积累,推出了一款全栈式的智能反欺诈系统解决方案——“基于人工智能和复杂网络的实时反欺诈风控平台”。此外,在AIoT解决方案中,星环科技Sophon Edge边缘计算平台可接入多种设备,包括多媒体设备(如摄像头,拾音器)、传感设备(如RFID,温度/湿度传感器)和控制设备(如云台,传动器)等等。
对此,孙元浩最后表示“如今星环科技基于ABC能力打造的一系列产品和解决方案,可以帮助企业客户很轻松的构建一个数字化转型的平台,包括数据中台、AI中台和应用中台,从而支撑起客户的数字化转型之旅,并把这些技术用于公司的战略决策、风控与审计、产品和服务创新、数字化生产与交付、分销、营销和销售以及改善客户体验。”
总的来看,通过不断的技术投入、以及不断的技术创新,这是星环科技之所以能“七年磨三剑,积硅步至千里”的根本所在,也让星环科技在为企业客户提供灵活管理和分析处理数据的同时,能够把源源不断数据的转换为智能和洞察,由此在未来的“新基建”建设中,不断帮助客户创造出拥有无限想象空间的新技术、新平台和新动能。
申耀的科技观察,由科技与汽车跨界媒体人申斯基(微信号:shenyao)创办,16年媒体工作经验,拥有中美两地16万公里自驾经验,专注产业互联网、企业数字化、渠道生态以及汽车科技内容的观察和思考。