Google本周于线上举办资料云计算高峰会(Data Cloud Summit),一口气推出3项全新的资料运用服务:Dataplex、Datastream和Analytics Hub,协助企业强化多项资料运用的能力,从分析资料、交换资料到截取和复制资料。
Google云计算数据库、资料分析及Looker商业智能平台总经理暨副总裁Gerrit Kazmaier在视频记者会上表示:“必须把资料视为一种能力,可以将所有相关面向集成为一。”因此,Google此次发布的三项新解决方案利基于自家集成式资料平台,涵盖了Google旗下多项数据库和资料分析产品,要协助企业运用新服务打破资料孤岛,在不断变化的环境中,利用即时资料分析结果,动态地制定和调整决策。
针对企业欲分析散落四处的资料的需求,Google推出了集成式资料管理服务Dataplex,打造了一个智能资料网络架构,能将自家GCP平台的数据仓库服务BigQuery、资料分析服务Dataflow等,与开源工具结合在一起。
图片来源:Google
Google Cloud资料分析产品管理总监Irina Farqood表示,企业资料现分散于各处,包含数据仓库、资料湖、资料市场和数据库中,还横跨本地和不同的云计算环境,而每一个存储环境都有自身一套处理资料的方式,来确保资料的品质、安全和治理。
因此,企业为了进行资料分析,时常需移动、复制资料,并需创建一套关注流程,掌握资料的使用状况,以及资料的用户。Irina Farqood表示,然而,许多时候待关注流程激活时,流程已经不符合使用场景,导致用户对资料的信任度降低。
通过Dataplex,企业可简化资料管理作业,不用移动、复制资料,就能大规模的快速整理、保护、集成及分析其数据,缩减原本集成资料所需的时间,且资料科学家和分析师可利用自选工具,来确保资料的一致性。
目前Google发布的是Dataplex的Beta版,而美国消费者信用报告机构Equifax为第一批采用该服务的企业,已将Dataplex纳入核心分析平台,并创建所有内部分析资料都适用的单一举令管控及管理平台。
另外,为了让企业在进行资料分析的工作上,可以获得即时性数据的分析结果,Google还新推出异动资料截取(CDC)和复制服务Datastream,企业可以将非Google环境数据库中的资料流媒体,即时截取至GCP平台服务,像是BigQuery、可于PostgreSQL上执行的Cloud SQL、Google Cloud Storage和Cloud Spanner。
图片来源:Google
而Datastream是一项无服务器服务,会根据企业的使用状况自动进行水平扩展,因此,企业不需自行管理基础设施的容量。除供企业强化即时性数据分析外,企业也可通过该服务,快速复制数据库、创建资料工作流,以及创建事件驱动架构。
新服务首先支持的数据库来源有,甲骨文和MySQL数据库。Google Cloud数据库工程总经理暨副总裁Andi Gutmans表示,未来几个月内,Google还将持续增加服务支持的数据库来源,以及资料复制到的目的地。Datastream目前也是处于Beta版阶段,已采用此服务的企业有美国连锁超市Schnuck Markets。
随着企业间资料交换的需求日增,Google此次还推出了全新的资料交换服务Analytics Hub,供企业在组织内部或是与组织外部,交换资料和分析洞察,且服务支持的交换资源不仅是资料,也可共享动态仪表板和机器学习模型。
图片来源:Google
Google Cloud资料分析工程总经理暨副总裁Debanjan Saha表示,资料交换不是新功能,BigQuery早已支持跨组织间的资料交换需求,所以,Analytics Hub聚焦的是资料交换功能的可扩展性。新服务能协助企业集成多项数据资产,包含Google平台上的网页分析、搜索趋势等数据,还有新闻消息、公部门资料等公开数据。
Debanjan Saha也分享近一周企业使用BigQuery资料共享功能的状况。根据BigQuery后台显示的数据,过去一周,累计有3千家企业使用资料共享功能,并交换了高达200PB的资料,显见企业对资料交换的需求非常庞大。新推出的Analytics Hub目前则处于Beta版阶段。
在资料云计算高峰会举办期间,Google云计算也发布了多项既有数据库和数据分析产品的更新消息,包含了继去年推出支持AWS的BigQuery Omni后,再发布支持微软Azure的BigQuery Omni的Beta版,而商业智能平台Looker则可正式支持Azure,还有,流媒体分析解服务Dataflow预计在第三季推出Prime版本,将添加自动扩展和正确配置资料工作流等能力。此外,Google云计算降低了全托管关联数据库Cloud Spanner的入门价格,调幅达9成。