首页 > IT业界 > 正文

实时数据处理能力再升级 亚马逊云科技推出Amazon Redshift流式注入功能

2022-06-20 16:31:39  来源:

摘要:北京2022年6月20日 美通社 -- 近日,亚马逊云科技推出Amazon Redshift流式注入(Streaming Ingestion)功能预览,让客户能够直接从Amazon Kinesis Data Streams(一项无服务器流式数据服务,可简化任何规模的数据流捕获、处理和存储)向Amazon Redshift数据仓库中注入实时数据并分析。Amazon Redshift流式注入功能可以让客户无需在Amazon Simple Storage Service(Amazon S3)中暂存数据,直接将每秒数百兆的流数据接收到Amazon Redshift数据仓库集群并处理
关键词: 数据
北京2022年6月20日 /美通社/ -- 近日,亚马逊云科技推出Amazon Redshift流式注入(Streaming Ingestion)功能预览,让客户能够直接从Amazon Kinesis Data Streams(一项无服务器流式数据服务,可简化任何规模的数据流捕获、处理和存储)向Amazon Redshift数据仓库中注入实时数据并分析。Amazon Redshift流式注入功能可以让客户无需在Amazon Simple Storage Service(Amazon S3)中暂存数据,直接将每秒数百兆的流数据接收到Amazon Redshift数据仓库集群并处理。Amazon Redshift流式注入(Streaming Ingestion)功能的推出,进一步提升了亚马逊云科技实时数据处理能力,为亚马逊云科技"云、数、智三位一体"的大数据与机器学习融合服务组合的数据处理能力再添利器,将进一步推动机器学习由实验转向规模化落地。

在游戏实时数据分析、在线广告点击流分析、零售POS机数据流分析、应用日志和网络日志分析、物联网设备数据分析等应用场景中,应用或者终端设备会在短时间内持续生成巨量数据流。这些数据流会被送到Amazon Kinesis Data Streams进行实时缓存并最终使用Amazon Redshift完成数据分析。以往,客户如果想从Amazon Kinesis Data Streams向Amazon Redshift注入实时数据,需要先在Amazon S3中暂存数据,然后使用Copy命令加载数据来构建数据管道,这一过程通常需要几分钟才能完成。但越来越多客户希望能够分析实时数据流以尽早获得数据洞察。

\

Amazon Redshift流式注入功能的推出,满足了客户真实数据流对数据处理规模和实时性的要求。基于这一功能,客户可以同时连接来自多个Amazon Kinesis Data Streams的数据,将实时数据直接注入Amazon Redshift。客户使用现有工具和熟悉的SQL执行下游处理和转换,无需额外的成本,在几秒钟内从数据中获得洞察。Amazon Redshift流式注入大幅简化流式数据管道构建,加速数据处理,支持以低延迟、高吞吐量访问数据仓库中的实时数据,帮助数据工程师、数据分析师和大数据开发者将数据分析从"批量"转向"实时"。 

目前,数以万计的客户每天使用Amazon Redshift处理EB级的数据,为高性能商业智能(BI)报告、仪表板应用程序、数据探索和实时分析等分析工作负载提供支持。Amazon Redshift流式注入功能的推出将进一步丰富客户的使用场景。客户可将流式数据实时分析与数据仓库中的其它数据源相结合,丰富和扩展实时分析应用场景。例如,游戏运营人员可以分析来自游戏玩家的实时数据,优化游戏体验,提高转化和留存率;营销部门可以分析在线广告的点击流数据,评估用户足迹和行为,及时向客户投放广告;分析人员可以实时分析零售POS数据,实现零售交易的实时报告、分析和可视化;开发人员和工程师可以实时分析应用程序日志和网络日志流数据,实时排除故障,采取预防措施,改善产品体验。客户可以将Amazon Redshift流式注入功能与Amazon Kinesis服务一起使用,实时分析IoT数据,获取设备状态和属性(位置和传感器数据),监控应用程序,进行欺诈检测,实现实时排行榜功能等等。

为了帮助企业推进大数据和机器学习的融合,将机器学习由实验转为规模化落地实践,亚马逊云科技推出了"云、数、智三位一体"的大数据与机器学习融合服务组合。Amazon Redshift流式注入功能的推出,进一步丰富了亚马逊云科技无服务器分析产品服务不同客户业务场景的能力,可以让客户无需配置、扩展或管理底层基础设施,即可轻松地处理实时动态的数据同步,为机器学习项目提供兼具性能和成本效益的实时特征数据准备。

关于亚马逊云科技

超过15年以来,亚马逊云科技 (Amazon Web Services)一直以技术创新、服务丰富、应用广泛而享誉业界。亚马逊云科技一直不断扩展其服务组合以支持几乎云上任意工作负载,目前提供超过200项全功能的服务,涵盖计算、存储、数据库、网络、数据分析、机器学习与人工智能、物联网、移动、安全、混合云、虚拟现实与增强现实、媒体,以及应用开发、部署与管理等方面;基础设施遍及26个地理区域的84个可用区,并已公布计划在澳大利亚、加拿大、印度、以色列、新西兰、西班牙、瑞士和阿联酋新建8个区域、24个可用区。全球数百万客户,包括发展迅速的初创公司、大型企业和领先的政府机构,都信赖亚马逊云科技,通过亚马逊云科技的服务支撑其基础设施,提高敏捷性,降低成本。要了解更多关于亚马逊云科技的信息,请访问: www.amazonaws.cn

 
消息来源:亚马逊云科技

第三十六届CIO班招生
国际CIO认证培训
首席数据官(CDO)认证培训
责编:baxuedong

免责声明:本网站(http://www.ciotimes.com/)内容主要来自原创、合作媒体供稿和第三方投稿,凡在本网站出现的信息,均仅供参考。本网站将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。本网站对有关资料所引致的错误、不确或遗漏,概不负任何法律责任。
本网站刊载的所有内容(包括但不仅限文字、图片、LOGO、音频、视频、软件、程序等)版权归原作者所有。任何单位或个人认为本网站中的内容可能涉嫌侵犯其知识产权或存在不实内容时,请及时通知本站,予以删除。