首页 > IT业界 > 正文

重磅!阿里云实时计算获数据中心联盟首批大数据流计算产品能力评测证书

2019-06-17 09:28:06  来源:互联网

摘要:2019年6月4日至5日,由中国信息通信研究院、中国通信标准化协会主办
关键词: 大数据
2019年6月4日至5日,由中国信息通信研究院、中国通信标准化协会主办,大数据技术标准推进委员会承办的2019大数据产业峰会在北京国际会议中心隆重举办,阿里云实时计算凭借各项优异测评数据通过数据中心联盟大数据流计算分布式流处理平台基础能力测评,并在现场接受评测颁奖。

“大数据产品能力评测”是由数据中心联盟(DCA)发起的国内首个大数据领域的产品能力评测体系,被誉为大数据产品发展的风向标。本次大数据产品能力评测首次将流计算产品纳入评测体系,阿里云实时计算作为国内首批通过大数据产品能力评测的流计算产品,率先成为被数据中心联盟圈定的国内大数据基础平台第一梯队。

 

\

阿里云实时计算(Alibaba Cloud Realtime Compute)是一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛应用于流式数据分析、流式数据ETL、流式复杂事件处理等场景。在本次测试中,阿里云实时计算的显著优势体现在以下方面:

低延迟:阿里云实时计算的基本数据模型是数据流及事件(Event) 的序列,可使用同一套引擎和API接口实现批流统一,因此阿里云实时计算处理数据时,一个事件在某个节点处理完后的输出结果可立即发送到下一个节点进行处理,执行引擎并不会引入额外的延迟,可保障数据处理速度,测试结果可以达到100ms以内的低数据处理延时。

异步Checkpoint机制:实时计算采用异步的 Checkpoint 机制来达到任务状态的可恢复性,从而保证数据处理的一致性,所以在处理的主流程上可以做到数据源和输出之间数据完全不用落盘,达到更高的性能和更低的延迟。

Exactly - once语义:实时计算数据量超出流计算系统处理能力的情况下,采用使数据限流反压的措施保证流计算系统正常运行(不会崩溃或丢失数据),具备容错机制,能够恢复状态数据,保证恰好处理一次,且不影响作业性能。

资源动态调整:实时计算产品目前备动态调整资源的能力,资源不足时,可以调大任务的并行度,分配更多的资源;资源充足时,可以缩小任务的并行度,节省资源占用。

部署兼容:实时计算产品支撑Flink on Kubernetes、Flink on Yarn、Standalone以及本机的部署方式,测试验证了阿里云实时计算具备友好的部署能力和可视化开通能力。

支持乱序数据正确处理:实时计算支持基于事件时间和系统时间来切分窗口,并且引入了水印机制来处理迟到的数据,水印的偏移大小可以调节。

目前,阿里云实时计算已广泛应用于在线教育、新零售、物联网、城市大脑等行业以及实时推荐、工业IoT、实时预测场景、欺诈检测、实时报表、实时大屏等多业务场景,赢得了各行业用户的高度认可。未来,实时计算将持续优化,以领先技术与强大支持推动企业向实时化、智能化大数据计算升级转型。


第二十九届CIO班招生
法国布雷斯特商学院MBA班招生
法国布雷斯特商学院硕士班招生
法国布雷斯特商学院DBA班招生
责编:zhanglinying