Amazon Redshift 新增 Iceberg 物化视图功能,旨在大幅降低企业分析成本(amazon prime video 应用介绍) ypxx.net

围绕Agent重塑数据链路,亚马逊云科技传来新动态。这次,他们为其托管云数据仓库 Amazon Redshift 新增了对 Iceberg 物化视图的支持,旨在帮助企业进一步降低数据分析成本。有分析师指出,这项新功能不仅能帮助企业减少重复计算与数据管道建设,还能显著提升跨分析平台的互操作性。

问题来了,什么是“物化视图”?所谓“物化视图”,是指预先计算并存储的查询结果。Redshift 等数据仓库可以直接利用这些结果,避免在运行相同分析任务时反复执行计算密集型查询,从而大幅节省计算资源与成本。

亚马逊云科技在博客中指出,由于 Iceberg 物化视图的结果存储在 Iceberg 表中,这意味着在多引擎环境(如同时使用 Spark 和 Athena)中,企业可以直接复用 Redshift 的预计算结果,无需再复制数据或单独构建数据管道。此外,Redshift 还能直接使用其他分析引擎生成的 Iceberg 物化视图,进一步增强了跨数据平台的互操作性。

降低集成复杂度

Pareekh Consulting 首席分析师 Pareekh Jain 认为,这种互操作性将大幅减轻数据工程团队的集成负担。“他们不用再‘浪费时间’去复制数据或搭建 ETL 管道了。”

IT 咨询公司 Kanerika 首席分析官 Amit Chandak 也表示,减少数据管道的重复建设,能有效提升整个企业数据团队的效率与生产力。

“过去,企业团队通常会为仪表板和数据科学任务分别计算相同的业务指标,每份副本都需要独立的管道。有了 Iceberg 物化视图功能,重复的管道不复存在,‘到底哪个版本的指标才是准的’这种困惑也会随之消散。”Chandak 解释道。

这种“指标一致性”对扩展 AI 智能体(Agent)应用也大有裨益。Chandak 表示,企业现在可以将业务指标等常用查询结果存储在开放表中,这降低了智能体因使用不同版本指标而出错的风险,并提高了响应的一致性。随着企业在更多业务场景中部署智能体,这种一致性将赋予他们更大的扩展信心。

削减分析相关的计算成本

不过,Jain 强调,对 CIO(首席信息官)而言,互操作性带来的最大红利其实是降本。

“这在多引擎环境和 AI 智能体场景中尤为明显。如果 Redshift、Spark、Athena 和 AI 应用各自独立执行相同的计算,企业就要为同一份计算买单好几次。而 Iceberg 物化视图允许 Redshift 只算一次,然后让多个系统共享结果。”

Nord-IQ Research 首席分析师 Manoj Chandra Jha 补充道,这种成本节约同样适用于智能体工作负载。可互操作的物化视图能避免不同智能体重复计算相同指标,从而降低它们在推理时因反复查询底层数据而产生的计算开销。

带来架构灵活性

Chandak 认为,新功能还为 CIO 带来了架构上的灵活性。过去,性能优化往往与特定的数据引擎深度绑定,在异构数据环境中很难复用。

相比之下,Iceberg 物化视图允许 CIO 在不同分析引擎之间共享性能优化成果。当业务演进时,企业可以更轻松地添加、切换或组合数据平台,同时也能降低对单一分析引擎的依赖。