专栏名称: DataFunSummit

DataFun社区旗下账号，专注于分享大数据、人工智能领域行业峰会信息和嘉宾演讲内容，定期提供资料合集下载。

Presto常用性能优化技巧与实践

DataFunSummit · 公众号 · · 2024-04-05 18:00

正文

宝典作者：

梁晨、王北南、Hope Wang

数据驱动的时代，想要快速进行数据分析并做出明智的决策依赖于高性能的数据查询平台。

PrestoDB（简称Presto）作为一款流行的开源分布式SQL查询引擎，目前已成为跨数据源分析作业的首选工具。

虽然很多企业和机构目前已经部署使用Presto

但仍然面临着查询性能不稳定所带来的挑战

企业和机构如果想要最大程度地获取数据价值

充分释放Presto的潜能将至关重要

为此，我们推出 《Presto优化宝典》进阶版👇

扫码免费下载

该宝典旨在帮助企业和机构加快查询速度

提升用户体验

更快地获取数据分析结果

提高资源利用率并节约成本

Uber

实践案例

Uber 的Presto 团队在三个生产集群中部署了 Alluxio SDK Cache（组件名： Alluxio Edge ），一共包含 1500 个节点，每个节点都有NVMe 磁盘和1TB 的缓存空间，部署Alluxio后的效果：

√

查询时间波动减少，查询性能稳定；

√

HDFS 存储负载降低10%；

√

输入读取延迟降低约50%；

√

更快地获取即席查询结果。

沃尔玛

实践案例

沃尔玛的数据平台团队通过Alluxio分布式缓存实现混合云数据访问，最终实现：

√

查询延迟稳定并可避免网络传输的不确定性；

√

范围查询性能提升，吞吐量提升；

√

相同环境下的计算成本减半或计算能力加倍，成本降低。

本宝典介绍了一套全面的Presto优化方案，涵盖调优流程、查询规划、缓存、数据格式（Parquet、ORC）、表格格式（列式布局）、数据源（S3等）以及与Presto性能相关的数据平台架构。

【用户收益】

深入了解：

√

Presto如何在后台运行查询；

√

请到「今天看啥」查看全文

推荐文章

跟宇宙结婚 · 节目更新：vol.449 第97届奥斯卡前瞻｜跟宇宙结婚

昨天

跟宇宙结婚 · 日常念叨：上饿了么搜【跟宇宙结婚】领红包哟

昨天

跟宇宙结婚 · “跟宇宙结婚”音频节目总目录

2 天前

跟宇宙结婚 · 日常絮叨：上饿了么搜【跟宇宙结婚】领红包哟

2 天前

煮酒论史 · 中国这些“四大”，你都知道吗？涨知识

8 年前

冯仑风马牛 · 商界希拉里，硅谷最强女高管，她比安迪强太多丨肖像

7 年前

爱范儿 · 专为粉丝而生，三星 Note7 正式回来了

7 年前

新身体 · 50万美金打造的时尚单品，是型男出街必备！

7 年前

生态梦网 · 热热热热天热热热热热热津热热热热热........明天会更热！

7 年前