57、Presto-gateway 讲解与实战操作.docx
5墨值下载
Presto-gateway
讲解与实战操作
一、概述
Presto
是一个
Facebook
开源的分布式
SQL
查询引擎，适用于交互式分析查询，数据
量支持
GB
到
PB
字节。客户在使用
Presto
的时候发现单个集群不能满足业务需求，
而建立多个
Presto
集群之后，如何在集群间调度任务就成为一个问题。在
Presto
中，
一个
Query
执行周期内需要客户端和服务端进行多次的
HTTP
请求，在多集群模式下，
如何保证同一个
Query
的请求都分发到同一个集群呢？
Lyft
为解决这个问题而开发了
presto-gateway
这个工具，并将它开源出来。
（
https://github.com/lyft/presto-gateway
）
Presto-gateway
是在多个
Presto
集群前的一个有状态
Load-balancer
，
Proxy
和
Router
，它提供了透明的访问方法。如下图：（内容来自于
https://eng.lyft.com/presto-infrastructure-at-lyft-b10adb9db01
）
pinterest
架构：
参考资料：
Lyft
资 料 ：
https://eng.lyft.com/presto-infrastructure-at-lyft-
b10adb9db01
pinterest
资 料 ：
https://medium.com/pinterest-
engineering/presto-at-pinterest-a8bda7515e52
【温馨提示】如需获取文章中使用到的镜像和部署包，可关注我的公众号【大数据与云
原生技术分享】回复【
pgw
】即可获取。如上面两个链接打不开，则需要借助”梯子“安
全上网，”梯子“在公众号上也有推荐哦，回复【
ai
】即可获取推荐。
二、部署
mysql
Presto-gateway
使用
MySQL
来记录后端
Presto
集群和查询历史，所以我们需要先
准备一台
MySQL
服务器，自建或者托管的
RDS
均可。这里使用
mysql on k8s
快速
部署，不清楚的可以参考我这篇文章：【云原生】
MySQL on k8s
环境部署
# 1、下载安装包，注意修改镜像地址
git clone https://gitee.com/hadoop-bigdata/mysql-on-k8s.git
of 25
5墨值下载
【版权声明】本文为墨天轮用户原创内容，转载时必须标注文档的来源（墨天轮），文档链接，文档作者等基本信息，否则作者和墨天轮有权追究责任。如果您发现墨天轮中有涉嫌抄袭或者侵权的内容，欢迎发送邮件至：contact@modb.pro进行举报，并提供相关证据，一经查实，墨天轮将立刻删除相关内容。
下载排行榜
评论