Flink的Standalone 集群安装和部署

您所在的位置:网站首页 scala安装配置 Flink的Standalone 集群安装和部署

Flink的Standalone 集群安装和部署

2023-05-23 09:38| 来源: 网络整理| 查看: 265

Flink的Standalone 集群安装和部署 原创

wx62be9d88ce294 2022-07-01 17:43:16 博主文章分类:大数据 ©著作权

文章标签 flink scala big data 配置文件 文章分类 Hadoop 大数据

©著作权归作者所有:来自51CTO博客作者wx62be9d88ce294的原创作品,请联系作者获取转载授权,否则将追究法律责任

Standalone 是 Flink 的独立部署模式,它不依赖其他平台。 集群规划如下

node1 master+worker1node2 worker2node3 worker3

1.解压 Flink 的压缩包

[root@node1 apps]# tar -zxvf flink-1.9.1-bin-scala_2.11.tgz -C /opt/

2.修改配置文件

进入到 conf 目录下,编辑 flink-conf.yaml 配置文件:Flink的Standalone 集群安装和部署_big dataFlink的Standalone 集群安装和部署_配置文件_02其中:taskmanager.numberOfTaskSlot 参数默认值为 1,修改成 3。表示数每一个 TaskManager 上有 3 个 Slot。

3.编辑 conf/slaves 配置文件Flink的Standalone 集群安装和部署_scala_03 4.分发给另外两台服务器

[root@node1 opt]# scp -r flink-1.9.1/ node2:`pwd`[root@node1 opt]# scp -r flink-1.9.1/ node3:`pwd`

5.启动 Flink 集群服务

[root@node1 bin]# ./start-cluster.sh Starting cluster.Starting standalonesession daemon on host node1.Starting taskexecutor daemon on host node1.Starting taskexecutor daemon on host node2.Starting taskexecutor daemon on host node3.

6.访问 WebUIFlink的Standalone 集群安装和部署_big data_04 7.通过 WebUI 提交 job 到集群 将项目打包上传Flink的Standalone 集群安装和部署_scala_05

Flink的Standalone 集群安装和部署_scala_06 查看 job 执行结果Flink的Standalone 集群安装和部署_flink_07

收藏 评论 分享 举报

上一篇:Flink On Yarn HA 安装和配置

下一篇:Flink常用API之HDFS文件Source



【本文地址】


今日新闻


推荐新闻


CopyRight 2018-2019 办公设备维修网 版权所有 豫ICP备15022753号-3