多读书多实践,勤思考善领悟

Flink开发环境搭建、集群环境搭建和应用部署

Flink开发环境搭建、集群环境搭建和应用部署

本文主要内容包括: Flink 开发环境的部署和配置 运行 Flink 应用(包括:单机 Standalone 模式、多机 Standalone 模式和 Yarn 集群模式) 一、Flink 开发环境部署和配置Flink 是一个以...

Flink高可用集群部署

Flink高可用集群部署

JobManager高可用性(HA)JobManager协调每个Flink部署。它负责调度和资源管理。 默认情况下,每个Flink群集都有一个JobManager实例。这会产生单点故障(SPOF):如果JobManager崩溃,则无法...

基于Zookeeper搭建Kafka高可用集群

基于Zookeeper搭建Kafka高可用集群

一、Zookeeper集群搭建为保证集群高可用,Zookeeper集群的节点数最好是奇数,最少有三个节点,所以这里搭建一个三个节点的集群。 1.1 下载 & 解压下载对应版本Zookeeper,这里我下载的版本3.4.14。官...

基于ZooKeeper搭建Spark高可用集群

基于ZooKeeper搭建Spark高可用集群

一、集群规划这里搭建一个3节点的Spark集群,其中三台主机上均部署Worker服务。同时为了保证高可用,除了在hadoop001上部署主Master服务外,还在hadoop002和hadoop003上分别部署备用的Master服务,...

基于ZooKeeper搭建Hadoop高可用集群

基于ZooKeeper搭建Hadoop高可用集群

一、高可用简介Hadoop 高可用 (High Availability) 分为 HDFS 高可用和 YARN 高可用,两者的实现基本类似,但 HDFS NameNode 对数据存储及其一致性的要求比 YARN ResourceMan...

使用kubeadm搭建高可用的kubernetes集群

使用kubeadm搭建高可用的kubernetes集群

kubernetes集群搭建系列之 kubeadm方式部署(非高可用):使用kubeadm搭建kubernetes集群、 kubernetes集群搭建系列之 二进制方式部署:二进制搭建高可用的kubernetes集群。 一. 简...

二进制搭建高可用的kubernetes集群(四)

二进制搭建高可用的kubernetes集群(四)

接上文:手动搭建高可用的kubernetes集群(三) 10. 部署Dashboard 插件官方文件目录:kubernetes/cluster/addons/dashboard 使用的文件如下:12$ ls *.yamldashb...

二进制搭建高可用的kubernetes集群(三)

二进制搭建高可用的kubernetes集群(三)

接上文:手动搭建高可用的kubernetes集群(二) 7. kube-apiserver 高可用按照上面的方式在master01与master02机器上安装kube-apiserver、kube-controller-manag...

二进制搭建高可用的kubernetes集群(二)

二进制搭建高可用的kubernetes集群(二)

接上文:手动搭建高可用的kubernetes集群(一) 4. 配置kubectl 命令行工具kubectl默认从~/.kube/config配置文件中获取访问kube-apiserver 地址、证书、用户名等信息,需要正确配置该文...

二进制搭建高可用的kubernetes集群(一)

二进制搭建高可用的kubernetes集群(一)

kubernetes集群搭建系列之 kubeadm方式部署: 使用kubeadm搭建kubernetes集群(非高可用)、 使用kubeadm搭建高可用的kubernetes集群。 本系列系文档适用于 CentOS 7、Ubu...