app开发者平台在数字化时代的重要性与发展趋势解析
990
2022-09-05
Linux ClickHouse单节点和集群部署
ClickHouse单节点
服务器优化(直接部署可跳过此章节)
ClickHouse 可以在任何具有 x86_64 ,AArch64 或 PowerPC64LE CPU 架构的 Linux ,FreeBSD 或 Mac OS X 上运行。貌似不能在 Windows 系统下安装,不过 ClickHouse 同样支持 Docker 部署,Windows 系统可以在 Docker 下安装 ClickHouse 。
根据官方文档推荐:Debian 或 Ubuntu 系统可以使用官方预编译的 deb 软件包来安装,CentOS 、RedHat 等Linux发行版可以使用官方预编译的 rpm 包 来安装,如果您的操作系统不支持安装 deb 或 rpm 包,也可以使用 tgz 软件包或直接源码编译安装。下面我们以 CentOS 系统为例,以 rpm 方式来安装下 ClickHouse。
more /etc/redhat-release CentOS Linux release 7.6.1810 (Core)
检测当前CPU是否支持SSE 4.2
grep -q sse4_2 /proc/cpuinfo && echo "SSE 4.2 supported" || echo "SSE 4.2 not supported" SSE 4.2
设置系统参数:
在/etc/security/limits.conf这个文件的末尾加入以下内容:
vim /etc/security/limits.conf soft nofile 100001 * hard nofile 100002 * soft memlock unlimited * hard memlock unlimited * soft nproc 131072 * hard nproc 131072
CentOS取消SELINUX
修改/etc/selinux/config中的SELINUX=disabled后重启
vim /etc/selinux/config SELINUX=disabled
重启服务器生效
单节点部署
下面有4个rpm包,去官网-rpm:跳转地址 上传四个包到服务器
依次执行:
注意安装server时需要输入默认用户密码:test123
rpm -ivh clickhouse-common-static-21.8.9.13-2.x86_64.rpmrpm -ivh clickhouse-client-21.8.9.13-2.noarch.rpmrpm -ivh clickhouse-server-21.8.9.13-2.noarch.rpmrpm
生成密码(上面设置的密码不生效情况下):
PASSWORD=$(base64 < /dev/urandom | head -c8); echo "$PASSWORD"; echo -n "$PASSWORD" | sha256sum | tr -d '-'
256进行加密
修改默认密码
vim
修改基础配置:
vim
ps:如果提示readonly,需要授权:chmod +w /etc/clickhouse-server/config.xml
自己指定数据目录和日志目录:
放开远程访问:
启动:
nohup clickhouse-server --config-file=/etc/clickhouse-server/config.xml &
使用客户端链接:
clickhouse-client --password
ClickHouse集群
vim
找到配置zookeeper配置,单节点zookeeper只需配置一个(zookeepr3.7存在问题未搭建成功->使用kafka2.3中zookeeper成功)
其他ClickHouse服务器也均以此配置
ClickHouse config.ml 集群配置详解
cluster_name 为集群名字可以自定义,此处有坑,自定义的集群名不要用符号:- 要用下划线shard 标签下配置各个集群的节点每个节点都要进行与此相同的集群配置
配置完成后进入ClickHouse 客户端查看集群信息(每台节点都要查看)
clickhouse-client --passwordselect * from system.clusters
创建库表进行测试
create database cluster_test on cluster cluster_hx;
然后在其他节点上执行 show databases; 看到此数据库即可成功
版权声明:本文内容由网络用户投稿,版权归原作者所有,本站不拥有其著作权,亦不承担相应法律责任。如果您发现本站中有涉嫌抄袭或描述失实的内容,请联系我们jiasou666@gmail.com 处理,核实后本网站将在24小时内删除侵权内容。
发表评论
暂时没有评论,来抢沙发吧~