基于Docker部署常用Paas组件

一、docker部署paas组件
安装之前需要把本地的docker环境的日志都集中到固定的目录下，避免root目录打满，我这里挂载到了/data/docker目录下

二、paas组件搭建
1、MySQL
step1：创建目录

mkdir -p /data/mysql-data mkdir -p /data/mysql 

step2：编辑mysql配置文件

cd /data/mysql vim my.cnf 

[mysqld] pid-file        = /var/run/mysqld/mysqld.pid socket          = /var/run/mysqld/mysqld.sock datadir         = /var/lib/mysql secure-file-priv= NULL lower_case_table_names = 1 character_set_server = utf8 collation-server = utf8_general_ci max_connections=3000 interactive_timeout=1800 wait_timeout=1800 default_authentication_plugin=mysql_native_password  [client] default-character-set=utf8 # Custom config should go here !includedir /etc/mysql/conf.d/ 

step3：mysql数据持久化，启动容器

docker run -d --name mysql -e MYSQL_ROOT_PASSWORD=Admin@coc1 -p 3306:3306 -v /data/mysql-data:/var/lib/mysql -v /data/mysql/my.cnf:/etc/mysql/my.cnf  mysql:8.0 

2、redis
step1：
编辑redis配置文件：

mkdir -p /data/redis/ cd /data/redis/ vim redis.conf 

# Redis配置文件  # Redis默认不是以守护进程的方式运行，可以通过该配置项修改，使用yes启用守护进程 daemonize no  # 指定Redis监听端口，默认端口为6379 port 6379  # 绑定的主机地址，不要绑定容器的本地127.0.0.1地址，因为这样就无法在容器外部访问 bind 0.0.0.0  #需要则打开 requirepass Admin@coc1  # 持久化 appendonly yes 

step2：创建目录

mkdir -p /data/redis mkdir -p /data/redis/data 

step3：启动redis

docker run -p 6389:6379 --name redis -v /data/redis/redis.conf:/etc/redis/redis.conf -v /data/redis/data:/data -d redis redis-server /etc/redis/redis.conf 

注：redis默认对外映射端口修改为6389

3、zookeeper
先启动zookeeper

docker run -d --name zookeeper --publish 2181:2181 --volume /etc/localtime:/etc/localtime wurstmeister/zookeeper 

4、kafka
注意：需要先启动zookpeer组件
再启动kafka（启动kafak时记得把localhost换成本机ip地址，否则别的机器连接不上此kafka）

docker run -d --name kafka --network app-tier -p 9092:9092 -v /data/kafka/kafka_config/server.properties:/opt/kafka/config/server.properties \    -e ALLOW_PLAINTEXT_LISTENER=yes \    -e KAFKA_LISTENERS=PLAINTEXT://0.0.0.0:9092 \    -e KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://10.142.149.28:9092 \    -e KAFKA_ZOOKEEPER_CONNECT=zookeeper-server:2181 \    kafka:v1204 

5、mongo
step1：
创建目录

mkdir -p /data/mongo/data mkdir -p /data/mongo/config mkdir -p /data/mongo/log 

step2：配置文件mongod.conf

cd /data/mongo/config vim mongod.conf 

# 数据库存储路径 dbpath=/data/mongo/data  # 日志文件路径 logpath=/data/mongo/log/mongod.log  # 监听的端口 port=27017  # 允许所有的 IP 地址连接 bind_ip=0.0.0.0  # 启用日志记录 journal=true  # 启用身份验证 auth=true 

step3：启动mongo容器

docker run --name mongo \   -p 27017:27017 \   -v /data/mongo/config/mongod.conf:/etc/mongod.conf \   -v /data/mongo/data:/var/lib/mongodb \   -v /data/mongo/log:/var/log/mongodb \   -d mongo:latest --auth 

step4：
进入容器，创建管理员用户和密码

docker exec -it mongo mongosh admin 

#创建用户设置密码 db.createUser(     {      user:'admin',     pwd:'xxxxx',     roles:[{ role:'userAdminAnyDatabase', db: 'admin'},     "readWriteAnyDatabase"]     } ) #验证成功失败 db.auth('admin', 'xxxxxxx') 

创建root用户

#创建root用户方法（可选） db.createUser( 	{ 		user:"root", 		pwd:"xxxxxx", 		roles:[{role:"root",db:"admin"}] 	} ); # 退出容器 quit() 

step5：
重启mongo

docker restart mongo 

如果需要修改mongo密码

db.changeUserPassword("admin", "xxxxxxxxxxxxx") #验证成功失败 db.auth('admin', 'xxxxxxxxxxxxxx') 

7、etcd

docker run -itd --name etcd \     -e ETCD_AUTO_COMPACTION_MODE=revision \     -e ETCD_AUTO_COMPACTION_RETENTION=1000 \     -e ETCD_QUOTA_BACKEND_BYTES=4294967296 \     -e ETCD_SNAPSHOT_COUNT=50000 \     -v /data/etcd:/etcd \     -p 2379:2379 \     quay.io/coreos/etcd:v3.5.5 \     etcd \     --advertise-client-urls=http://127.0.0.1:2379 \     --listen-client-urls http://0.0.0.0:2379 \     --data-dir /etcd 

etcd创建用户
进入etcd容器：

docker exec -it etcd /bin/bash 

etcd加密，执行如下：

etcdctl --endpoints=http://127.0.0.1:2379 user add root // 这里会提示输入 etcdctl --endpoints=http://127.0.0.1:2379 user grant-role root root etcdctl --endpoints=http://127.0.0.1:2379 auth enable   

8、minio

mkdir -p /data/minio 

docker run -itd --name myminio -e "MINIO_ACCESS_KEY=tKv5Hqql)WhgyZ+2yc)t" -e "MINIO_SECRET_KEY=FFQCPedDYmkUAw==" -v /data/minio:/minio_data -p 9005:9000 -p 9001:9001 minio/minio:latest minio server /minio_data --console-address ":9001" --address ":9000" 

9、milvus

mkdir -p /data/milvus 

docker run -itd --name milvus-standalone -e "ETCD_ENDPOINTS=10.142.149.28:2379" -e "MINIO_ADDRESS=10.142.149.28:9005" -v /data/milvus:/var/lib/milvus -p 19530:19530 -p 9095:9091 milvusdb/milvus:v2.2.13 milvus run standalone 

注意：部署milvus时，需要先部署etcd和minio，修改对应ADDRESS为host信息
10、clickhouse

mkdir -p /data/clickhouse/log mkdir -p /data/clickhouse/clickhouse-server 

docker run -d --name clickhouse-server -p 9090:9090 -p 8123:8123 clickhouse:v1204