K8s服务编排（k8s做服务发现）

前置说明：

k8s_host=192.168.214.50 //定义k8s_host变量，此ip为k8s管理机
yaml_host=192.168.214.100:9999 //相关服务的配置存放机

step1.登录100 jenkins 的机器

【有初始化的相关脚本的机器，且与k8s机器互相免密访问】

step2.初始化项目的信息
进入到/opt/scripts -->#sh init-yaml.sh test backends

[root@localhost scripts]# more init-yaml.sh

#!/bin/bash
ns=$1 //命名空间
app=$2 //对应的服务名称
yaml=/opt/scripts/yaml //定义一个目录变更
mkdir -p $yaml/$ns/$app/properties //创建目录
touch $yaml/$ns/$app/deploy.yaml //创建文件
cat $yaml/_/deploy_template.yaml | sed "s/_NAMESPACE_/$ns/g" | sed "s/_APPNAME_/$app/g" > $yaml/$ns/$app/deploy_template.yaml //先替换再生成一个新的deployment 的yaml文件
cat $yaml/_/svc.yaml | sed "s/_NAMESPACE_/$ns/g" | sed "s/_APPNAME_/$app/g" > $yaml/$ns/$app/svc.yaml //先替换再生成一个新的service 的yaml 文件
tree $yaml/$ns/$app //以树结构输出出来

step3.初始化service 信息
进入到/opt/scripts -->#sh init-service.sh test backends

[root@localhost scripts]# more init-service.sh

#!/bin/bash
ns=$1 //命名空间
app=$2 //对应的服务名称
kubectl='kubectl --kubeconfig=/etc/kubernetes/kubelet.kubeconfig' //定义了一个kubectl命令变更
ssh root@192.168.214.50 "$kubectl apply -f http://192.168.214.100:9999/$ns/$app/svc.yaml" //跳转到50这台k8s的管理机上，为服务生成service服务代理

'''
k8s分配给Service一个固定IP，这是一个虚拟IP(也称为ClusterIP)，并不是一个真实存在的IP，而是由k8s虚拟出来的。虚拟IP的范围通过k8s API Server的启动参数 --service-cluster-ip-range=19.254.0.0/16配置;

虚拟IP属于k8s内部的虚拟网络，外部是寻址不到的。在k8s系统中，实际上是由k8s Proxy组件负责实现虚拟IP路由和转发的，所以k8s Node中都必须运行了k8s Proxy，从而在容器覆盖网络之上又实现了k8s层级的虚拟转发网络。
'''

step4.调整配置信息：
[root@localhost backend]# pwd
/opt/scripts/yaml/test/backends

[root@localhost backends]# tree
.
├── deploy_template.yaml
├── deploy.yaml
├── properties
│ ├── logback.xml
│ └── sysconfigs
│ └── zk.properties
└── svc.yaml

2 directories, 5 files
#cd /opt/script/yaml/test/backends
配置文件pro and svc.yaml→ 从原机器/opt/data/msgback-release/ROOT/WEB-INF/classes 拷贝此目录下的内容到/opt/scripts/yaml/test/backends 此目录下来，修改zk 配置地址信息
修改在svc.yaml 此文件中修改配置的端口信息

step5.Jenkins调用k8s做服务部署到K8s集群中去

jenkins_job: 编译代码并生成镜像，且上传到镜像仓库
namespace='test' //定义一个变量
mvn clean install -DskipTests -U //进行代码的编译，跳过测试，-U强制更新
cd ./test-deployer-cluster/target //编译完成后，此目录下会生成一个test【项目】的目录
rm -rf ./test/conf/sysconfigs //将生成项目目录的配置信息全部清除掉，因为我们需要替换
cp -af /opt/scripts/yaml/test/test-model/properties/sysconfigs/* ./test/conf/sysconfigs

//此处就是拿我们自己的配置放入到sysconfigs【项目配置文件存放处】目录下

echo 'cd /opt/test/bin/dos2unix -k startup.sh 
//转换文件的格式为unix,避免启动时报文件错误sh startup.sh& 
//启动服务tail -f /var/log/yum.log 
//打印日志，表明服务是存活的
'> ./start.sh 
//生成一个启动脚本，存放的目录是为 --> cd ./test-deployer-cluster/target

echo 'FROM ult.harbor.com/base/java:v4-skyagentENV 
TZ=Asia/Shanghai //定义时区
ENV LANG en_US.UTF-8 //定义字符集
ENV LANGUAGE en_US:en //定义语言
ADD ./test /opt/test //追加test目录到镜像中
ADD ./start.sh /opt/test/ //追加启动脚本到镜像中
CMD ["sh","/opt/test/start.sh"] //镜像启动时执行的命令
' > Dockerfile 

//生成一个Dockerfile文件 ，下面脚本会使用这个文件生成镜像
docker build -t ult.harbor.com/$namespace/test-model:${branch}-${BUILD_NUMBER} .
//${branch}-${BUILD_NUMBER}为jenkins自动生成的一个变量

docker push ult.harbor.com/$namespace/test-model:${branch}-${BUILD_NUMBER} 
//将上面命令生成的镜像上传到镜像仓库中，供部署时使用

jenkins_job:调用k8s 将镜像运行进来，生成容器

/opt/scripts/install-app.sh test test-model ${version} //${version} 为jenkins 部署时传入的一个变量

#more /opt/scripts/install-app.sh 如下所示：

[root@localhost ~]# more /opt/scripts/install-app.sh
ns=$1 //脚本接收的第一个参数
app=$2 //脚本接收的第二个参数
version=$3 //脚本接收的第三个参数
k8s_host=192.168.214.50 //定义k8s_host变量，此ip为k8s管理机
yaml_host=192.168.214.100:9999 //配置存放处
yaml_path=/opt/scripts/yaml/$ns/$app //定义一个路径变量
echo install : ns=$ns , app=$app , version=$version //输出信息
cat $yaml_path/deploy_template.yaml | sed "s/VERSION/$version/g" > $yaml_path/deploy.yaml 
//替换部署脚本里面的版本号【k8s里面的deploy】
echo -------------replace deploy-------------//输出信息
cat $yaml_path/deploy.yaml //查看信息
echo -------------svc info-------------//输出信息
cat $yaml_path/svc.yaml //查看信息
echo -------------call k8s-------------//输出信息
kubectl='kubectl --kubeconfig=/etc/kubernetes/kubelet.kubeconfig' //定义kubectl命令变量
ssh root@$k8s_host "$kubectl delete -f http://$yaml_host/$ns/$app/deploy.yaml" 
//删除已存在的容器
ssh root@$k8s_host "$kubectl create -f http://$yaml_host/$ns/$app/deploy.yaml"
//创建一个新的容器