Devops7实验环境搭建(terraform-kind-k8s-argocd)

目录

实验环境

操作系统： CentOS8 Linux （我本次用centos7.6）
内存资源：32GB+ （自己nuc机器32G内存）

实验软件版本：

工具名称	Version	描述信息
Terraform	1.1.7	使用kind provider操作kind
Kind	0.14.0	创建Kubernetes集群工具
Docker-CE	1.19+以上 (Docker version 23.0.3, build 3e7cbfd)	容器运行时
kubectl	version.Info{Major:“1”, Minor:“24”, GitVersion:"v1.24.0
Kubernetes	1.24.0	容器云环境
ArgoCD	2.6.7	云原生应用持续部署工具
NFS		存储系统，持久化存储容器数据

实验软件

链接：https://pan.baidu.com/s/1RgZJ9_Mu2pPLZ71gm_ew_A?pwd=0820
提取码：0820
2023.7.16-搭建devops7测试环境-code

• 本次涉及docker镜像打包

0、创建自己的基础设施代码库

gitlab代码库

• 老师代码库：

https://jihulab.com/devopsvip/myiac
https://jihulab.com/devops_course/argocd-example-apps.git

• 自己的极狐仓库地址（这个是后续要用到的代码已经上传到自己的极狐仓库了）

Iac仓库：https://jihulab.com/learndevops/myiac.git
ArgoCD应用demo仓库：https://jihulab.com/learndevops/argocd-example-apps.git

1、安装docker

• 完整代码：

#以下命令可一键粘贴执行！

systemctl stop firewalld
systemctl disable  firewalld
systemctl stop NetworkManager
systemctl disable  NetworkManager

setenforce 0
sed -i s/SELINUX=enforcing/SELINUX=disabled/ /etc/selinux/config

cd /etc/yum.repos.d/
mkdir backup-`date +%F`
mv * !$

wget -O /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-7.repo
yum clean all
yum makecache

yum install -y net-tools
yum install -y vim
yum install -y wget
yum install -y lrzsz

yum remove docker \
                  docker-client \
                  docker-client-latest \
                  docker-common \
                  docker-latest \
                  docker-latest-logrotate \
                  docker-logrotate \
                  docker-engine
                  
yum install -y yum-utils device-mapper-persistent-data lvm2
yum-config-manager --add-repo http://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo
yum makecache

yum install -y yum install docker-ce-23.0.3 docker-ce-cli-23.0.3 containerd.io #指定需要安装的版本号
systemctl start docker && systemctl enable docker

docker version
docker info

mkdir -p /etc/docker
tee /etc/docker/daemon.json <<-'EOF'
{
  "registry-mirrors":["https://kvuwuws2.mirror.aliyuncs.com","http://hub-mirror.c.163.com","https://dockerhub.azk8s.cn"]
}
EOF

cat /proc/sys/net/ipv4/ip_forward
echo "net.ipv4.ip_forward = 1" >> /etc/sysctl.conf 
sysctl -p
cat /proc/sys/net/ipv4/ip_forward

systemctl daemon-reload
systemctl restart docker

验证效果：

[root@devops7 ~]#docker version
Client: Docker Engine - Community
 Version:           23.0.3
 API version:       1.42
 Go version:        go1.19.7
 Git commit:        3e7cbfd
 Built:             Tue Apr  4 22:04:18 2023
 OS/Arch:           linux/amd64
 Context:           default

Server: Docker Engine - Community
 Engine:
  Version:          23.0.3
  API version:      1.42 (minimum version 1.12)
  Go version:       go1.19.7
  Git commit:       59118bf
  Built:            Tue Apr  4 22:02:01 2023
  OS/Arch:          linux/amd64
  Experimental:     false
 containerd:
  Version:          1.6.21
  GitCommit:        3dce8eb055cbb6872793272b4f20ed16117344f8
 runc:
  Version:          1.1.7
  GitCommit:        v1.1.7-0-g860f061
 docker-init:
  Version:          0.19.0
  GitCommit:        de40ad0
[root@devops7 ~]#

• 参考链接

https://www.yuque.com/xyy-onlyone/exkgza/nafa6w?singleDoc# 《31 实战-centos上安装docker(超详细)-2021912》

2、安装Kind

安装Kubectl

##1、下载
[root@devops7 ~]#curl -LO "https://dl.k8s.io/release/$(curl -L -s https://dl.k8s.io/release/stable.txt)/bin/linux/amd64/kubectl"
  % Total    % Received % Xferd  Average Speed   Time    Time     Time  Current
                                 Dload  Upload   Total   Spent    Left  Speed
100   138  100   138    0     0    119      0  0:00:01  0:00:01 --:--:--   120
100 46.9M  100 46.9M    0     0  9869k      0  0:00:04  0:00:04 --:--:-- 13.4M
[root@devops7 ~]#ll -h
total 47M
-rw-r--r-- 1 root root 47M Jul 16 07:48 kubectl

##2、安装
[root@devops7 ~]#sudo install -o root -g root -m 0755 kubectl /usr/local/bin/kubectl

##3、查看
[root@devops7 ~]#kubectl version  --client
WARNING: This version information is deprecated and will be replaced with the output from kubectl version --short.  Use --output=yaml|json to get the full version.
Client Version: version.Info{Major:"1", Minor:"27", GitVersion:"v1.27.3", GitCommit:"25b4e43193bcda6c7328a6d147b1fb73a33f1598", GitTreeState:"clean", BuildDate:"2023-06-14T09:53:42Z", GoVersion:"go1.20.5", Compiler:"gc", Platform:"linux/amd64"}
Kustomize Version: v5.0.1
[root@devops7 ~]#

##4、kubectl的自动补全
#安装软件包
yum install -y epel-release bash-completion

#执行命令
source /usr/share/bash-completion/bash_completion

source <(kubectl completion bash)
echo "source <(kubectl completion bash)" >> ~/.bashrc
source ~/.bashrc

安装Kind

[root@devops7 ~]# wget https://github.com/kubernetes-sigs/kind/releases/download/v0.14.0/kind-linux-amd64
#这里直接wget可能下载失败，需要使用科学上网哦。我这里提供了安装包。

[root@devops7 ~]#chmod +x kind-linux-amd64
[root@devops7 ~]#sudo mv kind-linux-amd64 /usr/local/bin/kind

# 验证版本
[root@devops7 ~]#kind version
kind v0.14.0 go1.18.2 linux/amd64

• 参考链接

https://www.yuque.com/xyy-onlyone/exkgza/eocq7i3537zrr7xe?singleDoc# 《192 实战：Kind部署k8s集群-2022.12.6(成功测试)》

安装Terraform

（1）上传下载好的二进制包到服务器
[root@devops7 ~]#ll -h terraform_1.1.9_linux_amd64.zip 
-rw-r--r-- 1 root root 18M Apr 12 19:59 terraform_1.1.9_linux_amd64.zip
[root@devops7 ~]#unzip terraform_1.1.9_linux_amd64.zip 
Archive:  terraform_1.1.9_linux_amd64.zip
  inflating: terraform
[root@devops7 ~]#ll -h terraform
-rwxr-xr-x 1 root root 62M Apr 20  2022 terraform

（2）移动二进制文件到PATH路径
[root@devops7 ~]#mv terraform /usr/local/bin/

（3）验证
[root@devops7 ~]#terraform version
Terraform v1.1.9
on linux_amd64  

3、部署Kuberenetes集群

提前拉取好镜像

#备注：
kindest/node:v1.24.0
这2个镜像得拉取下来才行：得从阿里云拉取下来，再重新打上tag

k8s.gcr.io/ingress-nginx/controller:v1.2.0
k8s.gcr.io/ingress-nginx/kube-webhook-certgen:v1.1.1

docker pull kindest/node:v1.24.0

通过ucloud拉取，并重新打上tag：

已拉取好镜像：

[root@devops7 ~]#docker images
REPOSITORY                                      TAG       IMAGE ID       CREATED         SIZE
kindest/node                                    v1.24.0   a7d31d743aca   13 months ago   911MB
kindest/node                                    <none>    f5aa68ba122a   14 months ago   911MB
k8s.gcr.io/ingress-nginx/controller             v1.2.0    04fcc7019408   15 months ago   288MB
k8s.gcr.io/ingress-nginx/kube-webhook-certgen   v1.1.1    c41e9fcadf5a   21 months ago   47.7MB

• 如何拉取国外镜像，请看如下链接

https://www.yuque.com/xyy-onlyone/exkgza/on4ku7?singleDoc# 《110 实战：借助ucloud镜像加速功能下载镜像(亲测成功)-2022.1.1》

Terraform安装k8s集群

• 安装过程如下

插件安装失败：

再安装一次就好了……

terradorm插件缓存目录：

• 部署k8s集群

Terraform初始化和发布

# install
cd k8s 
terraform init 
terraform apply --auto-approve

# uninstall
terraform destroy --auto-approve

等待Terraform发布成功后，检查集群状态。

[root@devops7 k8s]#kubectl get node
NAME                          STATUS   ROLES           AGE   VERSION
devopscluster-control-plane   Ready    control-plane   16m   v1.24.0
devopscluster-worker          Ready    <none>          16m   v1.24.0
devopscluster-worker2         Ready    <none>          16m   v1.24.0

ingress-nginx

[root@devops7 k8s]#kubectl get pod -n ingress-nginx
NAME                                        READY   STATUS      RESTARTS   AGE
ingress-nginx-admission-create-h65sd        0/1     Completed   0          15m
ingress-nginx-admission-patch-rnc4f         0/1     Completed   0          15m
ingress-nginx-controller-59c96b9cb7-cv9nw   1/1     Running     0          15m

集群部署成功。

4、部署ArgoCD

部署ArgoCD

• 提前拉取镜像

# # GetDockerImage
docker pull ccr.ccs.tencentyun.com/argocds/dex:v2.35.3
docker pull ccr.ccs.tencentyun.com/argocds/redis:7.0.8-alpine
docker pull ccr.ccs.tencentyun.com/argocds/argocd:v2.6.7

# # TagDockerImage
docker tag ccr.ccs.tencentyun.com/argocds/dex:v2.35.3 ghcr.io/dexidp/dex:v2.35.3 
docker tag ccr.ccs.tencentyun.com/argocds/argocd:v2.6.7 quay.io/argoproj/argocd:v2.6.7 
docker tag ccr.ccs.tencentyun.com/argocds/redis:7.0.8-alpine redis:7.0.8-alpine 

• 执行脚本

[root@devops7 argocd]#sh run.sh

查看状态：

• 配置自己pc hosts，映射域名

172.29.9.130 argocd.idevops.site

• 登录argocd

https://argocd.idevops.site/

• 修改密码

admin/Admin@123

部署argocd应用

• 执行

[root@devops7 argocd-testapp]#ls
testapp.yaml
[root@devops7 argocd-testapp]#kubectl apply -f testapp.yaml 
application.argoproj.io/directory-guestbook created
[root@devops7 argocd-testapp]#

• 点击SYNC

• 观察状态

• 删除argocd应用

删除成功：

• 我们将argocd应用的代码仓库换成自己的极狐地址，再次部署，观察现象

[root@devops7 argocd-testapp]#kubectl apply -f testapp.yaml 
application.argoproj.io/directory-guestbook created

可正常部署应用：

以上，本次的测试环境已搭建成功。😘

关于我

我的博客主旨：

• 排版美观，语言精炼；
• 文档即手册，步骤明细，拒绝埋坑，提供源码；
• 本人实战文档都是亲测成功的，各位小伙伴在实际操作过程中如有什么疑问，可随时联系本人帮您解决问题，让我们一起进步！

🍀 微信二维码
x2675263825 （舍得）， qq：2675263825。

🍀 微信公众号
《云原生架构师实战》

🍀 语雀

https://www.yuque.com/xyy-onlyone

🍀 csdn
https://blog.csdn.net/weixin_39246554?spm=1010.2135.3001.5421

🍀 知乎
https://www.zhihu.com/people/foryouone

最后

好了，关于本次就到这里了，感谢大家阅读，最后祝大家生活快乐，每天都过的有意义哦，我们下期见！