Обновить ansible/k8s_setup.yml
This commit is contained in:
@@ -1,37 +1,42 @@
|
|||||||
---
|
---
|
||||||
- name: Подготовка всех узлов
|
- name: Подготовка всех узлов (Master и Workers)
|
||||||
hosts: masters,workers # <--- ИЗМЕНИЛИ all на masters,workers
|
hosts: masters,workers
|
||||||
become: true
|
become: true
|
||||||
|
gather_facts: true
|
||||||
tasks:
|
tasks:
|
||||||
- name: Ожидание разблокировки APT (система обновляется после первой загрузки)
|
- name: 0. Ожидание разблокировки APT (Cloud-Init часто занимает его при старте)
|
||||||
shell: while fuser /var/lib/dpkg/lock-frontend >/dev/null 2>&1; do sleep 5; done;
|
shell: "while fuser /var/lib/dpkg/lock-frontend >/dev/null 2>&1; do sleep 5; done;"
|
||||||
changed_when: false
|
changed_when: false
|
||||||
|
|
||||||
- name: Обновление системы
|
- name: 1. Обновление кэша и системы
|
||||||
apt: update_cache=yes upgrade=dist
|
|
||||||
|
|
||||||
- name: Установка базовых пакетов
|
|
||||||
apt:
|
apt:
|
||||||
name: [apt-transport-https, ca-certificates, curl, gnupg, qemu-guest-agent]
|
update_cache: yes
|
||||||
|
upgrade: dist
|
||||||
|
|
||||||
|
- name: 2. Установка системных зависимостей
|
||||||
|
apt:
|
||||||
|
name: [apt-transport-https, ca-certificates, curl, gnupg, lsb-release, qemu-guest-agent, socat, conntrack]
|
||||||
state: present
|
state: present
|
||||||
|
|
||||||
- name: Отключение SWAP
|
- name: 3. Отключение SWAP (обязательно для K8s)
|
||||||
command: swapoff -a
|
shell: |
|
||||||
|
swapoff -a
|
||||||
|
sed -i '/ swap / s/^\(.*\)$/#\1/g' /etc/fstab
|
||||||
when: ansible_swaptotal_mb > 0
|
when: ansible_swaptotal_mb > 0
|
||||||
|
|
||||||
- name: Загрузка модулей ядра
|
- name: 4. Загрузка модулей ядра для сети
|
||||||
copy:
|
copy:
|
||||||
dest: /etc/modules-load.d/k8s.conf
|
dest: /etc/modules-load.d/k8s.conf
|
||||||
content: |
|
content: |
|
||||||
overlay
|
overlay
|
||||||
br_netfilter
|
br_netfilter
|
||||||
|
|
||||||
- name: Применение модулей
|
- name: 5. Применение модулей ядра
|
||||||
shell: |
|
shell: |
|
||||||
modprobe overlay
|
modprobe overlay
|
||||||
modprobe br_netfilter
|
modprobe br_netfilter
|
||||||
|
|
||||||
- name: Настройка параметров sysctl
|
- name: 6. Настройка параметров sysctl для K8s
|
||||||
copy:
|
copy:
|
||||||
dest: /etc/sysctl.d/k8s.conf
|
dest: /etc/sysctl.d/k8s.conf
|
||||||
content: |
|
content: |
|
||||||
@@ -40,74 +45,101 @@
|
|||||||
net.ipv4.ip_forward = 1
|
net.ipv4.ip_forward = 1
|
||||||
register: sysctl_res
|
register: sysctl_res
|
||||||
|
|
||||||
- name: Применить sysctl
|
- name: 7. Применить sysctl
|
||||||
command: sysctl --system
|
command: sysctl --system
|
||||||
when: sysctl_res.changed
|
when: sysctl_res.changed
|
||||||
|
|
||||||
- name: Установка Containerd (версия 2025 года)
|
- name: 8. Установка Containerd
|
||||||
apt:
|
apt:
|
||||||
name: containerd
|
name: containerd
|
||||||
state: present
|
state: present
|
||||||
|
|
||||||
- name: Настройка Containerd (SystemdCgroup)
|
- name: 9. Конфигурация Containerd (SystemdCgroup)
|
||||||
shell: |
|
shell: |
|
||||||
mkdir -p /etc/containerd
|
mkdir -p /etc/containerd
|
||||||
containerd config default > /etc/containerd/config.toml
|
containerd config default > /etc/containerd/config.toml
|
||||||
sed -i 's/SystemdCgroup = false/SystemdCgroup = true/' /etc/containerd/config.toml
|
sed -i 's/SystemdCgroup = false/SystemdCgroup = true/' /etc/containerd/config.toml
|
||||||
notify: restart containerd
|
notify: restart containerd
|
||||||
|
|
||||||
- name: Добавление ключа и репозитория Kubernetes
|
- name: 10. Настройка репозитория Kubernetes (Зеркало Yandex 2025)
|
||||||
shell: |
|
shell: |
|
||||||
curl -fsSL https://pkgs.k8s.io/core:/stable:/v1.32/deb/Release.key | gpg --dearmor -o /etc/apt/keyrings/kubernetes-apt-keyring.gpg
|
curl -fsSL https://pkgs.k8s.io/core:/stable:/v1.32/deb/Release.key | gpg --dearmor -o /etc/apt/keyrings/kubernetes-apt-keyring.gpg --yes
|
||||||
echo 'deb [signed-by=/etc/apt/keyrings/kubernetes-apt-keyring.gpg] https://pkgs.k8s.io/core:/stable:/v1.32/deb/ /' > /etc/apt/sources.list.d/kubernetes.list
|
echo "deb [signed-by=/etc/apt/keyrings/kubernetes-apt-keyring.gpg] https://mirror.yandex.ru/mirrors/kubernetes/core:/stable:/v1.32/deb/ /" > /etc/apt/sources.list.d/kubernetes.list
|
||||||
|
|
||||||
- name: Установка компонентов K8s
|
- name: 11. Установка компонентов K8s (kubelet, kubeadm, kubectl)
|
||||||
apt:
|
apt:
|
||||||
name: [kubelet, kubeadm, kubectl]
|
name:
|
||||||
|
- kubelet
|
||||||
|
- kubeadm
|
||||||
|
- kubectl
|
||||||
state: present
|
state: present
|
||||||
update_cache: yes
|
update_cache: yes
|
||||||
|
|
||||||
|
- name: 12. Фиксация версий K8s (чтобы не обновились случайно)
|
||||||
|
shell: apt-mark hold kubelet kubeadm kubectl
|
||||||
|
changed_when: false
|
||||||
|
|
||||||
handlers:
|
handlers:
|
||||||
- name: restart containerd
|
- name: restart containerd
|
||||||
service: name=containerd state=restarted
|
service: name=containerd state=restarted
|
||||||
|
|
||||||
- name: Инициализация Master
|
- name: Инициализация Master-ноды
|
||||||
hosts: masters
|
hosts: masters
|
||||||
become: true
|
become: true
|
||||||
tasks:
|
tasks:
|
||||||
- name: Проверка, инициализирован ли кластер
|
- name: Проверка, инициализирован ли кластер
|
||||||
stat: path=/etc/kubernetes/admin.conf
|
stat:
|
||||||
|
path: /etc/kubernetes/admin.conf
|
||||||
register: kube_init
|
register: kube_init
|
||||||
|
|
||||||
- name: Kubeadm init (без kube-proxy для Cilium)
|
- name: Инициализация кластера через kubeadm
|
||||||
command: kubeadm init --pod-network-cidr=10.244.0.0/16 --skip-phases=addon/kube-proxy
|
command: >
|
||||||
|
kubeadm init
|
||||||
|
--pod-network-cidr=10.244.0.0/16
|
||||||
|
--upload-certs
|
||||||
|
--skip-phases=addon/kube-proxy
|
||||||
when: not kube_init.stat.exists
|
when: not kube_init.stat.exists
|
||||||
|
register: kubeadm_init_output
|
||||||
|
|
||||||
- name: Настройка конфига для пользователя
|
- name: Настройка kubectl для пользователя ubuntu
|
||||||
shell: |
|
shell: |
|
||||||
mkdir -p $HOME/.kube
|
mkdir -p /home/ubuntu/.kube
|
||||||
cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
|
cp -i /etc/kubernetes/admin.conf /home/ubuntu/.kube/config
|
||||||
chown $(id -u):$(id -g) $HOME/.kube/config
|
chown ubuntu:ubuntu /home/ubuntu/.kube/config
|
||||||
|
|
||||||
- name: Генерация команды присоединения
|
- name: Генерация команды для подключения воркеров
|
||||||
command: kubeadm token create --print-join-command
|
command: kubeadm token create --print-join-command
|
||||||
register: join_command
|
register: join_command_raw
|
||||||
|
|
||||||
- name: Присоединение Worker узлов
|
- name: Сохранение команды join
|
||||||
|
set_fact:
|
||||||
|
join_command: "{{ join_command_raw.stdout }}"
|
||||||
|
|
||||||
|
- name: Подключение Worker-нод
|
||||||
hosts: workers
|
hosts: workers
|
||||||
become: true
|
become: true
|
||||||
tasks:
|
tasks:
|
||||||
- name: Join к кластеру
|
- name: Проверка, подключен ли уже узел
|
||||||
command: "{{ hostvars[groups['masters'][0]]['join_command'].stdout }}"
|
stat:
|
||||||
args:
|
path: /etc/kubernetes/kubelet.conf
|
||||||
creates: /etc/kubernetes/kubelet.conf
|
register: kube_worker_init
|
||||||
|
|
||||||
- name: Установка Cilium (eBPF)
|
- name: Присоединение к кластеру
|
||||||
|
command: "{{ hostvars[groups['masters'][0]]['join_command'] }}"
|
||||||
|
when: not kube_worker_init.stat.exists
|
||||||
|
|
||||||
|
- name: Установка сетевого плагина Cilium (eBPF)
|
||||||
hosts: masters
|
hosts: masters
|
||||||
|
become: false # Выполняем от пользователя ubuntu через kubectl
|
||||||
tasks:
|
tasks:
|
||||||
- name: Установка Cilium CLI и самого CNI
|
- name: Скачивание Cilium CLI
|
||||||
shell: |
|
shell: |
|
||||||
curl -L --remote-name-all https://github.com/cilium/cilium-cli/releases/latest/download/cilium-linux-amd64.tar.gz
|
curl -L --remote-name-all https://github.com/cilium/cilium-cli/releases/latest/download/cilium-linux-amd64.tar.gz
|
||||||
tar xzvf cilium-linux-amd64.tar.gz -C /usr/local/bin
|
sudo tar xzvf cilium-linux-amd64.tar.gz -C /usr/local/bin
|
||||||
rm cilium-linux-amd64.tar.gz
|
rm cilium-linux-amd64.tar.gz
|
||||||
|
|
||||||
|
- name: Установка Cilium в кластер (в режиме замены kube-proxy)
|
||||||
|
shell: |
|
||||||
cilium install --set kubeProxyReplacement=true
|
cilium install --set kubeProxyReplacement=true
|
||||||
|
register: cilium_install
|
||||||
|
ignore_errors: true # Если уже установлен
|
||||||
Reference in New Issue
Block a user