From fe3b806a2db8f7f099aa12eb20eecfa8e211c39c Mon Sep 17 00:00:00 2001 From: ogrechko Date: Sun, 28 Dec 2025 12:54:03 +0000 Subject: [PATCH] =?UTF-8?q?=D0=9E=D0=B1=D0=BD=D0=BE=D0=B2=D0=B8=D1=82?= =?UTF-8?q?=D1=8C=20ansible/k8s=5Fsetup.yml?= MIME-Version: 1.0 Content-Type: text/plain; charset=UTF-8 Content-Transfer-Encoding: 8bit --- ansible/k8s_setup.yml | 79 +++++++++++++++++++++++++------------------ 1 file changed, 46 insertions(+), 33 deletions(-) diff --git a/ansible/k8s_setup.yml b/ansible/k8s_setup.yml index 447a87f..e87da70 100644 --- a/ansible/k8s_setup.yml +++ b/ansible/k8s_setup.yml @@ -4,39 +4,45 @@ become: true gather_facts: true tasks: - - name: 0. Ожидание разблокировки APT (Cloud-Init часто занимает его при старте) + - name: 0. Ожидание разблокировки APT shell: "while fuser /var/lib/dpkg/lock-frontend >/dev/null 2>&1; do sleep 5; done;" changed_when: false - - name: 1. Обновление кэша и системы + - name: 1. Настройка APT (Force IPv4 и фикс MTU) + shell: | + echo 'Acquire::ForceIPv4 "true";' > /etc/apt/apt.conf.d/99force-ipv4 + ip link set dev eth0 mtu 1450 || true + changed_when: false + + - name: 2. Обновление кэша и системы apt: update_cache: yes upgrade: dist - - name: 2. Установка системных зависимостей + - name: 3. Установка системных зависимостей apt: - name: [apt-transport-https, ca-certificates, curl, gnupg, lsb-release, qemu-guest-agent, socat, conntrack] + name: [apt-transport-https, ca-certificates, curl, gnupg, qemu-guest-agent, socat, conntrack] state: present - - name: 3. Отключение SWAP (обязательно для K8s) + - name: 4. Отключение SWAP shell: | swapoff -a sed -i '/ swap / s/^\(.*\)$/#\1/g' /etc/fstab when: ansible_swaptotal_mb > 0 - - name: 4. Загрузка модулей ядра для сети + - name: 5. Загрузка модулей ядра copy: dest: /etc/modules-load.d/k8s.conf content: | overlay br_netfilter - - name: 5. Применение модулей ядра + - name: 6. Применение модулей ядра shell: | modprobe overlay modprobe br_netfilter - - name: 6. Настройка параметров sysctl для K8s + - name: 7. Настройка параметров sysctl copy: dest: /etc/sysctl.d/k8s.conf content: | @@ -45,39 +51,44 @@ net.ipv4.ip_forward = 1 register: sysctl_res - - name: 7. Применить sysctl + - name: 8. Применить sysctl command: sysctl --system when: sysctl_res.changed - - name: 8. Установка Containerd + - name: 9. Установка Containerd apt: name: containerd state: present - - name: 9. Конфигурация Containerd (SystemdCgroup) + - name: 10. Конфигурация Containerd (SystemdCgroup) shell: | mkdir -p /etc/containerd containerd config default > /etc/containerd/config.toml sed -i 's/SystemdCgroup = false/SystemdCgroup = true/' /etc/containerd/config.toml notify: restart containerd - - name: 10. Настройка репозитория Kubernetes (Зеркало Yandex 2025) + - name: 11. Добавление ключа Kubernetes shell: | curl -fsSL https://pkgs.k8s.io/core:/stable:/v1.32/deb/Release.key | gpg --dearmor -o /etc/apt/keyrings/kubernetes-apt-keyring.gpg --yes - echo "deb [signed-by=/etc/apt/keyrings/kubernetes-apt-keyring.gpg] https://mirror.yandex.ru/mirrors/kubernetes/core:/stable:/v1.32/deb/ /" > /etc/apt/sources.list.d/kubernetes.list + register: key_download + until: key_download is success + retries: 5 + delay: 5 - - name: 11. Установка компонентов K8s (kubelet, kubeadm, kubectl) + - name: 12. Настройка репозитория Kubernetes + copy: + dest: /etc/apt/sources.list.d/kubernetes.list + content: "deb [signed-by=/etc/apt/keyrings/kubernetes-apt-keyring.gpg] https://pkgs.k8s.io/core:/stable:/v1.32/deb/ /" + + - name: 13. Установка компонентов K8s apt: - name: - - kubelet - - kubeadm - - kubectl + name: [kubelet, kubeadm, kubectl] state: present update_cache: yes - - - name: 12. Фиксация версий K8s (чтобы не обновились случайно) - shell: apt-mark hold kubelet kubeadm kubectl - changed_when: false + register: apt_install + until: apt_install is success + retries: 3 + delay: 10 handlers: - name: restart containerd @@ -87,27 +98,27 @@ hosts: masters become: true tasks: - - name: Проверка, инициализирован ли кластер + - name: Проверка инициализации stat: path: /etc/kubernetes/admin.conf register: kube_init - - name: Инициализация кластера через kubeadm + - name: Инициализация кластера (без kube-proxy) command: > kubeadm init --pod-network-cidr=10.244.0.0/16 - --upload-certs --skip-phases=addon/kube-proxy when: not kube_init.stat.exists - register: kubeadm_init_output - - name: Настройка kubectl для пользователя ubuntu + - name: Настройка конфига для ubuntu shell: | mkdir -p /home/ubuntu/.kube cp -i /etc/kubernetes/admin.conf /home/ubuntu/.kube/config chown ubuntu:ubuntu /home/ubuntu/.kube/config + args: + creates: /home/ubuntu/.kube/config - - name: Генерация команды для подключения воркеров + - name: Генерация токена для воркеров command: kubeadm token create --print-join-command register: join_command_raw @@ -119,7 +130,7 @@ hosts: workers become: true tasks: - - name: Проверка, подключен ли уже узел + - name: Проверка подключения stat: path: /etc/kubernetes/kubelet.conf register: kube_worker_init @@ -128,18 +139,20 @@ command: "{{ hostvars[groups['masters'][0]]['join_command'] }}" when: not kube_worker_init.stat.exists -- name: Установка сетевого плагина Cilium (eBPF) +- name: Установка Cilium (eBPF) hosts: masters - become: false # Выполняем от пользователя ubuntu через kubectl + become: false tasks: - name: Скачивание Cilium CLI shell: | curl -L --remote-name-all https://github.com/cilium/cilium-cli/releases/latest/download/cilium-linux-amd64.tar.gz sudo tar xzvf cilium-linux-amd64.tar.gz -C /usr/local/bin rm cilium-linux-amd64.tar.gz + args: + creates: /usr/local/bin/cilium - - name: Установка Cilium в кластер (в режиме замены kube-proxy) + - name: Установка Cilium (Kube-proxy replacement) shell: | cilium install --set kubeProxyReplacement=true register: cilium_install - ignore_errors: true # Если уже установлен \ No newline at end of file + ignore_errors: true \ No newline at end of file