Обновить ansible/k8s_setup.yml

This commit is contained in:
2025-12-28 12:54:03 +00:00
parent f0d57cd0e6
commit fe3b806a2d

View File

@@ -4,39 +4,45 @@
become: true become: true
gather_facts: true gather_facts: true
tasks: tasks:
- name: 0. Ожидание разблокировки APT (Cloud-Init часто занимает его при старте) - name: 0. Ожидание разблокировки APT
shell: "while fuser /var/lib/dpkg/lock-frontend >/dev/null 2>&1; do sleep 5; done;" shell: "while fuser /var/lib/dpkg/lock-frontend >/dev/null 2>&1; do sleep 5; done;"
changed_when: false changed_when: false
- name: 1. Обновление кэша и системы - name: 1. Настройка APT (Force IPv4 и фикс MTU)
shell: |
echo 'Acquire::ForceIPv4 "true";' > /etc/apt/apt.conf.d/99force-ipv4
ip link set dev eth0 mtu 1450 || true
changed_when: false
- name: 2. Обновление кэша и системы
apt: apt:
update_cache: yes update_cache: yes
upgrade: dist upgrade: dist
- name: 2. Установка системных зависимостей - name: 3. Установка системных зависимостей
apt: apt:
name: [apt-transport-https, ca-certificates, curl, gnupg, lsb-release, qemu-guest-agent, socat, conntrack] name: [apt-transport-https, ca-certificates, curl, gnupg, qemu-guest-agent, socat, conntrack]
state: present state: present
- name: 3. Отключение SWAP (обязательно для K8s) - name: 4. Отключение SWAP
shell: | shell: |
swapoff -a swapoff -a
sed -i '/ swap / s/^\(.*\)$/#\1/g' /etc/fstab sed -i '/ swap / s/^\(.*\)$/#\1/g' /etc/fstab
when: ansible_swaptotal_mb > 0 when: ansible_swaptotal_mb > 0
- name: 4. Загрузка модулей ядра для сети - name: 5. Загрузка модулей ядра
copy: copy:
dest: /etc/modules-load.d/k8s.conf dest: /etc/modules-load.d/k8s.conf
content: | content: |
overlay overlay
br_netfilter br_netfilter
- name: 5. Применение модулей ядра - name: 6. Применение модулей ядра
shell: | shell: |
modprobe overlay modprobe overlay
modprobe br_netfilter modprobe br_netfilter
- name: 6. Настройка параметров sysctl для K8s - name: 7. Настройка параметров sysctl
copy: copy:
dest: /etc/sysctl.d/k8s.conf dest: /etc/sysctl.d/k8s.conf
content: | content: |
@@ -45,39 +51,44 @@
net.ipv4.ip_forward = 1 net.ipv4.ip_forward = 1
register: sysctl_res register: sysctl_res
- name: 7. Применить sysctl - name: 8. Применить sysctl
command: sysctl --system command: sysctl --system
when: sysctl_res.changed when: sysctl_res.changed
- name: 8. Установка Containerd - name: 9. Установка Containerd
apt: apt:
name: containerd name: containerd
state: present state: present
- name: 9. Конфигурация Containerd (SystemdCgroup) - name: 10. Конфигурация Containerd (SystemdCgroup)
shell: | shell: |
mkdir -p /etc/containerd mkdir -p /etc/containerd
containerd config default > /etc/containerd/config.toml containerd config default > /etc/containerd/config.toml
sed -i 's/SystemdCgroup = false/SystemdCgroup = true/' /etc/containerd/config.toml sed -i 's/SystemdCgroup = false/SystemdCgroup = true/' /etc/containerd/config.toml
notify: restart containerd notify: restart containerd
- name: 10. Настройка репозитория Kubernetes (Зеркало Yandex 2025) - name: 11. Добавление ключа Kubernetes
shell: | shell: |
curl -fsSL https://pkgs.k8s.io/core:/stable:/v1.32/deb/Release.key | gpg --dearmor -o /etc/apt/keyrings/kubernetes-apt-keyring.gpg --yes curl -fsSL https://pkgs.k8s.io/core:/stable:/v1.32/deb/Release.key | gpg --dearmor -o /etc/apt/keyrings/kubernetes-apt-keyring.gpg --yes
echo "deb [signed-by=/etc/apt/keyrings/kubernetes-apt-keyring.gpg] https://mirror.yandex.ru/mirrors/kubernetes/core:/stable:/v1.32/deb/ /" > /etc/apt/sources.list.d/kubernetes.list register: key_download
until: key_download is success
retries: 5
delay: 5
- name: 11. Установка компонентов K8s (kubelet, kubeadm, kubectl) - name: 12. Настройка репозитория Kubernetes
copy:
dest: /etc/apt/sources.list.d/kubernetes.list
content: "deb [signed-by=/etc/apt/keyrings/kubernetes-apt-keyring.gpg] https://pkgs.k8s.io/core:/stable:/v1.32/deb/ /"
- name: 13. Установка компонентов K8s
apt: apt:
name: name: [kubelet, kubeadm, kubectl]
- kubelet
- kubeadm
- kubectl
state: present state: present
update_cache: yes update_cache: yes
register: apt_install
- name: 12. Фиксация версий K8s (чтобы не обновились случайно) until: apt_install is success
shell: apt-mark hold kubelet kubeadm kubectl retries: 3
changed_when: false delay: 10
handlers: handlers:
- name: restart containerd - name: restart containerd
@@ -87,27 +98,27 @@
hosts: masters hosts: masters
become: true become: true
tasks: tasks:
- name: Проверка, инициализирован ли кластер - name: Проверка инициализации
stat: stat:
path: /etc/kubernetes/admin.conf path: /etc/kubernetes/admin.conf
register: kube_init register: kube_init
- name: Инициализация кластера через kubeadm - name: Инициализация кластера (без kube-proxy)
command: > command: >
kubeadm init kubeadm init
--pod-network-cidr=10.244.0.0/16 --pod-network-cidr=10.244.0.0/16
--upload-certs
--skip-phases=addon/kube-proxy --skip-phases=addon/kube-proxy
when: not kube_init.stat.exists when: not kube_init.stat.exists
register: kubeadm_init_output
- name: Настройка kubectl для пользователя ubuntu - name: Настройка конфига для ubuntu
shell: | shell: |
mkdir -p /home/ubuntu/.kube mkdir -p /home/ubuntu/.kube
cp -i /etc/kubernetes/admin.conf /home/ubuntu/.kube/config cp -i /etc/kubernetes/admin.conf /home/ubuntu/.kube/config
chown ubuntu:ubuntu /home/ubuntu/.kube/config chown ubuntu:ubuntu /home/ubuntu/.kube/config
args:
creates: /home/ubuntu/.kube/config
- name: Генерация команды для подключения воркеров - name: Генерация токена для воркеров
command: kubeadm token create --print-join-command command: kubeadm token create --print-join-command
register: join_command_raw register: join_command_raw
@@ -119,7 +130,7 @@
hosts: workers hosts: workers
become: true become: true
tasks: tasks:
- name: Проверка, подключен ли уже узел - name: Проверка подключения
stat: stat:
path: /etc/kubernetes/kubelet.conf path: /etc/kubernetes/kubelet.conf
register: kube_worker_init register: kube_worker_init
@@ -128,18 +139,20 @@
command: "{{ hostvars[groups['masters'][0]]['join_command'] }}" command: "{{ hostvars[groups['masters'][0]]['join_command'] }}"
when: not kube_worker_init.stat.exists when: not kube_worker_init.stat.exists
- name: Установка сетевого плагина Cilium (eBPF) - name: Установка Cilium (eBPF)
hosts: masters hosts: masters
become: false # Выполняем от пользователя ubuntu через kubectl become: false
tasks: tasks:
- name: Скачивание Cilium CLI - name: Скачивание Cilium CLI
shell: | shell: |
curl -L --remote-name-all https://github.com/cilium/cilium-cli/releases/latest/download/cilium-linux-amd64.tar.gz curl -L --remote-name-all https://github.com/cilium/cilium-cli/releases/latest/download/cilium-linux-amd64.tar.gz
sudo tar xzvf cilium-linux-amd64.tar.gz -C /usr/local/bin sudo tar xzvf cilium-linux-amd64.tar.gz -C /usr/local/bin
rm cilium-linux-amd64.tar.gz rm cilium-linux-amd64.tar.gz
args:
creates: /usr/local/bin/cilium
- name: Установка Cilium в кластер (в режиме замены kube-proxy) - name: Установка Cilium (Kube-proxy replacement)
shell: | shell: |
cilium install --set kubeProxyReplacement=true cilium install --set kubeProxyReplacement=true
register: cilium_install register: cilium_install
ignore_errors: true # Если уже установлен ignore_errors: true