Sergei
High availability.
а при чем здесь k8s?
Sergei
На слабых нагрузках редко бывают затыки?
откуда я знаю про ваши проекты, какие там затыки?
Alexander
High availability.
HA обеспечивается архитектурой приложения, а не волшебными прибамбасами, которые приложение крутят.
Alexander
а при чем здесь k8s?
Я думал, что K8S - это про HA для High Load. И потом если для вас 5K нод - не хайлоад, то я тогда вообще админ локалхоста.
Alexander
HA обеспечивается архитектурой приложения, а не волшебными прибамбасами, которые приложение крутят.
Я не спорю, что приложение должно быть cloud native, это подразумевается, ессно монолит в Кубере волшебным образом не станет HA.
Alexander
Нет. Это про деплой.
Деплой тоже, но ведь не только?
Sergei
Деплой тоже, но ведь не только?
k8s это просто штука, которая фигурно запускает контейнеры и немножко двигает трафик. всё.
Alexander
k8s это просто штука, которая фигурно запускает контейнеры и немножко двигает трафик. всё.
Более навороченный Compose? Просьба нуба ногами не пинать сразу банами.
Sergei
Более навороченный Compose? Просьба нуба ногами не пинать сразу банами.
более навороченный компоуз, который умеет нормально работать с несколькими хостами.
Alexander
Я не спорю, что приложение должно быть cloud native, это подразумевается, ессно монолит в Кубере волшебным образом не станет HA.
cloud native != HA. И кручение "cloud native" приложения в докере автоматически HA его не сделает.
Alexander
Если приложение умеет ReplicaSet ?
При чем тут replicaset? Это функциональность кубера, а не приложения.
Alexander
а если это приложение db2?
Если речь про DBMS, то кластер Db2 и без Кубера вполне себе умеет HA.
Sergei
как там с кворумом?
Sergei
как отрабатывается разрыв датацентров?
Alexander
При чем тут replicaset? Это функциональность кубера, а не приложения.
Вообщем я пока к сожалению не могу поддержать эту дискуссию, мне еще надо учить матчасть, но все же в Кубере IMHO проще создавать HA приложение, чем без Кубера со всякими примочками типа pace maker и т.п.
Sergei
вы думаете, что если вы быстро запустите новое взамен сломавшегося - то это оно
Sergei
Подразумевается какой-то SLA? девятки?
подразумевается что штатный отказ единичного элемента системы вообще не приводит к деградации сервиса.
Sergei
Балансер с health чеками заметит и не будет туда направлять, про это?
балансер ретрайнет запрос, если не вышло обработать на каком-то инстансе. вопрос в том ещё, что если балансер упадёт, то сервис тоже не остановится. и вы не потеряете ни одного запроса, если делать прям совсем по уму.
Sergei
k8s вам поможет, если ваша типичная проблема - это "сервис выключился, а вручную включить заняло время" или "сервер сломался, пока поднимали сервис на втором сервере - сервис лежал".
Alexander
Ведь для K8S много различных плагинов и дополнений, вероятно они покроют весь спектр моих задач со временем.
Ещё раз, никакой k8s и плагины к нему не сделают неHA приложение HA. И наоборот: приложению, которое HA, не требуется кубернетес для того, чтобы быть HA. Оно будет HA, даже если оно запускается раскатывается через sftp и запускается вручную на железных серверах
Alexander
Etcd, консенсус и т.п., в Кубере все это готовое? Этим может воспользоваться разработчик кастом HA приложения в Кубере?
Нет этого в кубере (кубер сам использует etcd для своей работы, но приложениям его не предоставляет). Консенсус снаружи, вообще, не прикрутить, это фича самого приложения должна быть и частью его логики работы.
Alexander
никогда не стал бы использовать etcd от k8s для приложения
Хотя бы в рамках интерфейсов Кубера, и правил типа ReplicaSet, вообщем рано мне еще пока это обсуждать :(
Sergei
Хотя бы в рамках интерфейсов Кубера, и правил типа ReplicaSet, вообщем рано мне еще пока это обсуждать :(
рантайм-интерфейсы кубернетеса довольно узкие и афаик по большей части провоцируют максимум использовать их для ридонли.
Alexander
Хотя бы в рамках интерфейсов Кубера, и правил типа ReplicaSet, вообщем рано мне еще пока это обсуждать :(
У кубера нет обязательных интерфейсов для приложения. Он просто запускает контейнеры. ReplicaSet всего лишь описание того, что нужно запустить N контейнеров на нодах с определенными параметрами.
Alexander
Есть API кубера, но его использование из приложения HA не сделает
Sergei
в каком-то роде
Alexander
ну куча энвайронмента - это рантайм-интерфейс
Этот энвайронмент не является IPC или API. Он статический для каждого экземпляра приложения, и его можно с таким же успехом воспроизвести руками без всякого кубера.
Alexander
@sanyo_devops короче говоря, кубер — это всего лишь относительно удобный способ запустить пачку экземпляров приложения, автоматически раскидав их по нодам. Ну и еще немного батареек вокруг это функциональности.
Alexander
Логика обработки нагрузки и устойчивости к отказам — целиком на плечах самого приложения.
Alexander
Также можно без автоскейлинга. Автоскейлинг, вообще, неоднозначная штука.
Alexander
Да (можно и без helm)
Тогда задача по прикручиванию Ansible к Compose - это действительно недокуберный велосипед?
Alexander
Если чуть длиннее, то зависит от потребностей и условий :)
Alexander
Если чуть длиннее, то зависит от потребностей и условий :)
Пока просто настроить композовские yaml-ы и запустить их, по сути все. Даже мониторить пока ненужно.
Alexander
Пока просто настроить композовские yaml-ы и запустить их, по сути все. Даже мониторить пока ненужно.
Вообще, если тебе нужно просто выкатить через compose на пару хостов, то ты можешь это сделать средствами самого же compose-а, в цикле вызвав его для удаленных docker-ов на нужных хостах.
Alexander
Вообще, если тебе нужно просто выкатить через compose на пару хостов, то ты можешь это сделать средствами самого же compose-а, в цикле вызвав его для удаленных docker-ов на нужных хостах.
Проблема не столько в нескольких хостах, а пока хосты даже одиночные с определенными для них ролями. Проблема в авто автонастройке docker-compose.yml Не столько проблема, сколько задача, которую нужно решать, а Ansible Jinja мне совсем не нравится по сравнению с T4. Чтобы скрипт кнопка-сделай-все-за-меня.sh параметр1, 2, 3, 4 создал нужные yml-ы и запустил их на нужных хостах, прописанных в конфиге автогенератора ямлов.
Alexander
Т.е. чтобы IaC из композов создался одним простым "вжух!" :)
Alexander
Какую-то дичь сегодня словил на ZFS v0.7.12 с файлом Knoppix_xxx.iso на 3+ гига.
Alexander
Сначала не пошла чексумма после скачки торрента либо после копирования на другой датасет. Потом ведь я добился нормальной чексуммы дозакачкой, опять скопировал в датасет с софтом, проверил чексумму, она пошла. Запустил скраб, он написал про проблему с этим файлом, и после полного прохода проблема не исчесзла. Сегодня проверил чексумму, она опять неправильная! Заново чекаю торрент и дозакачиваю, дичь какая. Может быть это глюк в проце или чипсете? У меня ядро запускается без обновления микрокода. Как говорится никогда такого не было и вот опять, ну компик без ECC, вообще Core2Duo + DDR2, оперативку тестил и не раз. Ну повторяемость на одном и том же файле как-то напрягает.
Alexander
Или буткиты совсем обнаглели :(
Alexander
09:40 root@workstation /download/KNOPPIX_V9.1DVD-2021-01-25-EN > l total 4569205 -rwxrwxrwx 1 ice ice 4694753280 May 9 23:01 KNOPPIX_V9.1DVD-2021-01-25-EN.iso -rw-r--r-- 1 ice ice 100 May 9 02:45 KNOPPIX_V9.1DVD-2021-01-25-EN.iso.sha256 09:40 root@workstation /download/KNOPPIX_V9.1DVD-2021-01-25-EN > sha256sum KNOPPIX_V9.1DVD-2021-01-25-EN.iso d9c8accbdaf7556aecd1c1822ce0d75a93d3c023ee24d3a653b87d9b3536f950 KNOPPIX_V9.1DVD-2021-01-25-EN.iso 09:41 root@workstation /download/KNOPPIX_V9.1DVD-2021-01-25-EN > cat KNOPPIX_V9.1DVD-2021-01-25-EN.iso.sha256 c6892dda97fa603b01bc04e89c56097df607142a4531c27fb439bcc27a4aee5d *KNOPPIX_V9.1DVD-2021-01-25-EN.iso Речекаем в qbittorrent и перезакачиваем глючный блок. 09:45 root@workstation /download/KNOPPIX_V9.1DVD-2021-01-25-EN > sha256sum KNOPPIX_V9.1DVD-2021-01-25-EN.iso c6892dda97fa603b01bc04e89c56097df607142a4531c27fb439bcc27a4aee5d KNOPPIX_V9.1DVD-2021-01-25-EN.iso
Alexander
zpool status -v pool: XXX state: ONLINE status: One or more devices has experienced an error resulting in data corruption. Applications may be affected. action: Restore the file in question if possible. Otherwise restore the entire pool from backup. see: http://zfsonlinux.org/msg/ZFS-8000-8A scan: scrub in progress since Sun May 9 21:24:32 2021 0B repaired, 82.48% done errors: Permanent errors have been detected in the following files: /mnt/xxx/LiveCD/Linux/OldPC/i486/Knoppix/v9.1 systemD/KNOPPIX_V9.1DVD-2021-01-25-EN.iso
Alexander
но ведь zfs не корраптит данные
никогда такого не было ...
Sergei
а если там POST, ретраить то нельзя. То есть таки потеряешь какие то запросы
POST можно ретраить иногда, как и GET иногда нельзя ретраить. давай не уходить в детали, это не имеет значения.
Alexander
Не факт, что это ZFS, у меня обычный писюк 10 летней давности без ECC, и проц без апдейта микрокода.
Sergei
никогда такого не было ...
мы хайрим, у нас есть вакансии в стораджах
Dmitry
Хотя бы в рамках интерфейсов Кубера, и правил типа ReplicaSet, вообщем рано мне еще пока это обсуждать :(
replicaSet в кубе, это же просто способ сказать кубу - постарайся держать такое то количество реплик приложения. HA приложения куб никак не сделает. Это оркестратор, он про деплой
Alexander
Я заметил-то случайно, потому что Knoppix не запустился в графику (падал Xorg) после вытаскивания из исошника сквош FS для кастом сборки BootCD/Flash. Самое смешное, что оригинальный ISO все же запускался :) бред какой-то.
Sergei
кноппикс, исошки...
Dmitry
POST можно ретраить иногда, как и GET иногда нельзя ретраить. давай не уходить в детали, это не имеет значения.
да я для себя интересовался. В общем случае не стоит этого делать, но в целом если код приложения это умеет учитывать то можно. Хотя может быть ещё какие хитрости есть
Alexander
кноппикс, исошки...
Мне на домашнем компе надо было загрузиться с флэшки, чтобы проверить работу FIDO2 с SSH.
Sergei
обычно если что-то пошло не так, то назад с ошибкой в стеке возвращается контекст
Sergei
и ты можешь так или иначе принять решение о том, как решать проблему
Sergei
на коннекте да, а вот если 504, то хз
собственно, поэтому, логику более умную стоит подключать начиная с первых этапов обработки запроса