Дмитрий
если это отдельный контейнер для применения миграций, почему нет
а что за практика делать отдельный контейнер для миграций? речь про Джангу? я правильно понял?
Tishka17
а что за практика делать отдельный контейнер для миграций? речь про Джангу? я правильно понял?
Да не обязательно отдельный. Речь о том, что миграции не должны применяться автоматом при запуске основного контейнера приложения. Как вариант: поддержать запуск с хитрым параметром и делать это руками или сделать отдельный контейнер который будет опять же запускаться руками
Tishka17
@ichestn есть что сказать?
Alex
именно отдельный контейнер, а не образ.
Alex
то есть это обычно тот же образ с основным приложением, но запускающий миграции при помощи CMD
Tishka17
ну можно и образ, наследованный от основного с другой командой
Alex
ну можно и образ, наследованный от основного с другой командой
да не нужно тут наследовать с другой командой
Alex
просто при запуске передать
Alex
суть в том что миграции не должны запускаться автоматически в том же контейнере при старте основного приложения.
Alex
потому что внезапно контейнеров с основным приложением может быть больше одного
Tishka17
просто при запуске передать
ну это надо помнить команду, а она может быть разная
Tishka17
а так можно было бы унифицировать для разных сервисов
Alex
ну это надо помнить команду, а она может быть разная
м.... docker run fucking-django-app run migrations например
Tishka17
но в общем, да
Anonymous
Спасибо за полезную инфу
Дмитрий
то есть это обычно тот же образ с основным приложением, но запускающий миграции при помощи CMD
хм, ну честно говоря странный кейс, отдельный контейнер поднимать, только ради того чтобы миграции применять. А почему в docker-compose не прописать ./manage migrate && ./manage runserver ?
Tishka17
и админам не надо знать что там внутри сейчас джанга, а завтра го
Alex
потому что деплоить ты можешь не compose
Дмитрий
да нет, не странный.
и реально так делают?
Alex
и реально так делают?
так делают все нормальные люди.
Дмитрий
у нас вроде в ci прописано применение миграций
Tishka17
давай представим асбтрактный кейс с k8s
Alex
давай представим асбтрактный кейс с k8s
а что представлять, я тебе реальный кейс могу рассказать с опеншифтом.
Tishka17
у тебя контейнер запущен в 10 экземплярах на разных машинах
Alex
более того могу рассказать почему плохо применять миграции в mid и pre хуках
Tishka17
при выкатке новой версии она постепенно раскатывается на все сервера с проверкой что запустилась норм
Alex
и вообще почему это все хуево автоматизируется самим K8S и лучше бы чтобы за выкатку миграций отвечала отдельная джоба в CI.
Tishka17
Идеальный кейс такой: 1. Выкатил недеструктивную миграцию 2. Проверил что все ок 3. Обновил 1 сервер из 10 4. Прерил что он норм работает 5. Обновил остальные сервера 6. Через какое-то вермя если все ок, выкатил деструктивную часть миграции
Alex
у нас вроде в ci прописано применение миграций
ну то есть полагаю у вас девопсы не дураки и сделали нормально, ты же творишь какую-то дичь.
Tishka17
чуть обновил
Alex
угу, при этом да миграции должны быть написаны так чтобы не ломать текущую версию сервиса.
Tishka17
грубо, если надо переименовать колонку - 1. ты заводишь новую, которая заполняется триггером 2. после проверки удаляешь старую колонку и триггер
Дмитрий
ну то есть полагаю у вас девопсы не дураки и сделали нормально, ты же творишь какую-то дичь.
не, я так не делаю, как описал, я предложил как вариант. У меня на локале Makefile где приписаны операции с миграциями, я после билда делая make migrate и все
Tishka17
нет
Tishka17
скинул
Anvar
Ребят, есть кто за границу на стажировку гонял?
Андрей
Мета
Anvar
Askhat
Ребят. Всем привет. Вопрос. Как долго занимает времени запрос на проверку валидации почты по домену? Например если смотреть там сначала на MX, потом далее HELO, EHLO и так далее
tfhx8
Народ, произойдет ли коллизия или блокировка, если в нескольких потоках открывать тот же самый файл, делать рандомное смещение и считывание строки?
Denis
Не произойдет
Andrey
если открывать то нет
tfhx8
а разве может быть несколько смещений у файла?
Tishka17
Если несколько раз открыть, почему нет
tfhx8
тут же как бы получается, что их несколько, еслик примеру потоков будет 10к и все они одновременно делают смещение
Tishka17
смещение это как бы не свойство файла
Alex
это свойство файлового дескриптора
Tishka17
это свойство дескриптора скорее
Aragaer
ну вообще в расширенном позиксе есть штука по имени listio, которая в много потоков читает/пишет файл
Aragaer
и это библиотечная вещь, которая фактически так и реализуется
tfhx8
я просто не понимаю, почему не происходит блокировки.
Aragaer
много тредов, в каждом свой дескриптор, у каждого свое смещение
Aragaer
а кто кого блокирует?
tfhx8
а если к примеру в каком то потоке брать определенное смещение, оно при запущенных 10к потоков возьмет точно те данные?
Tishka17
все ещё не понятно
tfhx8
а кто кого блокирует?
ну может не так выразился, может быть так, что они могут взять одни и теже данные с разными смещениями?
Tishka17
чо
Tishka17
у тебя по каждому смещению что-то записано
Tishka17
читай
Tishka17
у каждого дескриптора своё смещение
Tishka17
если будешь писать и читать по одному смещению в разных дескрипторах - могут быть проблемы синхронизации. А если по разным - все норм
tfhx8
ок. А как лучше для производительности? Читать большой файл и делать рандомное смещение и брать строку или разбить большой файл на много мелких и брать рандомно мелкий файл и считывать строку?
Aragaer
для производительности лучше вообще не читать, а делать mmap
Tishka17
для производительности лучше взть ssd
Denis
Для производительности лучше MPI
Aragaer
https://docs.python.org/3.7/library/mmap.html
Tishka17
@ichestn давай ты уберешь кота с клавиатуры или уже отправишь сообщение.
Tishka17
бесит