@devops_ru

Страница 4487 из 4568

Andrey

11.10.2018
04:42:42

Вытянуть репозиторий через git и файл какой-то поменять. Запуск echo hello world работал. Это на маке, Сейчас пробую на линукса все сделать, может там проблемы не будет.

root@localhost

11.10.2018
05:58:06

Всем привет. Собираю образ с питоном, джангой и своим кодом. Показывать это в мир собираюсь с помощью gunicorn. Если запустить этот образ отдельно докером и выполнить в нем команду gunicorn -c gunicorn.py --chdir /opt/newcams/ newcams.wsgi - все работает норм. Если тот же самый образ собирать composer-ом - та же самая команда при выполнении вываливает эксепшн "no module named newcams.wsgi". Расскажите, пожалуйста, что я делаю не так. Ссыль на docker-compose.yml: https://pastebin.com/69TUb4RJ

Demuz

11.10.2018
06:14:20

Здарова всем. Попробовал поднять на gluster файлохранилку из 4х серверов, в режиме replica. Просто по адски тормозит чтение файлов, какие бы оптимизации я не делал. Есть ли файлохранилка, которая хотя бы на чтение работает хорошо, с высоким IOPS с тонной мелких файлов? Подскажите, пожалуйста.

root@localhost

11.10.2018
06:20:53

Здарова всем. Попробовал поднять на gluster файлохранилку из 4х серверов, в режиме replica. Просто по адски тормозит чтение файлов, какие бы оптимизации я не делал. Есть ли файлохранилка, которая хотя бы на чтение работает хорошо, с высоким IOPS с тонной мелких файлов? Подскажите, пожалуйста.

ceph?

Google

Demuz

11.10.2018
06:22:32

ceph?

Попробую.

ceph?

root@localhost

11.10.2018
06:28:03

Рекомендуют на каждой машине мониторы поднимать

Demuz

11.10.2018
06:28:47

А админ? Это панелька просто?

Антон

11.10.2018
06:31:51

Здарова всем. Попробовал поднять на gluster файлохранилку из 4х серверов, в режиме replica. Просто по адски тормозит чтение файлов, какие бы оптимизации я не делал. Есть ли файлохранилка, которая хотя бы на чтение работает хорошо, с высоким IOPS с тонной мелких файлов? Подскажите, пожалуйста.

?у нас проблем нет. у тебя ванильный гластер?

Demuz

11.10.2018
06:32:21

?у нас проблем нет. у тебя ванильный гластер?

Ванильный? ?

Антон

11.10.2018
06:32:51

ну базовый, который ставится через yum install gluster gluster-server?

Demuz

11.10.2018
06:33:12

?у нас проблем нет. у тебя ванильный гластер?

Когда заходишь в директорию монтированную, там более миллиона директорий внутри и он долго считывает их все.

ну базовый, который ставится через yum install gluster gluster-server?

Да

Антон

11.10.2018
06:33:45

Когда заходишь в директорию монтированную, там более миллиона директорий внутри и он долго считывает их все.

это ты уже нагрузил данными?

Demuz

11.10.2018
06:34:51

это ты уже нагрузил данными?

да. уже есть куча данных мелких, сертификаты, ключи и только html страницы на 250гигов. Когда пытаешься зайти в корень, где миллионы папок, вот здесь гластер начинает офигевать, минуты 4 читается.

А если просто заходишь в хард, напрямую, то 2-3 секунды считывание.

При чем, если потом продолжаешь заходить в директории, где по 2-3 вложенные папки, тогда очень быстро открывает. Здесь я понял дело в количестве содержимого.

Google

Demuz

11.10.2018
06:37:22

Так вот в такой ситуации может ли помочь ceph?

Антон

11.10.2018
06:39:32

да. уже есть куча данных мелких, сертификаты, ключи и только html страницы на 250гигов. Когда пытаешься зайти в корень, где миллионы папок, вот здесь гластер начинает офигевать, минуты 4 читается.

250гб html страниц? О_О ну... у нас честно таких проблем чет не наблюдалось. хотя мы используем его не как помойку,а как PVC для облака т.к. там не ванильный докер, а с небольшой обвязкой. разрабы не жалются, хотя у парочки проектов есть RWM режим. у нас стоит рхел, ну и все из его родного репа

Э?

Demuz

11.10.2018
06:41:43

250гб html страниц? О_О ну... у нас честно таких проблем чет не наблюдалось. хотя мы используем его не как помойку,а как PVC для облака т.к. там не ванильный докер, а с небольшой обвязкой. разрабы не жалются, хотя у парочки проектов есть RWM режим. у нас стоит рхел, ну и все из его родного репа

сертификаты, ключи и только html страницы на 250гигов. Имел ввиду только сертификаты, страницы и ключи на 250 гигов в общей сложности.

Антон

11.10.2018
06:42:33

сертификаты, ключи и только html страницы на 250гигов. Имел ввиду только сертификаты, страницы и ключи на 250 гигов в общей сложности.

да все равно дохрена) попробуй использовать glusterfa+heketi (это API к нему)

Demuz

11.10.2018
06:42:48

250гб html страниц? О_О ну... у нас честно таких проблем чет не наблюдалось. хотя мы используем его не как помойку,а как PVC для облака т.к. там не ванильный докер, а с небольшой обвязкой. разрабы не жалются, хотя у парочки проектов есть RWM режим. у нас стоит рхел, ну и все из его родного репа

А клиенты его монтируют через glusterfs?

да все равно дохрена) попробуй использовать glusterfa+heketi (это API к нему)

Фигассе! На го!? Да неужели. Кайф. Спасибо. glusterfa?

Stan

11.10.2018
06:46:17

250гб html страниц? О_О ну... у нас честно таких проблем чет не наблюдалось. хотя мы используем его не как помойку,а как PVC для облака т.к. там не ванильный докер, а с небольшой обвязкой. разрабы не жалются, хотя у парочки проектов есть RWM режим. у нас стоит рхел, ну и все из его родного репа

он наверно крейглист админит

они там генерят хтмлки для каждого обхявления, базу почти не юзают)

Антон

11.10.2018
06:47:27

Фигассе! На го!? Да неужели. Кайф. Спасибо. glusterfa?

https://github.com/heketi/heketi вот оно

А клиенты его монтируют через glusterfs?

он монтируется у нас в облако

старая легаси типо хотела, но по ИБ не дали доступа

Demuz

11.10.2018
06:47:57

https://github.com/heketi/heketi вот оно

ну я оттуда и написал что он на го и это круто)

они там генерят хтмлки для каждого обхявления, базу почти не юзают)

pgsql с patroni там

он монтируется у нас в облако

допустим ставлю heketi, а как он вопрос с производительностью решит то? )))

Роман

11.10.2018
06:49:37

Господа, side question - кто на девупс идёт?)

Антон

11.10.2018
06:51:05

допустим ставлю heketi, а как он вопрос с производительностью решит то? )))

вариант который может помочь) не могу сравнить кейсы т.к. у нас нет проблем с чтением, хотя мы на гластере держим 3 редиса

Господа, side question - кто на девупс идёт?)

что за девупс?

Роман

11.10.2018
06:51:38

DevOops конфа в питере

Антон

11.10.2018
06:51:59

DevOops конфа в питере

О. Уже в Питере. Я думал в Мск

Google

Никита

11.10.2018
06:53:05

Да там программа ниачом.

Роман

11.10.2018
06:53:33

Да кто ради программы то ходит. Наклеечки, пива попить, пообщаться

Error

11.10.2018
06:54:00

Я виндос люблб

Роман

11.10.2018
06:54:25

Все же знают, что нельзя наклейки на ноут покупать, только собирать по конфам

Error

11.10.2018
06:54:29

Он с музыкой грузится

Sergey

11.10.2018
06:54:51

Все же знают, что нельзя наклейки на ноут покупать, только собирать по конфам

почему нет?

зачем они вообще нужны на нормальном чистом ноуте?

Роман

11.10.2018
06:55:51

Because you can

Sergey

11.10.2018
06:56:51

ну на любителя я считаю что наклейки на буке это какая то дичь это как татуха на роже))

Никита

11.10.2018
06:57:08

Да кто ради программы то ходит. Наклеечки, пива попить, пообщаться

:3

зачем они вообще нужны на нормальном чистом ноуте?

Эт как на раллийных всяких тачках.

Sergey

11.10.2018
06:57:54

Эт как на раллийных всяких тачках.

но там реклама производителей и брендов а не всякая чушь с которой 0 профита

Роман

11.10.2018
06:58:40

А если серьезно, конференции нужны, что бы общаться/получать опыт/находить экспертов/хайрить людей и прочее. Короче, socialize. Понятное дело, что за один день не станешь экспертом, максимум подсмотришь что то.

Никита

11.10.2018
07:02:09

Я люблю конференции, типа Хайлоада, Рутконфа.

Но айтишных конференций как-то многовато стало, и все они такие себе. Хотя мб это и субъективно.

Антон

11.10.2018
07:04:06

Только лого ROG)

Andrey

11.10.2018
07:05:59

Кто подскажет. Есть убунта, сервер, и откуда-то прилетают настройки HTTP_PROXY, все места, указанные здесь https://help.ubuntu.com/community/EnvironmentVariables уже проверил... ничего не нашел. Какие еще такиех хитрые места могут быть?

Роман

11.10.2018
07:07:23

Кто подскажет. Есть убунта, сервер, и откуда-то прилетают настройки HTTP_PROXY, все места, указанные здесь https://help.ubuntu.com/community/EnvironmentVariables уже проверил... ничего не нашел. Какие еще такиех хитрые места могут быть?

больше подробностей. куда прилетают?

покажи env

Demuz

11.10.2018
07:08:52

https://github.com/heketi/heketi вот оно

он не запускается, а логи непонятно где хранит. в конфиге нет пути к логам, в стандартных директориях тоже нет.

Google

Антон

11.10.2018
07:09:30

он не запускается, а логи непонятно где хранит. в конфиге нет пути к логам, в стандартных директориях тоже нет.

Ты его откуда ставишь и как?

Andrey

11.10.2018
07:09:41

больше подробностей. куда прилетают?

захожу под своей учеткой или под рутом, есть переменные окружения HTTP_PROXY. Проверил /etc/envinroment и /etc/profile.d/ и локальные .bashrc, ничего не видно.

Роман

11.10.2018
07:09:59

покажи env под рутом, пожалуйста

Demuz

11.10.2018
07:10:39

Ты его откуда ставишь и как?

только на http пишет Invalid path or request.

Andrey

11.10.2018
07:12:32

покажи env под рутом, пожалуйста

https://gist.github.com/panov-andy/4f881b9127bf1d72b0c264a012b8e4fa

Rishat

11.10.2018
07:14:22

Ребят, у кого-то было такое? Накидываю ансиблом Nginx ну и дополнительное для веба. Потом кручу letsencrypt предварительно вырубив Nginx и потом пытаюсь его поднять, а мне говорит что порт занят и если посмотреть кем, nginx сидит и веб морда работает. Хотя в systemctl вырубать пытался и врубать ;))