Ivan
Да экрана три выше
не заметил ничего особоенного, TBH
Ivan
ладно, сами мы не местные, не лезу
Ivan
работать надо)
Михаил
мне кажется это еще лайтово было
Александр
Да, что-то я упустил, надо было хуями её покрыть.. :-\
Max
Я могу сказать только "а мы предупреждали" (с)
Max
(:
🏳️ Phil
Хм... или устроить скандинавский аукцион кого забанить? А то я тут в Израиль еду и стеснен в средствах
🏳️ Phil
Извлечь так сказать пользу из ситуации
S
Хотя делать там не чего еще(((
🏳️ Phil
Так может подешевле в Крым поехать?)))
Строго говоря нет. И я не хочу проблем с ЕС и США
Александр
😆
🏳️ Phil
И в Крыму я был, а в Святой Земле - нет
Михаил
Хм... или устроить скандинавский аукцион кого забанить? А то я тут в Израиль еду и стеснен в средствах
у меня есть более крутая идея шахид неделя можешь отправить кого-то в бан только вместе с собой
Polnoch
Обращаю внимание, что я соблюдаю соглашение, и не учавствую в этом обсуждении
Александр
😆
Александр
Обращаю внимание, что я соблюдаю соглашение, и не учавствую в этом обсуждении
Как ты понимаешь, всем похуй, учавствуешь ты или нет. 😊
S
И в Крыму я был, а в Святой Земле - нет
Хм... я вот до прошлого года и в Париже не был, лучше бы наверное еще какое то время и не ездил...
Polnoch
Хм... я вот до прошлого года и в Париже не был, лучше бы наверное еще какое то время и не ездил...
Да, Париж разочаровывает :( Узкие улочки, нет парков, графити и всё такое :(
S
Грязь...
Polnoch
вы где-то не там гуляете))
не знаю... Но фраза "увидеть Париж и умереть", после того, как увидела, мне показалась пушкой...
G72K
я вот прям даже не знаю как это комментировать
как-как, налить водки и выпить с грустью :)
S
вы где-то не там гуляете))
У башни, нотердам и т.д.
Михаил
как-как, налить водки и выпить с грустью :)
идея конечно хорошая, но реализовывать пиздец местами
G72K
похоже ме пропустил всё то, о чём речь
взаимно, похоже существуют какие-то линии напряжения, которые не видны со стороны :)
Polnoch
1) гигантский оверхед по месту 2) если что с файликом случится - навернется все целиком
Посмотрела, у Вас, оказывается, хостинг. Тогда понятно, что то, что с ploop сложнее оверселлить по месту Вам не удобно. Можно оверселлить место, если Вы будете продавать менеджмент контейнеры, которые сами админите, и засуните внутрь контейнера утилиту, которая покажет через API биллинга то место, что клиенту продано (df -h, понятно, будет показывать меньше, чем продано в таком случае) Ещё... Вы zfs не пробовали? Я не пробовала, и не знаю, на сколько это продакшен-реади, юзать zfs для VZ контейнеров - там, наверное, куча разных подводных камней всплывёт, но по-идее, тут и проблем ext4 не будет, и производительность будет выше, особенно если кэш zfs положить на более быстрый SSD, PCI-express, и оверселлить сможете. Заодно можно кастомерам продать фичу снапшотов как клиентских бэкапов (но технические всё равно нужно оффсайт, за пределы сервера делать по понятным причинам)
Pavel
Ксения, если вы готовы все эти работы проспонсировать то я думаю они с радостью попробуют
Polnoch
Ксения, если вы готовы все эти работы проспонсировать то я думаю они с радостью попробуют
Это же чат. Человек рассказал о проблеме, я рассказала своё видение, как её можно решить - хочу помочь. Кстати, если кто-то проспонсируют, я тоже могу решить :) Впрочем, наверное, не только я в этом чате.
🏳️ Phil
Ну что, скандинавский аукцион? Смотрите, мне надо 1500-2000 шекелей, чтобы не сдохнуть с голоду в пустыне Негев на велосипеде.
Polnoch
1) гигантский оверхед по месту 2) если что с файликом случится - навернется все целиком
Ваши конкуренты, кстати, судя по этому репозиторию, как раз и юзают ZFS: https://github.com/FastVPSEestiOu/zfs-quota С VZ6 ядром. Вероятно, они все эти скрытые проблемы zfs + vz решили.
Nick
Посмотрела, у Вас, оказывается, хостинг. Тогда понятно, что то, что с ploop сложнее оверселлить по месту Вам не удобно. Можно оверселлить место, если Вы будете продавать менеджмент контейнеры, которые сами админите, и засуните внутрь контейнера утилиту, которая покажет через API биллинга то место, что клиенту продано (df -h, понятно, будет показывать меньше, чем продано в таком случае) Ещё... Вы zfs не пробовали? Я не пробовала, и не знаю, на сколько это продакшен-реади, юзать zfs для VZ контейнеров - там, наверное, куча разных подводных камней всплывёт, но по-идее, тут и проблем ext4 не будет, и производительность будет выше, особенно если кэш zfs положить на более быстрый SSD, PCI-express, и оверселлить сможете. Заодно можно кастомерам продать фичу снапшотов как клиентских бэкапов (но технические всё равно нужно оффсайт, за пределы сервера делать по понятным причинам)
аааа, ну сколько можно.. Ну т.е. я понимаю, 17 лет назад я в фидо был таким же, но, омг, не надо
Nick
при чем здесь оверселл места? У нас диски на 1.2 тера, вдс на 1 тер, оно в плуп просто не влезает
Nick
и мы привязаны к ехт4, потому что юзер квоты, причем секонд левел
🏳️ Phil
@knutov ты можешь мне сделать пару вписок на ночь с душем? (еду не надо, ну я не откажусь, но обойдусь). Меня беспокоит Тверия числа второго-третьего и третьего-четвертого Хайфа.
🏳️ Phil
и мы привязаны к ехт4, потому что юзер квоты, причем секонд левел
кстати, а я тебе про project quotas на xfs уже говорил?
Nick
и не надо додумывать контексты, когда вообще ничего не знаете о .
Polnoch
и не надо додумывать контексты, когда вообще ничего не знаете о .
Почему не знаю? Я достаточно много работала в хостингах, с VZ, и даже видела это говно ( в смысле, CMS Битрикс)
Nick
кстати, а я тебе про project quotas на xfs уже говорил?
не говорил. @pavel_odintsov говорил про квоты с зфс, но там тоже есть нюансы
Александр
Raid10 из 8 ssd тестил кто?
Polnoch
Но, правда, Битрикс последний раз я видела 6 лет назад. Кажется, тогда ему никакие юзерские квоты в контейнере были не нужны. Что поменялось? Или Вы для другого их используете?
Polnoch
Raid10 из 8 ssd тестил кто?
Я тестила. Просаживается I/O на запись. Грустно очень получается. Правда я тестила из дешёвых, консумерских SSD, у них очень прыгает скорость, а продаваны указывают среднюю
🏳️ Phil
Цифры в студию
А у тебя есть вписки в Израиле? Желательно 2-3 размер :)
Nick
говорю. может тебе подойдет
увы, нет. Оно типа как в зфс, только попроще. Тут встает несколько проблем - надо как-то прокидывать эти квоты внутрь контейнера, т.е. прокидывать рулилку наружу - это много дорогих человекочасов на интеграцию, и потом не очень понятен профит. Удаление миллионов мелких файлов на xfs лишь чуть лучше, чем на ext4.
Polnoch
Цифры в студию
Остались на прошлой работе :( Я там NDA подписывала :( Может, ты мне не поверишь, но я даже из своих исходников с работы, где NDA, беру только что-то самое интересное, для себя, и потом не показываю.
Александр
Какое нахуй нда на колво iops
Александр
Что ты несешь
Nick
Raid10 из 8 ssd тестил кто?
на 4х тестил. Цифр не осталось, но они были быстрее, чем нам нужно было даже в пиках. Вообще по таким штукам можно ориентироваться на цифры из статьи про zfs на calomel.org
🏳️ Phil
Docker в хостинге пока не оч :(
расскажи это лидеру шареда РФ
Pavel
А кто лидер шареда в рф?
Nick
ммм... слушай, docker уже даже это взял. не надо вроде там ничего прокидывать
у докера у тебя внутри, условно, один юзер/проект/приложение. В этом кейсе я могу сделать раздел или даже звол без секонд левел квот. Но у меня не этот кейс. олсо, из докера ты можешь повысить права наружу. Это неприемлемо для нас.
Александр
Polnoch
расскажи это лидеру шареда РФ
Да, только рута же внутри они не дают? И не запускают ничего тяжелого, правда? Кстати, с ploop можно решить проблему количества i/o запросов. Можно замутить, скажем, raid10 из, например, десятка хардов, и дальше лимитировать количество i/o к каждому контейнеру. Должно работать. И места можно больше продать, чем SSD
Pavel
Вот Фил может лидер, а насчет бегета не уверен
G72K
> олсо, из докера ты можешь повысить права наружу. Это неприемлемо для нас. из не privileged контейнера?
Nick
Да, только рута же внутри они не дают? И не запускают ничего тяжелого, правда? Кстати, с ploop можно решить проблему количества i/o запросов. Можно замутить, скажем, raid10 из, например, десятка хардов, и дальше лимитировать количество i/o к каждому контейнеру. Должно работать. И места можно больше продать, чем SSD
еще раз, не надо сочинять контексты, когда не понимаете в теме. думаю, самый тяжелый хостинг по дискам из всех хостеров у нас в рф - у меня. На сколько я знаю - ни у кого больше нет такой плотности битриксов. Дак вот - у меня в пиках 3-5к иопс на запись. Это, формально, при наличии очищенных блоков на диске, минимум в 2.5 раза медленее, чем спецификации любого современного серверного ссд.
Nick
мы делали оценку вероятностей и возможностей и посчитали маловероятным успевать фиксить проблему сразу же после того, как о ней станет известно
Nick
Про zfs подумаю на 8, спасиб.
там смотрите статью - лучше не 10, а отмотать до тестов с включенным сжатием и выбрать тот вариант, который вам требуется по скорости
G72K
они независимы от докера
Nick
ну можно же прикрыться seccomp, apparmor и проч
судя по гуглу - это не даст 100% защиты и даст заметное снижение производительности