« Rev
@ceph_ru   51
Fwd »


Viktor
под серьезной нагрузкой будут чудеса
Pavel
ну клауд же это из говна и палок
Я надеюсь это шутка была
Mark ☢️
ну клауд же это из говна и палок
http://s.pikabu.ru/post_img/big/2013/06/13/8/1371123914_1335899703.jpeg
Mark ☢️
под серьезной нагрузкой будут чудеса
О том и речь. Если нагрузка смешная -- то можно
Alexander
ну клауд же это из говна и палок
Не знаю, в CERN люди радуются
Mark ☢️
Не знаю, в CERN люди радуются
Они любят веснушки можт
Polnoch
Я надеюсь это шутка была
нет, серьёзно конечно. у Гугла ноды тоже из говна
Viktor
а гугл в курсе?
Polnoch
не знаю, что из себя представляют ноды AWS, но подозреваю, что и они тоже не затариваются брендовыми HP :)
Viktor
open compute ноды это всовсем не говно
Михаил
Они любят веснушки можт
это же CERN они могут ударить палкой так, что не запачкуются. вопрос же не в том, что кластер из говна, а в том, что архитектура по мудацки сделана
Polnoch
open compute ноды это всовсем не говно
А почему не говно :):
Polnoch
?
Viktor
не брендовый 1-2 сокетный сервер != говнотазик из бюджетного десктопного железа
Polnoch
как раз не энтерпрайз, не HP с гарантией замены сломанного компонента три бизнес дня
Viktor
А почему не говно :):
по исполнению
Pavel
нет, серьёзно конечно. у Гугла ноды тоже из говна
Это не повод тащить говно еще и в архитектуру
Polnoch
Это не повод тащить говно еще и в архитектуру
в опенстеке же это всё решаемо с помощью Heat
Polnoch
железка сдохла, можно сразу задеплоить ещё десяток инстансов
Polnoch
Ansible или паппет, итд
Михаил
Я полагаю, утверждение относилось к железу
а тут некоторые не понимают, что можно сделать облако из говножелеза и оно будет работать, а можно нахуевертить мудацкую архитектуру на нормальном железе и страдать.
Polnoch
Я полагаю, утверждение относилось к железу
да, к железу конечно. Но совместить компьюты с цепф-нодами тоже хочется
Viktor
что есть говножелезо? opencompute/supemicro или десктопное нечто?
Pavel
железка сдохла, можно сразу задеплоить ещё десяток инстансов
А на железке 10 продуктивных инстансов. И она не сдохла, а например просадка по сети из за говноархмтектуры
Viktor
десктопное не вариант
Viktor
слишком геморно будет на масштабе
Polnoch
десктопное не вариант
вай нот? Софтвая архитектура может решить проблемы не ECC памяти
Viktor
не может
Mark ☢️
Ошибка в памяти может привести к репликации говна на другие ноды
Alexander
да, к железу конечно. Но совместить компьюты с цепф-нодами тоже хочется
Выше были доводы, что CEPH уверенно жрет ОЗУ. Зачем тогда storage на compute? Это же применимо только в dev/test среде, в production, полагаю, все будет очень плохо
Polnoch
Не может
в энтерпрайзе не может, да. Если у вас виртуалка с 1с каким-нибудь, и там критичные бизнес-проводки, то нельзя
Viktor
а еще она не может решить проблему говеной элементной базы и overprovision по ресурсам
Mark ☢️
Ну да ну да
Polnoch
Никогда не случалось
Viktor
с вашими нервами случится
Polnoch
в крайнем случае всегда можно откатится из бэкапа, Swift на что :)?
Viktor
потому подключивать оно будет часто и густо, но по-мелочи
Mark ☢️
Ничего, живут люди с одним яйцом и разорванным анусом
Polnoch
с вашими нервами случится
ну вот не случалось. Тыщи говносайтов живут в хетзнере, и как-то не вылетели из топов ни гугла, ни даже яндекса, и продают
Viktor
десктопное железо давно делается впритык, и на одной pci-e линии легко может сидеть куча устройств
Mark ☢️
Прекол в том что если на хецнере комп с битой памятью то подохнет только он. А если такой комп в кластере то он попротит в общем случае все виртуалки в кластере
Polnoch
вы ж про клауд говорите, да и хетцнер совсем свежее десктопное уже не ставит
я говорю про клауд на в т.ч. на хетзнеровском говножелезе
Viktor
вы про свежие десктопные чипсеты от интела почитайте, гляньте где и насколько их порезали, и потом обсудим
Viktor
свежие это все что вышло за последние 2 года
Polnoch
Прекол в том что если на хецнере комп с битой памятью то подохнет только он. А если такой комп в кластере то он попротит в общем случае все виртуалки в кластере
Стоп. У нас есть допустим небольшой опенстек в хетзнере. Там стоит, ну скажем, десяток компьютов, два контроллера с лоэд балансерами. Сдох один компьют. ЧТо случилось? А ничего не случилось, heat у нас на что?
Viktor
вам даже 2 линка по честному гигабиту будет проблема сделать
Polnoch
ОК, сглючил один компьют, и ошибки не в ECC памяти. Что случилось? Ну один-два раза отдались ошибки 500/400 посетителям сайтов,
Polnoch
никтто ничего не заметил. ОК. Запортилась ФС инстанса. Что случилось? А мы накатили бэкап из свифта, который лежит там же
Viktor
Поподробнее плез
http://images.anandtech.com/doci/9485/PCH%20Allocation.png
Mark ☢️
http://images.anandtech.com/doci/9485/PCH%20Allocation.png
Я малограмотный. Что это значит ?
Viktor
а теперь давайте учтем что мы НЕ можем как нам удобно раскидать винты
Polnoch
Я имею в виду если под осд в цефе будет использовацца комп с битой памятью
Мне кажется, нельзя сделать ноду цефа с не-ECC памятью. 10G карточки разве уже доступны на десктопах?
Viktor
Я малограмотный. Что это значит ?
на 1 PCI-e у вас сядет и винт и контроллер сети
Mark ☢️
И какбы причем тут 10г и есс ?
Uncel
http://images.anandtech.com/doci/9485/PCH%20Allocation.png
Линии от проца утонули?
Viktor
Линии от проца утонули?
в бюджетных - да
Viktor
а по цене топовых почему бы и не взять е3?
Polnoch
И какбы причем тут 10г и есс ?
Ну обычно в дешёвом десктопном железе материнские платы с малым числом портов,
Polnoch
а нам ещё (мы же совместить хотим нову и цеф!) ещё как-то отдавать трафик с интансов
Polnoch
Мне кажется, не влезет достаточно 10G карточек. Просто за неимением нужного числа PCI-express
Polnoch
А оверлокероское, топовое десктопное железо уже сравнимо по цене/производительность с супермикрами
Viktor
1 двух портовой бы хватило, но в PCI-e упретесь
Uncel
в бюджетных - да
Странно, на диаграмме pch
Polnoch
в точку, и зачем тогда весь этот цирк?
если не совмещать, то вполне жизнеспособно :)
« Rev
@ceph_ru   51
Fwd »