@devops_ru

Страница 187 из 4568
Dmitrii
21.05.2016
13:45:23
Вырос же, ну.

Теперь только новые и прогрессивные технологии.

Kirill
21.05.2016
13:45:54
Roman
21.05.2016
13:46:45
А кто что использует для быстрой репликации данных между площадками?

Google
Dmitrii
21.05.2016
13:47:05
А сколько данных?

Я 10 ТБ картинок своего хостинга rsync'ом гнал.

Alexander
21.05.2016
13:48:17
Я 10 ТБ картинок своего хостинга rsync'ом гнал.
А как проверял консистентность?

Dmitrii
21.05.2016
13:48:34
Silent Bob
21.05.2016
13:48:35
Теперь только новые и прогрессивные технологии.
и что сейчас нового и прогрессивного появилось в качестве замены?)

Roman
21.05.2016
13:49:03
А сколько данных?
Мне реалтайм надо. Где-то 1-2гб в минуту

Dmitrii
21.05.2016
13:49:30
и что сейчас нового и прогрессивного появилось в качестве замены?)
По-мойму ничего лучше не придумали пока. Ну или я не в курсе.

Мне реалтайм надо. Где-то 1-2гб в минуту
Можно попробовать окунуться в омут сетевых файловых систем.

Roman
21.05.2016
13:51:04
По-мойму ничего лучше не придумали пока. Ну или я не в курсе.
Давай посчитаем: 10тб надо разложить, допустим, на 10 площадок

Dmitrii
21.05.2016
13:51:10
Или из говна и палок^W^W^Winotify и rsync слепить наколенке.

Roman
21.05.2016
13:57:26
glusterfs
Что glusterfs?

Никита
21.05.2016
13:57:40
Что glusterfs?
Сетевая файловая система

Google
Никита
21.05.2016
13:58:00
https://ru.wikipedia.org/wiki/GlusterFS

Roman
21.05.2016
13:59:50
Сетевая файловая система
Я знаю. Более того, моими усилиями она была выпилена из одной организации

Roman
21.05.2016
14:00:08
Сетевая файловая система
Чем она мне поможет?

Чем не устроила?
Скоростью работы

Никита
21.05.2016
14:00:29
Чем она мне поможет?
Репликация между твоими площадками

Roman
21.05.2016
14:00:40
>мне надо где-то 300 мб надо перемещать с мастера на 7-10 площадок за 3-5 секунд

Dmitrii
21.05.2016
14:00:58
Так че rsync так не может?

Pavel
21.05.2016
14:01:15
Может постгрес прикрутить для этих вещей? ?

Roman
21.05.2016
14:01:20
Никита
21.05.2016
14:01:32
https://www.howtoforge.com/automatic-file-replication-mirror-across-two-storage-servers-with-glusterfs-3.2.x-on-ubuntu-12.10

https://www.gluster.org/community/documentation/index.php/Gluster_3.1:_Configuring_Distributed_Replicated_Volumes

Никита
21.05.2016
14:02:29
У меня нихрена не two
а что мешает сделать seven?

Но там четное кол-во нужно

Magistr
21.05.2016
14:03:21
мультикаст или торенты или что там яндекс пилил

Roman
21.05.2016
14:03:27
Короче, на мастере гигабит

Dmitrii
21.05.2016
14:04:13
мультикаст или торенты или что там яндекс пилил
Торреном мне кажется за 5 сек не сольешь

Google
Roman
21.05.2016
14:04:32
Для 300мб и 10 зеркал в случае rsync через интерфейс должно пробежать немного меньше 3гб

При том что гигабайт через 1gbe пробежит за 10с

Я пробовал btsync/syncthing, но они не успевают и даже в локалке на 10gbe не разгоняется более 32мб/с

При том, что данные в обои случаях были на tmpfs

Magistr
21.05.2016
14:09:49
mrsync даже есть реализация мультикастовая

Roman
21.05.2016
14:17:57
Max
21.05.2016
14:45:02
ну, как бы логично на много зеркал делать sync мультикастом

Я пробовал btsync/syncthing, но они не успевают и даже в локалке на 10gbe не разгоняется более 32мб/с
почему? Что-то не так в этом рассказе. Или с дисков отдается медленно или проблемы с tcp окном

емкость сети какая?

если tcp есть, то копать в сторону mss и congestion

Roman
21.05.2016
14:52:10
linux, cc=htcp

Roman
21.05.2016
14:52:42
Пробовал разные варианты

И задирать so_sndbuf/so_rcvbuf пробовал

Max
21.05.2016
14:55:56
нене, емкость = 10gbit*RTT

RTT сколько?

почему htcp?

да, буферы правильно прибавил, конечно

mtu сколько? jumbo?

Google
Max
21.05.2016
15:05:56
нет ли шифрования

Maksim
21.05.2016
15:29:16
Кто использует letsencrypt? Кто отказался от обычных сертификатов?
Мы в флюссоник встроили для админки летценкрипт - пользователи довольны

Recluse
21.05.2016
15:30:57
Alexander
21.05.2016
15:32:52
Dmitrii
21.05.2016
15:33:12
Только Class 1.

Artur
21.05.2016
15:33:23
Ребза, кто-нибудь использует в проде nanomsg?

Admin
ERROR: S client not available

Alexander
21.05.2016
15:35:37
Только Class 1.
мне ECC хочется

https://community.letsencrypt.org/t/elliptic-curve-cryptography-ecc-support/34#!

Uncel
21.05.2016
15:42:15
Alexander
21.05.2016
15:44:37
ну да, можно было бы

но пока они это делать не будут, мне кажется

а вот ЕСС обещали в 2016 как бы

и сейчас я пока использую Comodo ради этого

Dmitrii
21.05.2016
15:46:05
Зачем тебе ECC?

Alexander
21.05.2016
15:46:21
wildcard еще заверните
там есть скрипт, который автоматизирует получение сертификатов, но у него есть лимиты, так что если поддоменов немного - всё решаемо

Зачем тебе ECC?
потому что я гик)

Dmitrii
21.05.2016
15:47:08
потому что я гик)
Ну значит жди еще 2 года. Пока для нормальных людей запиливают действительно нужные фичи )

Alexander
21.05.2016
15:48:00
Ну значит жди еще 2 года. Пока для нормальных людей запиливают действительно нужные фичи )
что-то мне подсказывает, что нормальные люди (не гики) letsencrypt сейчас использовать не будут

Google
Dmitrii
21.05.2016
15:48:09
Why?

Alexander
21.05.2016
15:49:02
Why?
ну просто новая технология и странно себя ведёт, они хотят чтобы админ поставил на сервер какие-то скрипты с их стороны и с их помощью автоматически получал сертификаты и правил конфиг nginx

это не всем нормальным админам понравится

я это допускаю как нормальное поведение только потому что умею работать с Docker

Dmitrii
21.05.2016
15:49:40
Не надо ничего ставить себе на сервер

Alexander
21.05.2016
15:49:56
я просто в отдельный контейнер сделаю это всё и оно будет мне в volume генерить

Dmitrii
21.05.2016
15:50:06
Есть отличный letsencrypt sh

У меня на моем проекте - 35 доменов, все под SSL.

И чот я рад, что мне больше не надо всем этим заниматься.

Alexander
21.05.2016
15:51:42
у него версия v0.1.0

ну не знаю, насколько это "нормальным" админам понравится)

Dmitrii
21.05.2016
15:52:13
Пиздить надо тех, кто будет сопротивляться.

Alexander
21.05.2016
15:52:19
думаю, нормальные админы не начнут это юзать, пока в дебиане не будет официального пакета

Dmitrii
21.05.2016
15:52:34
Это как раз ненормальные админы.

Alexander
21.05.2016
15:52:46
но я всё-таки жду удовлетворения своих гиковских хотелок (ЕСС) в этом или в следующем году))

Страница 187 из 4568