@ru_python

Страница 2200 из 9768
Nikolay
10.02.2017
23:11:45
для серьезной системы

Rocket
10.02.2017
23:12:14
Я могу себе представить ради чего такая жертва...

Скорость.

Google
Rocket
10.02.2017
23:12:48
Решение типа Fire and forget

Для многих кейсов это приемлимое поведение.

Nikolay
10.02.2017
23:13:26
это должно быть опционально

Rocket
10.02.2017
23:13:52
Окей, а что тогда, если не кролик?

Nikolay
10.02.2017
23:13:54
“ребята, мы тут обернули вам TCP-сокет, правда, он теперь теряет сообщения чаще гораздо, но это же ничего, правда?”

Окей, а что тогда, если не кролик?
ну, я вот redis использовать пытаюсь

но он не умеет в pubsub

Rocket
10.02.2017
23:14:54
но он не умеет в pubsub
Как это не умеет, если он умеет? ?

Nikolay
10.02.2017
23:15:04
pubsub умеет

round-robin по нему не умеет

Rocket
10.02.2017
23:15:52
А, ну...

Storage+zmq как сигнал?

Google
Nikolay
10.02.2017
23:16:43
не пробовал

Rocket
10.02.2017
23:16:47
Ну и фиг с ним, что 1/1000 не дошло... Воркер все равно заберет потом и обработает.

Nikolay
10.02.2017
23:19:23
если нет относительно гарантированной доставки - сложно конец работы отслеживать

Rocket
10.02.2017
23:19:30


На стеке вот полный ответ на вопрос "почему".

Nikolay
10.02.2017
23:19:58
у меня на входе поток, я его раунд-робином раздаю на воркеров

и я понятия не имею, сколько у меня на входе сообщений, пока они не закончатся

ну, это отмазка в духе “они не смогли сделать это опциональным, поэтому жрите то, что есть"

Rocket
10.02.2017
23:21:57
Или производительность или надежность.

Они решили первую задачу.

А зачем тебе round robin?

Nikolay
10.02.2017
23:23:10
у меня вычислительная задача

я данные блоками раздаю на ноды

Rocket
10.02.2017
23:23:19
Какая разница как часто какой воркер забирает задачи?

Если он занят, заберет другой

При условии, что они одинаковые конечно.

Но если разные - то для каждого нужна своя очередь.

Nikolay
10.02.2017
23:25:32
мне нет разницы, какой как часто, но ты сейчас описываешь балансировку, а мне бы хоть тупо раунд-робин

и вот часть блоков для обработки тупо терялась по дороге

Rocket
10.02.2017
23:26:15
Тогда данные отдельно, сигнал отдельно...

Google
Nikolay
10.02.2017
23:26:38
Тогда данные отдельно, сигнал отдельно...
ну вот да, только если так, но тогда все упрется в мьютекс на чтение из хранилища

Rocket
10.02.2017
23:27:48
Продюсер пускай решает на какую ноду отправить задачу.

Nikolay
10.02.2017
23:28:07
как? каждый воркер читает по смещению?

тогда нужно что-то типа кафки

Rocket
10.02.2017
23:29:22
"Многоуважаемый воркер 3, а не соблаговолите ли обработать чанк с айтемом 5366337?"

Воркер накидывает соточку и идет в базу за соответствующим айтемом.

Ну и арбитра сбоку, который будет пинать воркер, если тот айтем почему то не забрал.

Nikolay
10.02.2017
23:31:20
"Многоуважаемый воркер 3, а не соблаговолите ли обработать чанк с айтемом 5366337?"
это тогда продюсер должен знать явно, сколько у него воркеров в каждый момент времени

Rocket
10.02.2017
23:31:20
Тогда можно и без мьютекса

Nikolay
10.02.2017
23:31:27
да еще и повторять, если они отмирают

тоже не катит

Rocket
10.02.2017
23:32:40
это тогда продюсер должен знать явно, сколько у него воркеров в каждый момент времени
Ну или арбитра повысить до балансира и общаться уже с ним. "Ей, прораб, организуй обработку айтема такого то". Ну он уже дальше сам решает кого нагрузить.

Nikolay
10.02.2017
23:34:26
это мое лицо через неделю после написания такой системы

Rocket
10.02.2017
23:36:28
Видел я другое видео с этой же дамой... Она там весело на балалайке играла...

@Enchantner, а ты с переосмысленной базой данных имел опыт?

Nikolay
10.02.2017
23:38:31
@Enchantner, а ты с переосмысленной базой данных имел опыт?
где что-то нормализовано, а что-то нет, например? :)

или где частично в блоб-полях json’ы хранятся?

Nikolay
10.02.2017
23:39:26
а

Google
Nikolay
10.02.2017
23:39:29
нет, не пробовал

Silent house
10.02.2017
23:48:55
Nikolay
10.02.2017
23:50:14
Ты перепутал, это была не она же.
да, эта в основном только в дотан долбится

Rocket
10.02.2017
23:50:29
Ты перепутал, это была не она же.
Может быть, я в этом не спец.

Admin
ERROR: S client not available

Silent house
10.02.2017
23:51:07
Может быть, я в этом не спец.
То была нанятая порно звезда для стримов, ты же про ту, которая забыла типа вебку вырубить?

Rocket
10.02.2017
23:52:56
То была нанятая порно звезда для стримов, ты же про ту, которая забыла типа вебку вырубить?
Угу. Видел коуб смешной. А так, я не разбираюсь в современных играх и сервисах на их основе.

Duke Nukem - последнее во что играл серьезно. Еще контра и квак, но толком в них не играл. И все это было очень давно.

А вот игру совсем раннего детства - supaplex - до сих пор пройти не могу.

Nikolay
10.02.2017
23:55:28
я до сих пор из детских игр периодически переигрываю в The Legend of Kyrandia

53r63rn4r
11.02.2017
00:00:05
Что за баба порностримерша?

http://pornoed.com/1969-strimersha-novapatra-zabyla-vyklyuchit-strim-i-nachala-masturbirovat.html

Нашел

Ivan
11.02.2017
05:07:47
Забавно, сообщения шли-шли в канал с равномерной периодичностью, а после ссылки на сайт с порнушкой все угомонились :) Совпадение?

Artem
11.02.2017
05:41:18
тем временем разработка питона переехала на гитхаб https://cpython-devguide.readthedocs.io

Pavel
11.02.2017
06:10:37
Artem
11.02.2017
06:10:49
вчера, вот письмо https://mail.python.org/pipermail/python-dev/2017-February/147341.html

ого, вот это демпинг https://blog.online.net/content/images/2017/02/Screen-Shot-2017-02-03-at-10.19.55-AM.png

scaleway если что

Google
Dmitriy
11.02.2017
07:47:30
7го числа в рассылке пришло "Introducing Workload Intensive Cloud Servers"

Rocket
11.02.2017
07:50:53
scaleway если что
Предупреждаю. Эти черти биллили мою карту без спроса на ~1 евро покуда я не использовал никаких ресурсов.

И цены у них такие не просто так - у них там Атомы используются и хранилище подключено по сети.

Artem
11.02.2017
07:51:52
оу, спасибо, буду знать

Rocket
11.02.2017
07:52:22
UnixBench валится на многопоточном тесте на 2-ядерной машине.

ip адрес был не освобожден?
Первый месяц. Потом я его освободил.

Зашел пару дней назад, закэнсилил акк.

В биллинге что-то про трафик написано. О каком трафике идет речь - не понятно.

После кэнсела пришло письмо, что я сам дурак и не освободил какие то ресурсы. Но какие именно так и не смогли назвать.

Dmitriy
11.02.2017
07:56:16
Снэпшоты могли быть или образы

Rocket
11.02.2017
08:03:14
Везде нули

Не, они мож чего то куда то запрятали, но у меня там была 1 машина несколько часов

После ее удаления и удаления образа - остался только айпи, его я удалил через месяц. Что там еще остаться от неё могло и где это искать - понятия не имею

Снимков я не делал.

87776
11.02.2017
08:44:37
посоны

Страница 2200 из 9768