
Bsod
12.06.2017
05:15:38

Ivan
12.06.2017
05:16:30
Или тоже маловато будет?

Bsod
12.06.2017
05:17:23
смотря сколько времени ты хочешь хранить подробные данные

Google

Bsod
12.06.2017
05:17:30
что по моему дичь :D

Ivan
12.06.2017
05:17:52
Ну грязные я буду хранить сутки и дальше уже обрабатывать
Но за эти сутки там будет миллионов 50 записей)
Ога
Хотя я с утра туплю
0.5х2000
Это же миллиард
Даже не смешно
По весу это не много, кстати
80х2000
~160гб

Bsod
12.06.2017
05:24:59
per day
надо еще их потом забрать и обработать

Google

Ivan
12.06.2017
05:28:25
Ну обрабатывать на лету их не сложно

Sun
12.06.2017
05:28:35
А мускул пупок не порвёт от таких нагрузок?
Я помню как-то попытался за пару часов налить в него тестовых данных на 20 гигов и ему сильно поплохело

Ivan
12.06.2017
05:28:56
А вот если потом этот срез парсить...

Bsod
12.06.2017
05:31:19
Давай в монгу

Sun
12.06.2017
05:31:49

Ivan
12.06.2017
05:32:00
~20к записей в секунду
Пойду ка я в канал big data вопросы задавать...

Bsod
12.06.2017
05:33:44

Ivan
12.06.2017
05:35:27
Я не буду это в монге держать

Sun
12.06.2017
05:36:53
Ну, в прошлый раз, когда мне в руки попала монга, там была задача держать и обрабатывать 7ТБ данных в день. И умные люди говорили тогда, что им решительно непонятно, зачем люди во все щели пихают монгу, когда есть средства лучше и быстрее.
В качестве примера они приводили задачу сбора и анализа информации с трекеров в Меге
Она даже не мне в руки попала, а рядом пролетала
Я сейчас боюсь напиздеть какие именно аргументы были приведены, но они тогда меня убедили в том что для такой задачи идеален постгресс+мемкеш гигов на тридцать

Ivan
12.06.2017
05:39:31
И че?
Не зашло?

Sun
12.06.2017
05:40:06
Зашло на ура
Монгу выпилили
Просто люди часто сильно ошибаются в трактовке понятия "бигдаты"
Эти пацаны тогда шутили, что правильная бигдата — это столько даты, сколько ты не сможешь унести на себе на современных носителях

Ivan
12.06.2017
05:43:18
Хехе

Google

Sun
12.06.2017
05:45:12
Я так прикинул: на тот момент самая большая microSD была на тот момент на 64 гига. Она весит ~2 грамма. Унести я могу килограмм семьдесят. 3500*64=224ТБ. Да, пожалуй, это уже бигдата

Bsod
12.06.2017
05:47:08
Кек
Интересно сколько это в 6тб винтах получится

Ivan
12.06.2017
05:49:40
А через пару месяцев мы ещё биконы запилим и нафигацию

Sun
12.06.2017
05:50:30
Уу. Вот эти самые беконы — это боль

Ivan
12.06.2017
05:50:52

Sun
12.06.2017
05:51:07
Для сетевика это боль

Bsod
12.06.2017
05:51:24
А в чем там боль? Распихал себе по местам и пусть торчат. Не?

Sun
12.06.2017
05:51:35
Овер 9к маяков
Сеть в ахуе

Bsod
12.06.2017
05:51:45
а то только читал но руками не трогал

Ivan
12.06.2017
05:52:13

Ivan
12.06.2017
05:52:22
Но 9к это не много
Они автономны
И в сеть вообще не лезут

Bsod
12.06.2017
05:53:03
стоят, фонят
:)

Ivan
12.06.2017
05:54:04
Именно
И данных там как от сниферов

Google

Ivan
12.06.2017
05:54:44
Если не меньше

Admin
ERROR: S client not available

Sun
12.06.2017
05:59:35
Сбор данных о перемещениях

Ivan
12.06.2017
06:01:10
Так что это ерунда
Трафика от остальных служб в телефоне в сотни раз больше

Sun
12.06.2017
06:27:35
/ban
Чёрт, не работает. Позовите главного!

Ivan
12.06.2017
06:30:44
@RShishkin прибей спам

wildmoon
12.06.2017
06:50:46
В основном он занят поиском ответа на вопрос, как мы тут живем)
Рома, не ходи на тверскую, группа останется без админа.

Ivan
12.06.2017
06:53:31

Roman
12.06.2017
06:55:18
Я между прочим в Орле

wildmoon
12.06.2017
06:57:14
Воу воу. Чего тебя занесло? В края зюганова и строева?
В Орле появилось что-то интересное? Кофе?)

nimbo78 (E14/MSK/NN)
12.06.2017
07:10:05

Ivan
12.06.2017
07:10:19
Пасиба, почитаю
Но хочется своё

Google

nimbo78 (E14/MSK/NN)
12.06.2017
07:11:32
Но хочется своё
Ну это просто точки доступа с дохера апи, рулить ты сам уже всем будешь))))

Ivan
12.06.2017
07:12:04

nimbo78 (E14/MSK/NN)
12.06.2017
07:12:31

Ivan
12.06.2017
07:13:02
Просто нужно что то ещё в премиум сегмент)

Ruslan
12.06.2017
07:32:11
Написали бы что именно

Ivan
12.06.2017
07:32:38

Ruslan
12.06.2017
07:32:51
Нет, но я в недоумении

Ivan
12.06.2017
07:32:51
Что тут писать то

Ruslan
12.06.2017
07:33:17

Ivan
12.06.2017
07:33:26
Предвидя следующий вопрос, уточню что именно
Вы неправильно настраиваете микротик