@spbpython

Страница 675 из 785
Некто
25.02.2018
00:05:36
Я сутки без сна уже

Denis
25.02.2018
00:05:42
"Кто-то в интернете не прав!"

Roman
25.02.2018
00:05:45
А у них так и есть
https://github.com/intel-go/nff-go

Некто
25.02.2018
00:05:50
Пока вы срач про го не начали

Google
Некто
25.02.2018
00:05:54
Меня вырубало

Alex
25.02.2018
00:05:57
могу еще накинуть, мне тут недавно предложили на FPGA ускорять всякие штуки в СУБД =)

Roman
25.02.2018
00:06:00
и на этом стоит завершить

Nikolay
25.02.2018
00:06:11
https://github.com/intel-go/nff-go
Экспериментальные карманные проекты у всех есть

Alex
25.02.2018
00:06:29
ну это не лишено смысла.

Nikolay
25.02.2018
00:06:48
и на этом стоит завершить
Да, пожалуй :) питон сила, но но иногда тоже можно взять

Alex
25.02.2018
00:06:53
и асики под всякие сортировки. сопроцессор для БД, ваще ок

Nikolay
25.02.2018
00:07:03
ну это не лишено смысла.
Мне рассказывали про такой проект

Аппаратная реляционная база

С SQL на fpga

Там тупо высчитывались смещения на дисках в блобах, и любой запрос занимал доли секунды

Даже сложный

Google
Alex
25.02.2018
00:08:27
я слышал что MS и Oracle в эту сторону смотрят

да как бы доступ на диске не самая затратная операция

Roman
25.02.2018
00:08:48
и асики под всякие сортировки. сопроцессор для БД, ваще ок
зачем? это имеет какой-то реальный профит?

Alex
25.02.2018
00:09:03
зачем? это имеет какой-то реальный профит?
полночный чатик - полночный бред :)

самая. вот прямо очень.
это вот как ? либо последовательное чтение либо ты вычитываешь по индексу.

Alex
25.02.2018
00:10:12
в случае с постгресом скорее упрешься в проц какой нить

Некто
25.02.2018
00:10:29
Вы сразу решите

Нужна ли транзакционность

В вашем разговоре

Alex
25.02.2018
00:10:51
а какая разница ссд или сата ? по IOPS либо влазишь либо нет

Некто
25.02.2018
00:10:52
Или только чтение

Roman
25.02.2018
00:10:57
Вы сразу решите
)))) mongodb is webscale!!!

Некто
25.02.2018
00:11:03
А то как с го будет

Alex
25.02.2018
00:11:29
ну монга лучше хранит данные, да, не как постгрес из externalа всякий jsonb читает

Roman
25.02.2018
00:11:38
Некто
25.02.2018
00:12:01
Сейчас прибегут биг дата и будут говорить что все сосет раз про запись ничего - пишите в hdfs

:D

Alex
25.02.2018
00:12:08
ну есть у тебя две таблицы по 200 мегабайт условно. и гиг озу под базу :)

Google
Некто
25.02.2018
00:12:23
200 это мало

Alex
25.02.2018
00:12:28
так или иначе после подьема всех страниц в память пофигу

Некто
25.02.2018
00:12:31
Тут и Мария справится

Бери больше

Alex
25.02.2018
00:12:38
я понимаю что мало :)

Некто
25.02.2018
00:12:56
Сразу миллион строк

И денормализация

Alex
25.02.2018
00:13:02
это всего гиг

Roman
25.02.2018
00:13:04
Некто
25.02.2018
00:13:39
И вертики

Alex
25.02.2018
00:13:55
:D

Некто
25.02.2018
00:14:00
Скажут что все зависит от типа данных

Alex
25.02.2018
00:14:03
Некто
25.02.2018
00:14:36
Кстати

Боль про постгрес

Мы в проекте используем Марию

Alex
25.02.2018
00:15:00
просто в жизни всякое бывает… и иногда ты не можешь взять и вставить SSD в сервер :)

Некто
25.02.2018
00:15:19
Потому что цитирую ‘постгрес непонятная российская хрень’

Roman
25.02.2018
00:15:21
можно то можно
просто поднять страницы с диска - это вечность на фоне всего остального.

Google
Некто
25.02.2018
00:15:31
AE со стороны клиента

:D

Alex
25.02.2018
00:15:57
это понятно что чтение не бесплатное

Некто
25.02.2018
00:16:24
Мы долго угорали когда нам пришёл ответ что инжиниринг клиента на знает как жить с постгресом и Мария надежнее

Alex
25.02.2018
00:17:37
но как бы “Там тупо высчитывались смещения на дисках в блобах, и любой запрос занимал доли секунды” это если пару таплов выбрать, в случае пачки данных ты в любом случае на вычитку данных потратишь больше времени чем на их поиск на диске

ну постгрес не все умеют

впрочем как и Марию

Alex
25.02.2018
00:18:57
самособой поэтому давайте начнем с простого - во все базы завезем Direct I/O ? )

Admin
ERROR: S client not available

Некто
25.02.2018
00:19:05
Храни в памяти и не пиши на диск

Некто
25.02.2018
00:19:21
Раз уж мы все равно ни о чем

:D

Alex
25.02.2018
00:19:25
зато гарантированное ускорение)

в памяти хранить ваще клево :) жаль в память не все помещается =(

Некто
25.02.2018
00:19:58
))

Roman
25.02.2018
00:19:59
Храни в памяти и не пиши на диск
нуу... я когда в мтс работал, у нас была бд на 18Тб

Некто
25.02.2018
00:20:22
Началось)

Google
Некто
25.02.2018
00:20:27
:D

Roman
25.02.2018
00:20:28
проблема в том, что машин с таким объемом памяти на рынке не было =(

Некто
25.02.2018
00:20:37
Речь шла про 200 мб

))))

Alex
25.02.2018
00:20:47
можно поставить 18 сервером с памятью по терабайту

делоф то )

200 мегабайт для примера

Некто
25.02.2018
00:21:45
200 мегабайт для примера
Не отмазывайся теперь от них

Roman
25.02.2018
00:22:00
Речь шла про 200 мб
это смотря сколько памяти у тебя )

Alex
25.02.2018
00:22:25
да мне то что… мне вообще эти все ссд и прочее недоступно :) 200 IOPS на все про все и 1 мегабайт скорость записи на диск )

Roman
25.02.2018
00:22:25
вообще, сейчас можно взять nvdimm и радоваться жизни )

Alex
25.02.2018
00:22:49
так что куда мне до терабайтов :)

Некто
25.02.2018
00:23:09
:)

Alex
25.02.2018
00:23:22
это в вашем мире можно взять и купить SSD. в моем нет :)

Некто
25.02.2018
00:23:34
А куда делся Николай?

Тихо свинтил

))

Alex
25.02.2018
00:24:04
спать пора

Некто
25.02.2018
00:24:11
Да

Alex
25.02.2018
00:24:13
не завезли :)

гос. проекты, бессмысленные и беспощадные

Некто
25.02.2018
00:25:19
Электронное правительство? Сделайте нам форму на 200 полей!

Страница 675 из 785