Может я неконкретно задал вопрос, но у меня по факту цель вытянуть из мускуля все, что он может дать на конкретном железе. И тут я бы не сказал, что это максимум 5-10%. Поигравшись с конфигом мы уже достигли двойного ускорения.

Ты ошибаешься. Есть штук 5 настроек, без которых СУБД ПРОСТО НЕ РАБОТАЮТ ВООБЩЕ, остальные влияют в районе +- 5%

все исходники должны храниться в VCS без вариантов, но хранимки хранятся в базе, иначе никак, я не знаю как их хранить не в базе

Пишешь прооцедуру , кладёшь в VCS. Заливаешь в БД, проверяешь, что работает. Надо исправить. Делаешь checckout из VCS, меняешь, заливаешь в БД , проверяешь, заливаешь в VCS, и ВНИМАНИЕ! ЗАЛИВАЕШЬ В БД на продакшн.

Пишешь прооцедуру , кладёшь в VCS. Заливаешь в БД, проверяешь, что работает. Надо исправить. Делаешь checckout из VCS, меняешь, заливаешь в БД , проверяешь, заливаешь в VCS, и ВНИМАНИЕ! ЗАЛИВАЕШЬ В БД на продакшн.

Если ты и это не всосёшь, мне уже нечего сказать... извини.

Пишешь прооцедуру , кладёшь в VCS. Заливаешь в БД, проверяешь, что работает. Надо исправить. Делаешь checckout из VCS, меняешь, заливаешь в БД , проверяешь, заливаешь в VCS, и ВНИМАНИЕ! ЗАЛИВАЕШЬ В БД на продакшн.

пиздец бред, т.е. я храню в VCS и при каждом изменении заново пересоздаю ее в базе? это ебаный пиздец, ты будешь переодически забывать это сделать и все сломаешь нахуй

пиздец бред, т.е. я храню в VCS и при каждом изменении заново пересоздаю ее в базе? это ебаный пиздец, ты будешь переодически забывать это сделать и все сломаешь нахуй

Сравни с PHP или Python, ты точно так же заливаешь рабочий код на продакшн

пиздец бред, т.е. я храню в VCS и при каждом изменении заново пересоздаю ее в базе? это ебаный пиздец, ты будешь переодически забывать это сделать и все сломаешь нахуй

Ну, сломаешь — тебя уволят... В следующий раз будешь аккуратнее.

Сравни с PHP или Python, ты точно так же заливаешь рабочий код на продакшн

одно дело контроль версий, а другое дело руками копировать каждый раз код процедуры в какой-нибудь навикат и запускать

Ну, сломаешь — тебя уволят... В следующий раз будешь аккуратнее.

я лучше вообще это гавно не буду юзать))

только запросы, только хардкор

https://bdrouvot.wordpress.com/2016/03/05/graphing-oracle-performance-metrics-with-telegraf-influxdb-and-grafana/

Мне не нужно мерить перфоманс оракла мне нужны данные из него...

одно дело контроль версий, а другое дело руками копировать каждый раз код процедуры в какой-нибудь навикат и запускать

Что такое навикат я не знаю, но деплоелку для БД можно написать достаточно легко, или использовать готовые.

А может хотите графану на оракл нацепить?

Нету датасорса прямого, был бы - сделал

Нету датасорса прямого, был бы - сделал

Эммм, ты ж сказал есть табличка?

Мне не нужно мерить перфоманс оракла мне нужны данные из него...

Если нужна визуализация данных то есть куча других инструментов

пиздец бред, т.е. я храню в VCS и при каждом изменении заново пересоздаю ее в базе? это ебаный пиздец, ты будешь переодически забывать это сделать и все сломаешь нахуй

Это автоматизируют такие люди как я

Эммм, ты ж сказал есть табличка?

Датасорс в графане - плагин, табличка в оракле, задача её визуализировать графаной

И проблема в том, что гре не может найти схему, где она лежит.

Если нужна визуализация данных то есть куча других инструментов

Нет меня именно графана интересует, в целевом решении после замены бочки дерьма (оракла) уже есть графана

Глупо использовать ещё 1 визуализатор

Нет меня именно графана интересует, в целевом решении после замены бочки дерьма (оракла) уже есть графана

Тогда меняй логику проксирования, например, дблинк

Правда схемы не будет...

Точнее не известна

Либо OTP

Через ETL

Глупо использовать ещё 1 визуализатор

Глупо городить огород из гавна и палок

Да и чет эта графана так себе.

Да и чет эта графана так себе.

+1

А что эта графана не может напрямую к Оракулу ходить?

Датасорс в графане - плагин, табличка в оракле, задача её визуализировать графаной

Хз, ничем помочь не могу. Только курить tutorial.

А что эта графана не может напрямую к Оракулу ходить?

Да там какая то поделка школьников. Рисует графики линейные.. убогость

Визуализация на уровне недомониторинга

И проблема в том, что гре не может найти схему, где она лежит.

Похоже да, но я не понимаю куда копать.

А что эта графана не может напрямую к Оракулу ходить?

Конечно нет, они в пропиаритарщину не ходят

Там столько датасоурс плагинов, что не верится, что нет для оракла или универсального для JDBC/ODBC

А что эта графана не может напрямую к Оракулу ходить?

Мне кажется может, просто надо сильно колдовать, возможно что-то купить/запилить

Конечно нет, они в пропиаритарщину не ходят

Для IBM там висит какой-то датасоурс, для MS тоже несколько.

Похоже да, но я не понимаю куда копать.

Я тут поковылял сверху fdw, они там какой-то сервер создают, потом маппинг...

Да там какая то поделка школьников. Рисует графики линейные.. убогость

Действительно :) всего каких то 0,5 PB данных в оракле, с 6 млн инсертами в секунду, курсовая ага.

Ты это все сделал?

Конечно нет, они в пропиаритарщину не ходят

В вертику ходят ?

Действительно :) всего каких то 0,5 PB данных в оракле, с 6 млн инсертами в секунду, курсовая ага.

Угу и потому нужно срочно отказаться от оракла и главное что бы бесплатную графану понимало

Четаржу

Действительно :) всего каких то 0,5 PB данных в оракле, с 6 млн инсертами в секунду, курсовая ага.

@AlexCAD, ну вот, обидел человека...

Тогда меняй логику проксирования, например, дблинк

Куда дблинк то? Мне нужна Система на котором конце которая совместима с графаной...

@AlexCAD, ну вот, обидел человека...

Я такой. Ага.

Угу и потому нужно срочно отказаться от оракла и главное что бы бесплатную графану понимало

Отказ от оракла нужен по другим причинам, не из-за графаны, а из-за убогости и медлительности

@AlexCAD, ну вот, обидел человека...

Человек говорит о 0.5 петабайт данных. Но при этом оракл гавно. А графана бесплатно и круто

Я такой. Ага.

"Токсичное комьюнити" ...

Человек говорит о 0.5 петабайт данных. Но при этом оракл гавно. А графана бесплатно и круто

Главное, как мы можем помочь этому человеку... Я уже сделал всё, что мог...

Главное, как мы можем помочь этому человеку... Я уже сделал всё, что мог...

Пристрелить?

Человек говорит о 0.5 петабайт данных. Но при этом оракл гавно. А графана бесплатно и круто

Да говно, тк мне нужно считать 2PB+ налёту и ораклу плохо от подобных объемов

Да говно, тк мне нужно считать 2PB+ налёту и ораклу плохо от подобных объемов

А кому хорошо?

А кому хорошо?

Кликхаусу

Кликхаусу

ничего что это из разных категорий СУБД?)

Куда дблинк то? Мне нужна Система на котором конце которая совместима с графаной...

Совместима ? такое громкое слово для графаны, что аж из коробки на дефолте начинаешь трахаться...

Я за попкорном

А, я понял, тут у вас сильно энтепрайз чатик, ок, собственно у меня была такая же проблема и такая же реакция при разговорах о свопе оракла.

А, я понял, тут у вас сильно энтепрайз чатик, ок, собственно у меня была такая же проблема и такая же реакция при разговорах о свопе оракла.

Раскажи нам еще про 2пб налету

Послушаем мастера

Ок, даже интересно, и какие СУБД тут уважают?

Пишешь прооцедуру , кладёшь в VCS. Заливаешь в БД, проверяешь, что работает. Надо исправить. Делаешь checckout из VCS, меняешь, заливаешь в БД , проверяешь, заливаешь в VCS, и ВНИМАНИЕ! ЗАЛИВАЕШЬ В БД на продакшн.

Извините, но тут я просто заорал =))

Ок, даже интересно, и какие СУБД тут уважают?

Про монго лучше не упоминать...

А, я понял, тут у вас сильно энтепрайз чатик, ок, собственно у меня была такая же проблема и такая же реакция при разговорах о свопе оракла.

чувак, ты хоть дай вводные, что за 2пб данных, почему тебе нужна колончатая субд и именно кликхаус, хотя их много разных и т.д )

Иначе разлив говна будет огромен

Я потом попробую найти место на глобусе куда 2петабайта могут прилетать. Уверен таких мест не много

ERROR: S client not available

Ок, даже интересно, и какие СУБД тут уважают?

дело не в СУБД. а в том какую задачу с ее помощью решают...

Я потом попробую найти место на глобусе куда 2петабайта могут прилетать. Уверен таких мест не много

Метрики всякие...

чувак, ты хоть дай вводные, что за 2пб данных, почему тебе нужна колончатая субд и именно кликхаус, хотя их много разных и т.д )

Метрика с оборудования

Например Гидрометцентр.

Да говно, тк мне нужно считать 2PB+ налёту и ораклу плохо от подобных объемов

2PB+ — переведи...

2PB+ — переведи...

Более 2х петабайт

2PB+ — переведи...

В каком смысле? Объём метрик за год - 2 PB

Метрики всякие...

Представь канал для 2 петабайт ... идем искать

А, я понял, тут у вас сильно энтепрайз чатик, ок, собственно у меня была такая же проблема и такая же реакция при разговорах о свопе оракла.

о ЧЁМ?

В каком смысле? Объём метрик за год - 2 PB

А в штуках ?

Сейчас оракл считает данные агрегируя, теряя исходные (из-за убогости и медлительности) задача - хранить сырьё и считать по нему

Представь канал для 2 петабайт ... идем искать

Данные могут поступать из нескольких хранилище сырой инфы (дата озеро).

Сделали пилот на CH - отлично себя чувствует, ещё Vertica смотрели...

Сейчас оракл считает данные агрегируя, теряя исходные (из-за убогости и медлительности) задача - хранить сырьё и считать по нему

Импалу посмотри еще, сырье можно туда заливать, хранить в бинарном паркете

Импалу посмотри еще, сырье можно туда заливать, хранить в бинарном паркете

Смотрел - медленнее как не странно, тестировал на объемах около 10 терабайт

Короче чувак прав. Заебывать его не вижу смысла. А по сути, курить туториалы по fdw

Ну или ждать конца рабочего дня

Данные могут поступать из нескольких хранилище сырой инфы (дата озеро).

Уже видишь это обьем за год.

А не "налету"

А не "налету"

На лету - считать, а не сохранять 2PB

Что бы без пред-агрегации

Более 2х петабайт

Он данные в байтах считает? ОК, положим у меня в БД лежать DVD диски, это по 4 Гб один. 2 ПебиБайта данных это будет порядка 530 тысяч DVD -дисков. ЭТО ОЧЕНЬ МАЛО!

На лету - считать, а не сохранять 2PB

Так и причем тут графана? Из колоночных вон хадупы. И визуализаций к ним хоть в виде 3д крестиком

Он данные в байтах считает? ОК, положим у меня в БД лежать DVD диски, это по 4 Гб один. 2 ПебиБайта данных это будет порядка 530 тысяч DVD -дисков. ЭТО ОЧЕНЬ МАЛО!

Зачем ты мне это рассказываешь?

Ты попал под раздачу...

Зачем ты мне это рассказываешь?

Затем что похоже нам просто парят мозг

Зачем ты мне это рассказываешь?

Извини

Смотрел - медленнее как не странно, тестировал на объемах около 10 терабайт

ну возможно кх и лучше под метрики с оборудования будет, тем более если джойны не нужны

Так и причем тут графана? Из колоночных вон хадупы. И визуализаций к ним хоть в виде 3д крестиком

Хадуп медленный, после запроса графика можно курить пачку идти

Ну я вообщем то понял, что тут все не любят кх и любят оракл, если никто не знает как сделать связку (и какие грабли могут быть у меня) при связи Postgres <—-> Oracle, то видно я чатиком ошибся

Хадуп медленный, после запроса графика можно курить пачку идти

Пытаюсь представить себе график в котором бы ВНЕЗАПНО потребовалось больше пары десятков тысяч точек...

Пытаюсь представить себе график в котором бы ВНЕЗАПНО потребовалось больше пары десятков тысяч точек...

Вопрос не в количестве точек а в сложности агрегации/обогащения