Мне на вкус приятнее, т.к. избавление от множества джоинов там где не надо

домашнее задание - денормализовать произвольную базу до упора

Просто вроде просто звучит А если надо запарсить милионную базу

домашнее задание - денормализовать произвольную базу до упора

Так стабильно работет монго

Пока что

Я как-то написал простой гуй в связке с СА

...

И забил

домашнее задание - денормализовать произвольную базу до упора

Ну бля поясни тогда

это было про "избавление от джойнов"

денормализация базы к этому и приводит...

@zartsoft, злая, злая киса))))

денормализация базы к этому и приводит...

А по другому архитектура с множественными дупликатами

А так если юзать изначально удобную нестед архитектуру в монго дб

...

А как ты будешь хранить там пользователей, группы и контент?

Делая джоины в питоне?

одна коллекция с группами, в каждом объекте группы - список пользователей, по каждому пользователю - контент, который он опубликовал

легко же!

https://github.com/lig/mnj

А как ты будешь хранить там пользователей, группы и контент?

Всмысле? Документированые бд для этого лучше всего подходят же

https://github.com/lig/mnj

вот еще библиотечку писал дядя Сережа

Документированные?

стас в своем репертуаре...

Документоориентированная СУБД (англ. document-oriented database) — СУБД, специально предназначенная для хранения иерархических структур данных (документов) ... Из вики

Ну документальные или как их там

Группы и юзеры никак не иерархические

@iamigor, так в какой коллекции контент?)

. о О (монументально)

@iamigor, так в какой коллекции контент?)

в коллекции групп, где я неясно выразился?!!

Документоориентированные, уже лучше. А причём здесь они?)

Группы и юзеры никак не иерархические

вот да. да и контент - it depends...

А как ты будешь хранить там пользователей, группы и контент?

Хотя я может путаю с моделью данных для соц сетей и прочего

Насколько я понял, тот же май скл имеет кучу операций и функционала поболее чем монгодб например

Но

Но постгря умеет и то, и другое, и ещё много всего сверху :)

ощущаю себя Ржевским

Но

Для бигдаты юзают носкл

Но постгря умеет и то, и другое, и ещё много всего сверху :)

постгря начиная с 9.4 вообще какая-то убер-крутая стала

Наташа где?

Для бигдаты юзают носкл

а если OLAP бигдата? )

. о О (ебал и плакал, господа! ебал и плакал)

постгря начиная с 9.4 вообще какая-то убер-крутая стала

+++

Бигдата :)

пг не умеет в олап наравне с большими дядями

а если OLAP бигдата? )

А это разве бигдата?

олтп ок

пг не умеет в олап наравне с большими дядями

да, там ее форкнули в greenplum или как-то так, вроде

да оно мелко плавает в сравнении с мсскл 2016

А это разве бигдата?

ну, "Big data is a term for data sets that are so large or complex that traditional data processing applications are inadequate to deal with them." как ты думаешь, сколько гугл терабайт жрет для хранения всех данных гугл.аналитики?

но это топик однозначно не для новичков

ну, "Big data is a term for data sets that are so large or complex that traditional data processing applications are inadequate to deal with them." как ты думаешь, сколько гугл терабайт жрет для хранения всех данных гугл.аналитики?

А он не юзает носкл?

Говорят, гугл когда-то все в MySQL хранил

Он юзает. Свою самописную, которая реализована под задачу. А ты причём?)

бтв, чо там гугл для своего мапредьюса юзает? все еще бигтаблы с гридфсом?

Ну ладно А как делать хуйлоад™?

Говорят, гугл когда-то все в MySQL хранил

не было вроде

А он не юзает носкл?

olap и nosql как-то не очень вяжутся.. зачем, когда данные вполне себе четко структурированны?

Ну ладно А как делать хуйлоад™?

Это кстати важный вопрос И далее вот эти вот принципы переписать кусок на С и прочее

И холивары на тему юзать ли птон для хайлоада

ну и каша

Только го, только хардкор!

Ну ладно А как делать хуйлоад™?

а че хуйлоад? заебенил реплику мускуля - вот тебе хуйлоад подредактировал my.cnf - еще больше хуйлоада стало не хватать - въебал еще реплику!

Да не

Я в общем

Есть питон

Что дальше

ERROR: S client not available

Только го, только хардкор!

когда перестанет течь памятью как сучка

выкинуть его нахуй и переписать на го с микросервисной архитектурой, уиии!

Только го, только хардкор!

Вот да, для хайлоада тоже юзают Только он слишком хипстерский

Хаскель или эрланг?)

Про MySQL и Гугл: вы ведь все понимаете, что, когда произносится фраза «МногомилионнаяКомпанияA использует БазуДанныхB», то ни в коей мере не стоит думать, что БазаДанныхB там — это то же самое и так же используемое, как его привыкли использовать мы, в стартапиках на жалкой сотне хостов?..

слишком хипстерские - руби с нодой

Про MySQL и Гугл: вы ведь все понимаете, что, когда произносится фраза «МногомилионнаяКомпанияA использует БазуДанныхB», то ни в коей мере не стоит думать, что БазаДанныхB там — это то же самое и так же используемое, как его привыкли использовать мы, в стартапиках на жалкой сотне хостов?..

кстати, https://eng.uber.com/mysql-migration/

убер это, конечно, не гугл, но гугл инвестировал бабло в них активно, емнип!

Про MySQL и Гугл: вы ведь все понимаете, что, когда произносится фраза «МногомилионнаяКомпанияA использует БазуДанныхB», то ни в коей мере не стоит думать, что БазаДанныхB там — это то же самое и так же используемое, как его привыкли использовать мы, в стартапиках на жалкой сотне хостов?..

да, стоит какойнить тазик в бухгалтерии, где случайно по дефолту поднялось

Вообщем сформулирую вопрос

Что нужно знать для того что-бы писать годный хайлоад? Как правильно переписывать части 10/90 на языке С? Какие базы данных использовать?

Что нужно знать для того что-бы писать годный хайлоад? Как правильно переписывать части 10/90 на языке С? Какие базы данных использовать?

ща тебе нальют коммерческих тайн

ща тебе нальют коммерческих тайн

Слей и ты?

убер это, конечно, не гугл, но гугл инвестировал бабло в них активно, емнип!

убер, кажется, до сих пор убыточные :)

я в хуйлоад не лезу 8)

слишком комплексно

Пыха, майскл, апач

убер, кажется, до сих пор убыточные :)

неудивительно, с такими-то условиями

Пыха, майскл, апач

и все это в денвере на винде

Да!

отлично

В денвере под вайном*

и все это в денвере на винде

Кстати да, у меня денвер как 3 диск стоит, который не третий диск вовсе

Причём, винХР!

вечер вредных советов каких-то

sp2

Ну вы троли

Кстати да, у меня денвер как 3 диск стоит, который не третий диск вовсе

ман субст

денвер вообще надо выжигать каленой дилдой

Ну вы троли

ну блин, все от проекта зависит. от стека технологий.

Почему не бывает очереди технологий?

Почему не бывает очереди технологий?

или двусвязного списка