Спасибо, теперь стало понятнее как это работает ?

mysql Есть таблица, 7миллионов записей, размер 1 Гб, просто селект без where делается 18 минут, count(*) моментально. Кто может за какуюто денежку посмотреть мой сервер, настроики и помочь оптимизировать мой проект? сервер вроде норм, косяк гдето в настройках мускула,индексах и т.д.

Здравствуйте, подскажите плез

Чатик по эластику

нашел, спасиб

Всем здравствуйте! Здесь есть те, кто может писать на прологе?

Ну могу, но счастья от этого мало...

Вот у меня вопрос назрел, к слову. Вот мы ставим на определенные типы в зависимости от задачи, у каждого определенный объем. Это делается дл чего? Допустим, у нас есть int длинной 11, почему бы не выставить в максимум? В некоторых СУБД, к примеру, незанятое пространство занимается пробелами, но в некоторых нет — вопрос и по ним. Причина в резервации места, верно?

Что значит "int длиной 11" ? Обычно в СУБД под int понимается int из языка С, 4 или 8 байт, и стандарт так тоже определяет. Если ты начитался доки по MySQL , то 0) это совсем нестандартное 1) это никак не имеет отношения к объему хранимых данных. Кроме того, в принципе типы данных и то, как они хранятся, это разные вещи, связанные, но не обуславливающие друг друга. Тип данных в общем - это больше множество допустимых значений и операции с ними. А то, как они хранятся, не обязательно диктуется тем, что за тип.

Т.е. вне зависимости от реального размера место под запись резервируется, которая указана для данного стоблца, так?

Нет, не так

Для вебсокетов какие бд подходят?

Web socket это протокол сетевого обмена, СУБД тут ни при чём.

с какими бд можно работать по протоколу ws ?

Чаще всего по web socket ты не работаешь с СУБД. Там обычно несколько слоев ещё до СУБД. И не нужно.

Спасибо! А у меня еще один вопросик из разряда: "Как это работает?" — а как хранятся вовсе данные по факту? То есть, допустим, на жестком диске лежит схема БД, мы запускаем SQL-сервер, он создает её объект в памяти, и все манипуляции происходят с ячейками памяти соотвественно ОЗУ, а данные в определенный момент сохраняются на жесткий диск? Или идет непосредственно работа с жестким диском?

Нет не так

Спасибо! А у меня еще один вопросик из разряда: "Как это работает?" — а как хранятся вовсе данные по факту? То есть, допустим, на жестком диске лежит схема БД, мы запускаем SQL-сервер, он создает её объект в памяти, и все манипуляции происходят с ячейками памяти соотвественно ОЗУ, а данные в определенный момент сохраняются на жесткий диск? Или идет непосредственно работа с жестким диском?

Идёт непосредственно работа с жестоким диском

Чаще всего по web socket ты не работаешь с СУБД. Там обычно несколько слоев ещё до СУБД. И не нужно.

спасибо) я пытался понять, что хотели наводящими вопросами)

С СУБД можно работать, через сокеты, только на более низком уровне, чем "web"

Спасибо! А у меня еще один вопросик из разряда: "Как это работает?" — а как хранятся вовсе данные по факту? То есть, допустим, на жестком диске лежит схема БД, мы запускаем SQL-сервер, он создает её объект в памяти, и все манипуляции происходят с ячейками памяти соотвественно ОЗУ, а данные в определенный момент сохраняются на жесткий диск? Или идет непосредственно работа с жестким диском?

Но все гораздо сложнее, чем ты можешь себе представить, если тебе рассказать, просто башню сорвёт... Да и не расскажешь в чате...

Под mysql есть приблуда, которая напрямую пуляет команды, в обход некоторых этапов анализа и т.д.

Субд! =мускул

Спасибо, теперь стало понятнее как это работает ?

О! Мне даже не понятно, а ему понятно... Завидую !

С СУБД можно работать, через сокеты, только на более низком уровне, чем "web"

Это немного другие сокеты... В WEB sockets от сокетов наверное только одно название.

mysql Есть таблица, 7миллионов записей, размер 1 Гб, просто селект без where делается 18 минут, count(*) моментально. Кто может за какуюто денежку посмотреть мой сервер, настроики и помочь оптимизировать мой проект? сервер вроде норм, косяк гдето в настройках мускула,индексах и т.д.

Тут вообще нечего смотреть, так и должно быть. В таком поведении нет ничего криминального, нет смысла оптимизировать. Если проблемы с произв., переведи всё на Inno, включи большой кэш данных, типа пол оперативки. (innodb buffer cache ), включи slow query log и мониторь плохие запросы. Вот и весь сказ.

Это немного другие сокеты... В WEB sockets от сокетов наверное только одно название.

web сокеты базируются все на том же интерфейсе сокетов. Поэтому и уточнил "на более низком уровне"

суп гаез

innodb_file_per_table = 1 зло или добро?

web сокеты базируются все на том же интерфейсе сокетов. Поэтому и уточнил "на более низком уровне"

Уверен?

innodb_file_per_table = 1 зло или добро?

По мне — зло...

чому?

mysql Есть таблица, 7миллионов записей, размер 1 Гб, просто селект без where делается 18 минут, count(*) моментально. Кто может за какуюто денежку посмотреть мой сервер, настроики и помочь оптимизировать мой проект? сервер вроде норм, косяк гдето в настройках мускула,индексах и т.д.

Могу провести анализ запроса. В личку короче.

Тут вообще нечего смотреть, так и должно быть. В таком поведении нет ничего криминального, нет смысла оптимизировать. Если проблемы с произв., переведи всё на Inno, включи большой кэш данных, типа пол оперативки. (innodb buffer cache ), включи slow query log и мониторь плохие запросы. Вот и весь сказ.

Бац бац и скорость)) myisam при редких операциях записи выгодней. Да и Кеш тоже не всегда даёт прирост скорости.

некрофил детектед

Бац бац и скорость)) myisam при редких операциях записи выгодней. Да и Кеш тоже не всегда даёт прирост скорости.

MyISAM выгоден, когда тебе не БД нужна, а кусок говна. Тогда да, бери MyISAM, не ошибёшься.

чому?

Ну потому что совсем большие БД на MySQL делать бессмысленно, А file_per_table нужен, только, чтобы размазать IO на несколько физических устройств и таким образом распараллелить IO. Ну сделали его в MySQL, но по сути он не нужен.

Ну потому что совсем большие БД на MySQL делать бессмысленно, А file_per_table нужен, только, чтобы размазать IO на несколько физических устройств и таким образом распараллелить IO. Ну сделали его в MySQL, но по сути он не нужен.

что значит большие? это скок?

убер мускуль юзает

это за маленькое считается?

убер мускуль юзает

Кастомизированный вроде

что значит большие? это скок?

Вроде как от 500 000 записей на таблицу могут начинаться непонятные тормоза.

Вроде как от 500 000 записей на таблицу могут начинаться непонятные тормоза.

О, абсолютные величины подъехали))))) А ничего, что эти 500к могут быть разными по размеру и хранится на железках, отличающихся по производительности в десятки раз?

О, абсолютные величины подъехали))))) А ничего, что эти 500к могут быть разными по размеру и хранится на железках, отличающихся по производительности в десятки раз?

Безспорно, поэтому слово могут.

у меня на полтора ляма таблица

ниче не тормозит

вторая на 500+

тоже норм

ещё в одной базе 10кк+

немного тормозит, да

а тут есть люди знающие postgis? подскажите, как правильно составить запрос на поиск по заданному радиусу? и как правильно составить индекс для этого запроса? таблица такая CREATE TABLE my_points(id SERIAL PRIMARY KEY, name TEXT); SELECT AddGeometryColumn('my_points', 'point', 4326, 'POINT', 2); данные вот так добавляю INSERT INTO my_points (point, name) VALUES (ST_GeomFromText('POINT(123 123)',4326), '1');

убер мускуль юзает

Странно, @MasterZiv даже не забайтился, стареет видимо

это за маленькое считается?

Я не знаю, какие у них БД. Но знаменитую статью о том, как они не осилили PG, помню.

что значит большие? это скок?

Большие — это от миллиарда записей в таблице

а тут есть люди знающие postgis? подскажите, как правильно составить запрос на поиск по заданному радиусу? и как правильно составить индекс для этого запроса? таблица такая CREATE TABLE my_points(id SERIAL PRIMARY KEY, name TEXT); SELECT AddGeometryColumn('my_points', 'point', 4326, 'POINT', 2); данные вот так добавляю INSERT INTO my_points (point, name) VALUES (ST_GeomFromText('POINT(123 123)',4326), '1');

Лучше в профильную чату. Там Дарафей, подскажет.

Лучше в профильную чату. Там Дарафей, подскажет.

а можно ссылочку на чатик

https://t.me/pgsql

скорее вот этот https://t.me/postgis

Большие — это от миллиарда записей в таблице

учитывая, что у них записываются маршруты водителей, в масштабах нескольких стран, то миллиард думаю наберется. Не говоря уже об остальных данных которые они собирают.

учитывая, что у них записываются маршруты водителей, в масштабах нескольких стран, то миллиард думаю наберется. Не говоря уже об остальных данных которые они собирают.

Это да, но есть такое слово шардинг

ну значит никакой проблмы с большая\маленькая нет

А такси дальше области свой не ездит

в любой момент можно покромсать

есть три стула: VARCHAR, ENUM и INT

на какой сядите?

на какой сам сядешь?

ну хз, я бы выбрал ENUM, т.к. это всё таки список и он будет и быстрее и меньше места занимать

но бля, добавлять\удалять\менять значения в нем это просто пиздец

поэтому мне хочется варчар

или инт, а сам список где-то в приложухе хранить

ну хз, я бы выбрал ENUM, т.к. это всё таки список и он будет и быстрее и меньше места занимать

Enum нестандартный, насколько я помню, обрабатывается он на клиенте, поэтому никаких приростов он не даёт.

но бля, добавлять\удалять\менять значения в нем это просто пиздец

Если надо добавлять, то нужен словарь, а не домен.

ну хз, я бы выбрал ENUM, т.к. это всё таки список и он будет и быстрее и меньше места занимать

чож вас на говно тянет

чож вас на говно тянет

Мухи.:)

Здравствуйте! Подскажите пожалуйста, изменить формат даты лучше делать средствами php, или в БД (mysql). По дэфолту, YYYY-MM-DD HH:MM:SS, хочу сделать по другому, убрать секунда, день и месяц местами поменять

спасибо)

не швыряйтесь какахами, новичек) Не надо листинг, просто что изучить подскажите

Больше интересно что ты будешь с этой кастрированной датой делать

Больше интересно что ты будешь с этой кастрированной датой делать

Просто на страницу выводить для удобства восприятия юзверей

Так не меняй в БД, просто выведи так, как красиво

DATE_FORMAT'ом например

DATE_FORMAT'ом например

Спасибо

Здравствуйте! Подскажите пожалуйста, изменить формат даты лучше делать средствами php, или в БД (mysql). По дэфолту, YYYY-MM-DD HH:MM:SS, хочу сделать по другому, убрать секунда, день и месяц местами поменять

Средствами PHP лучше

Всем привет! Вопрос по архитектуре. На данный момент база в Oracle размером в 20 TB. Необходимо выбрать open source чтобы снизить стоимость продукта. Процесс отличается множественным инсертами, малым количеством апдейтов, несколькими тысячими пользователей посылающими ad hoc запросы с джойнами и аггрегациями. Какая платформа лучше подойдет для этой задачи? (пока думали о Cassandra, ClickHouse, Postgres, Citus, Aerospike).

a. Сервер HP ProLiant DL360 Gen 9(10) 128G RAM 2*INTEL XEON E5-2660 FC 8G 2*470G SSD b. Система хранения данных HP MSA 2040 FC 8G X*1.8TB SAS 10k

Всем привет! Вопрос по архитектуре. На данный момент база в Oracle размером в 20 TB. Необходимо выбрать open source чтобы снизить стоимость продукта. Процесс отличается множественным инсертами, малым количеством апдейтов, несколькими тысячими пользователей посылающими ad hoc запросы с джойнами и аггрегациями. Какая платформа лучше подойдет для этой задачи? (пока думали о Cassandra, ClickHouse, Postgres, Citus, Aerospike).

никто вам не ответит, потому что вы не предоставили никакой информации, что у вас в оракле напилино

Всем привет! Вопрос по архитектуре. На данный момент база в Oracle размером в 20 TB. Необходимо выбрать open source чтобы снизить стоимость продукта. Процесс отличается множественным инсертами, малым количеством апдейтов, несколькими тысячими пользователей посылающими ad hoc запросы с джойнами и аггрегациями. Какая платформа лучше подойдет для этой задачи? (пока думали о Cassandra, ClickHouse, Postgres, Citus, Aerospike).

Аналитические БД могут подойти как дополнение, но никак не замена