ну предположим, что данные попадают в таблицу раз в секунду. через 2 миллиона секунд я захочу фильтровать по этому полю, с по числа. есть ли смысл от индекса в таком случае.

есть

я наверное плохо объясняю http://dev.mysql.com/doc/refman/5.7/en/mysql-indexes.html

скорее я плохо понимаю

пасиб. почитаю

вам надо понять только одно, индекс это не ваше значение, и для индекса нет разницы, строка это или число или метка времени, по этому для хранения индексов тратится больше ресурсов и больше времени обработки и по этому они вредны где все запросы (ну или большинство) INSERT и UPDATE, а там где куча селектов еще и с условиями индексы просто жизнено необходимы на тех полях, по которым идут выборки

при том составные индексы (по нескольким полям) должны идти в том же порядке, что вы их перечисляете в самом запросе, иначе индекс не подхватится

индексы есть или их нет не ощущается только в одном случае, пока вся таблица влазит в оперативку, а как только перестает влазить, начинается все веселье

у меня вопрос ядра битрикса. потому у меня изначально все не влазит никуда.

по этой причине оптимизация бд начинается уже на боевом проекте обычно )))

ну не только, когда 4 таблицы склеить нужно с 2 лямами записей, джоинами.. сразу чувствуется есть индекс или нет

ну если я выпущу свой модуль, вы же (да и я тоже) сначала код обсерите, потом программистов, потом весь битрикс )

а потом найдём по IP и под дверь...

но зная какие сейчас модули штампуют )

ну не только, когда 4 таблицы склеить нужно с 2 лямами записей, джоинами.. сразу чувствуется есть индекс или нет

я бы сказал что тут чтото не так и это место полюбому будет бутылочным горлышком ))

я бы сказал что тут чтото не так и это место полюбому будет бутылочным горлышком ))

тут 100% костыли)

Когда такие количества строк в базе данных идут - мой вам совет - копируйте это всё на отдельный сервер и там выстраивайте индексы. Процесс этот не маленький по времени - от нескольких дней до недель. И раз уж речь идет о Битриксе - проверьте сначала что кэш правильно используется.

ну это уже частные случаи

в моем случае нужна универсальность

это как?

ой, вы это не мне ответили. я тут с индексами разбираюсь сижу.

Например, если мне нужно выполнить запрос типа AGE=18 AND STATE='CA', то многие люди просто создадут 2 отдельных индекса на колонках AGE и STATE.

я из этих людей )))

можно один создать

с индексами есть 2 варианта - а) когда вы предполагаете какие запросы будут использоваться и заранее выставляете индексы на какие-то колонки таблиц, и б) когда у вас есть конкретные страницы сайта с конкретными запросами с этих страниц - и надо оптимизировать эти конкретные запросы.

вам бы что-то вроде таких статей почитать http://ruhighload.com/post/Работа+с+индексами+в+MySQL

а вообще не стоит создавать кучу индексов просто так - замедляет insert и update

это я к тому, что без полного понимания, как оно там, сложно делать какие-то выводы.

да уже прочел. сижу размышляю. всегда легкомысленно подходил к индексам. не было таких сложных задач. Если что, оперировал уже продакшном. а тут задача заранее продумывать )

)) почитайте ещё про шардинг, вертикальный и горизонтальный.. кластеры добавьте с репликацией и будете через полгода спецом по БД

да я уже понял, что вырос из стандартного набора запросов. пора уже что то более изучать, да и книжку почитать одну другую про бд.

мне кажется даже в случае с модулем для МП не стоит усложнять

у кого база огромная знает что такое индекс и сможет проставить, у кого сайт с 50 униками в день, и знать не нужно зачем это

если конечно решение изначально не предпологает огромный справочник, но тогда легче 2-3 основных выделить как это делает битрикс

вот я по проектированию БД полистал бы в метро, но пока подруки достойного ничего не попадается, в основном куча воды

причём доуровня репок и nosql Решений

вот я по проектированию БД полистал бы в метро, но пока подруки достойного ничего не попадается, в основном куча воды

http://www.books.ru/books/mysql-optimizatsiya-proizvoditelnosti-2-e-izdanie-734220/

сейчас еще одну найду))

Во спасибо, судя по оглавлению прям с 9 главы можно изучать)

я бы эту еще рекомендовал http://www.books.ru/books/obespechenie-vysokoi-dostupnosti-sistem-na-osnove-mysql-1545929/

я бы эту еще рекомендовал http://www.books.ru/books/obespechenie-vysokoi-dostupnosti-sistem-na-osnove-mysql-1545929/

я прям отстал от жизни, пора в книжный... а то всё хабр да форумы)

Внимание! Книгу продает: Вячеслав Валериевич

))))

очень важная информация

я прям отстал от жизни, пора в книжный... а то всё хабр да форумы)

+++++++++++

да bitrix расслабил.. мелкие проекты где всё знаешь, а не знаешь гуглишь за 5 минут

нельзя расслабляться :) у меня у вэб разработчика на полке даже программирование под микроконтроллеры стоит))) изучение разных вещей развивает мышление в правильном направлении)) Заметил когда изучал всякие С++ с Qt ))

у нас вот что на полке стоит )))

хасбро

помните монополию на картах гугла?

правильно, отдыхать тоже надо уметь))

у меня есть ахрененная идея. )) но я один не потяну игру )

у меня есть ахрененная идея. )) но я один не потяну игру )

у меня таких идей вагон, осталось понять где на всё это взять время ))

? это да

я даже в метро почитать не могу, потому что за рулем (не поезда)

нужно переходить на общественный траспорт :)

не у меня 40 минут пробка

и 30 минут на метро)

ну такую книгу конечно не послушать. но я в автобусе или пешком если, аудио книги кручу всегда )

есть тех литература в аудио формате? :)))

а я под аудио книги засыпаю

а я под аудио книги засыпаю

особенно под сказу про репки в mysql)

пришёл ПМ, тянет репку, вытянуть не может....

тянул вася репку тянул да не вытянул)

а чё сразу вася =)))

прибежал Покрышкин, усики погладил, вытянули репку из разбитого рейда

ERROR: S client not available

рейд. рейд. в фалаут шелтер поиграть, чтоль?

прибежал Покрышкин, усики погладил, вытянули репку из разбитого рейда

зачем репу доставать из разбитого рейда, ведь репы минимум две? вторая то полюбому живая, они же не на одном рейде)))

ну тут как с дедом повезло

окончил ли он школу, старый дурак

я встречался когда на одной машине два мускуля обрабатывали один сайт

кто то экспериментировал

походу проект опять одна мыша вытягивать будет =)))

я встречался когда на одной машине два мускуля обрабатывали один сайт

две базы или именно два сервера?

два сервера

кто то экспериментировал наверное. но денег на две железки не хватило

сервер = по

два сервера

я сейчас подумал, что не знаю как запустить второй сервер на той же машине

хотя нет, есть пара идей ))

хотя нет, есть пара идей ))

довольно развратных? ;)

нет, надо зайти в сервис старт скрипт, посмотреть как подымается сервер, скорее всего там можно подсунуть свой файл конфигурации при старте, ну а там уже подсунуть свой порт, свои сокеты в конфе, вот и будет 2 инстанса на разных портах

либо второй - рассувать по контейнерам

все хочу клоудлинукс посмотреть - времени нету))

https://habrahabr.ru/company/bitrix/blog/147098/

innodb-flush-log-at-trx-commit

вот в эту сторону копай

он в 2-3 раза ускорит работу

http://dev.1c-bitrix.ru/learning/course/?COURSE_ID=32&LESSON_ID=3371

Наибольшее внимание следует обратить на следующие параметры и примеры: set-variable = innodb_buffer_pool_size=250M set-variable = innodb_additional_mem_pool_size=50M set-variable = innodb_file_io_threads=8 set-variable = innodb_lock_wait_timeout=50 set-variable = innodb_log_buffer_size=8M set-variable = innodb_flush_log_at_trx_commit=0

ктото делал выгрузку товаров из 1С на сайт со структурой отличной от той, которая в 1С и штатный механизм настройки иерархии групп не подходит *при настройках обмена с 1С) есть категория запчасти, в неё выгружают 10 категорий с товарами, и у каждой категории по 5 подкатегорий. все эти товары в категории Запчасти без разделов так как группа номенклатуры задачется через параметр в 1С - Вид номенклатуры Виды номенклатуры мы можем выгружать в справочник. Делать думал так: 1) у товаров в категории Запчасти будет свойство - Категория (привязка по ID вида номенклатуры) 2) на основании видом номенклатуры будет выводится структура (для этого надо будет сделать компонент)

ктото делал выгрузку товаров из 1С на сайт со структурой отличной от той, которая в 1С и штатный механизм настройки иерархии групп не подходит *при настройках обмена с 1С) есть категория запчасти, в неё выгружают 10 категорий с товарами, и у каждой категории по 5 подкатегорий. все эти товары в категории Запчасти без разделов так как группа номенклатуры задачется через параметр в 1С - Вид номенклатуры Виды номенклатуры мы можем выгружать в справочник. Делать думал так: 1) у товаров в категории Запчасти будет свойство - Категория (привязка по ID вида номенклатуры) 2) на основании видом номенклатуры будет выводится структура (для этого надо будет сделать компонент)

может лучше о сериалах поговорим?)))

Наибольшее внимание следует обратить на следующие параметры и примеры: set-variable = innodb_buffer_pool_size=250M set-variable = innodb_additional_mem_pool_size=50M set-variable = innodb_file_io_threads=8 set-variable = innodb_lock_wait_timeout=50 set-variable = innodb_log_buffer_size=8M set-variable = innodb_flush_log_at_trx_commit=0

я это называю антисоветами )))

innodb_flush_log_at_trx_commit=0 очень ввыручило

естественно все эти советы универсальны. и у каждого свои частные случаи

тому кому я это написал этого достаточно будет )

Еще один глупый вопрос. Когда и как стоит применять пхп.интерфейсы? Для меня интерфейс это жесткое обозначение того, что и как моей программе необходимо реализовать. Жесткие рамки. сейчас у меня есть 2 интерфейса, 1 для восстановления данных, второй для удаления данных. и там и там присутствуют 2 обязательных метода, которые реализуют необходимые методы и гарантируют работу апи. это getEntity и setData так вот руководителю не нравится, говорит мол не на своем месте эти два метода. предлагает третий интерфейс. что то я немного не согласен с ним. получается у прослойки между модулями и моим модулем должен быть класс реализующий массив (пока только трех) интерфейсов.

с ростом программы будет расти кол-во интерфейсов?

вообще смысл всего диалога кроется в долговременной (в контексте битрикса читай бесконечной) поддержке этих интерфейсов.