Давай варианты сложнее

конечно innodb это панацея от всего

но давайте обойдемся без фантастических предложений аля переехать на оракл

конечно innodb это панацея от всего

Cassandra же

или постгрес

или сменить движок

или сменить движок

Сменить сервер на побыстрее?

18ядерный сервак, 70Гб рама из которого 30 выделено под марию

хостимся на гугле, так что добавить ресурсов не проблема

хостимся на гугле, так что добавить ресурсов не проблема

Так добавь и посмотри что будет

myisam - неплохо в нее много пишется записей в конец. По сути это инкрементально увеличивающиеся логи

насколько понимаю, в данный момент не пишется ???

18ядерный сервак, 70Гб рама из которого 30 выделено под марию

поперхнулся

в данный момент я вижу http://paste.org.ru/?bm0y4n

загрузка мускуля по процу - 20% утилизация диска прыгает от 10 до 100%

на запись 7-8МБс с учетом того что синтетические нагрузочные тесты на данный диск держат по 200-300Мбс

в данный момент я вижу http://paste.org.ru/?bm0y4n

А вставить картинку сюда не позволяет религия?

как и кем убивается зависшая транзакция?

самим приложением которое его инициировало

по таймауту

таймаут 40 сек

по таймауту

Ээээ, ну ради интереса, а с какого хрена то оно не успевает записать?

это мне тоже предстоит выяснить

самим приложением которое его инициировало

т.е убивается коннект, а не транзакция?

профайлинг короче включи да руками вставь

а вообще диски проверь

то есть мне надо понять как избавится от локов убитыми транзакциями

а вообще диски проверь

Они же в облаке, Карл! Там может просто в ИО переодически упирается, потому что остальные облачные соседи заливают порно.

т.е убивается коннект, а не транзакция?

убивается именно транзакция, потому что эти инсерты в случае фэйла вставляются в другую таблицу

в гугле такой штуки не должно быть

т.е. там все-таки есть ROLLBACK?

может, перед ним просто UNLOCK TABLES вставить?

в гугле такой штуки не должно быть

Неее. Это же гугл. Там все необычайно круто по умолчанию. ( сарказм)

(я хуй знает что оно делает, за меня гугл думает)

какой роллбек?

это myisam

какие транзакции еба?

а лол

забыл даже

короче, UNLOCK TABLES запросом впендюрить можно?

и подключиться каким-нибудь strace, посмотреть, где он тупит?

и, наконец, что кроме мускула там стоит? сейчас окажется, что пейджспид раз в десять минут кэш очищает

я так глубоко не умею

приложуха посылает просто килл на сессию

придется научиться

но что еще на серваке работает?

кто еще может i/o красть?

нет

вар либ mysql

отдельный диск

что нет?

вопрос - как работает этот kill? я вроде читал, что он помечает флагом процесс и дальше в мускуле есть систем луп, который циклически проверят сессии. Если он натыкается на процесс с флагом киллед, то он выпиливает его с концами

Ну да, что-то типа того. А вот вопрос -- как то приложение киляет сессию?

на очень много иопсов

на очень много иопсов

очень много это сколько, 120?

myisam - неплохо в нее много пишется записей в конец. По сути это инкрементально увеличивающиеся логи

Что такое "в конец таблицы" -- очень непонятно...

?мне больше интересно зачем myisam в 2018

чтобы работа была

я понимаю ещё выбор между inno/xtra

самим приложением которое его инициировало

Как? Это невозможно почти...

чтобы работа была

расскажи, как правильно пагинацию юзать

Ну да, что-то типа того. А вот вопрос -- как то приложение киляет сессию?

python mysqldb kill method

расскажи, как правильно пагинацию юзать

где?

где?

phoenix

что это

что это

https://phoenix.apache.org/

очень много это сколько, 120?

Sustained Random IOPS read/write : 25,000/25,000 Sustained Throughput (MB/s) read/write : 480/240

python mysqldb kill method

Ну если ты послал запрос, он выполняется синхронно, в этой же коннекции к БД ничего выполнить нельзя.

Sustained Random IOPS read/write : 25,000/25,000 Sustained Throughput (MB/s) read/write : 480/240

это мало

не говоря уже про то, что эти 25к, это идеальный запросов по 4 кб

8 KB or smaller

у меня программисты на прошлой работе более жёсткий ссд валили 3 запросами

Ну если ты послал запрос, он выполняется синхронно, в этой же коннекции к БД ничего выполнить нельзя.

Я к тому, что может оно KILL сессии в MySQL и вообще не делает.

Ну если ты послал запрос, он выполняется синхронно, в этой же коннекции к БД ничего выполнить нельзя.

нет, посмотрел сишную часть там делается килл из другой сессии https://github.com/farcepest/MySQLdb1/blob/master/_mysql.c строки 1908

да, кстати, немношк погло когда я повесил на таблицу DELAY_KEY_WRITE = 1

Что такое "в конец таблицы" -- очень непонятно...

это значит что дата файл не дырявый

+---------------------+ | @@concurrent_insert | +---------------------+ | AUTO | +---------------------+

phoenix

https://www.google.ru/search?q=apache+phoenix+pagination https://phoenix.apache.org/paged.html SELECT title, author, isbn, description FROM library WHERE published_date > 2010 ORDER BY title, author, isbn LIMIT 10 OFFSET 10

у меня программисты на прошлой работе более жёсткий ссд валили 3 запросами

dd : /dev/null : /dev/sda ?

phoenix

а вообще где ты блэд в россии такие задачи находишь

а вообще где ты блэд в россии такие задачи находишь

в госраспилах

странно, что там что-то сложнее mysql

странно, что там что-то сложнее mysql

ну как бы у фнс того же ораклы и задупы с вертикой

суп из семи хадуп

Вот кстати про утреннюю тему транспорта. В 8 вечера с загрузкой метро уже не так радужно как в 10 утра

Вот кстати про утреннюю тему транспорта. В 8 вечера с загрузкой метро уже не так радужно как в 10 утра

А если плотнее прижиматься? ?

А если плотнее прижиматься? ?

Если плотнее прижиматься, можно подхватить сифилис :)

Если плотнее прижиматься, можно подхватить сифилис :)

А ты предохраняйся

А ты предохраняйся

А кто сказал, что подхвачу я?

А кто сказал, что подхвачу я?

Так предохраняйся что бы не посадили за хранение и распространение ?

А кто ж тогда распространять-то будет? Тогда ведь всё общество останется, извиняюсь, с носом

Может ли столбец с ограничением pk иметь значения NULL? Мне вот на паре сказали, что в некоторых бд при insert из-за того что можно указать имена столбцов произвольном порядке, то проверка ограничения pk на уникальность может произойти после начала процесса добавления строки в таблицу и в том случае, если условие уникальности нарушается, вставка будет прекращена и в результате будет добавлена строка частично сожержащая добавляемые данные заполнив NULL поле с pk и следующие за ним

Я посмотрел в интернете, там везде разные ответы

В постгресе точно нельзя

Может ли столбец с ограничением pk иметь значения NULL? Мне вот на паре сказали, что в некоторых бд при insert из-за того что можно указать имена столбцов произвольном порядке, то проверка ограничения pk на уникальность может произойти после начала процесса добавления строки в таблицу и в том случае, если условие уникальности нарушается, вставка будет прекращена и в результате будет добавлена строка частично сожержащая добавляемые данные заполнив NULL поле с pk и следующие за ним

> вставка будет прекращена и в результате будет добавлена строка частично сожержащая добавляемые данные заполнив NULL поле с pk и следующие за ним почитай про транзакции лучше

Может ли столбец с ограничением pk иметь значения NULL? Мне вот на паре сказали, что в некоторых бд при insert из-за того что можно указать имена столбцов произвольном порядке, то проверка ограничения pk на уникальность может произойти после начала процесса добавления строки в таблицу и в том случае, если условие уникальности нарушается, вставка будет прекращена и в результате будет добавлена строка частично сожержащая добавляемые данные заполнив NULL поле с pk и следующие за ним

> Может ли столбец с ограничением pk иметь значения NULL? По стандарту — нет, насколько я помню. > Мне вот на паре сказали, что в некоторых бд Это, я извиняюсь, бред (для всех известных мне СУБД). Может быть, где-то кто-то и написал что-то настолько кривое... kill it with fire! ;)

> вставка будет прекращена и в результате будет добавлена строка частично сожержащая добавляемые данные заполнив NULL поле с pk и следующие за ним почитай про транзакции лучше

Да, я знаю про транзакции. Если они используются, то иранзакция будет отменена, с этим все понятно