Ilya
Надо смотреть долю самокатчиков с правами.
Pavel S
С пайплайном они наворотили. По-умолчанию операнд слева подставляется первым в функцию справа. То есть a->foo(b, c) === foo(a, b, c), но можно сделать a->foo(b, _, c) === foo(b, a, c) Сайма удар хватит от такого усложнения языка, наверное)
Скомбинировать пайп и частичное применение, было бы неплохо x |> foo(a, _, c) где foo(a, _, c) = fun x -> foo(a, x, c) Upd хотя хз зачем тут пайп, но частичное применение иногда полезно
Igor
на скутерах, до введения прав, подростки гоняли толпами, сейчас их почти нет
Pavel S
В Nemerle есть
Ilya
Выглядит круто, только применять негде, по-моему.
Pavel S
Выглядит круто, только применять негде, по-моему.
Применять там где хочется в пайп всунуть функцию, но аргумент не последний, иногда бывает такое и приходится по месту fun x -> foo a x c
Roman
короче, представьте что есть высококонкурентные апдейты одной таблицы, в каждом апдейте множество атомарных апдейтов вида UPDATE xxx SET xxx WHERE id = xxx UPDATE xxx SET xxx WHERE id = xxx UPDATE xxx SET xxx WHERE id = xxx … так вот, если пиховать такие апдейты на похуй, но уже при незначительном конкаренси начинаются адовые дедлоки и пиздец. Но стоит апдейты сортануть по id, сразу всё збс. Дело в том что если один апдейт апдейтит строки 3, 1, 5 А другой апдейтит строки 1, 7, 3, то происходит дедлок, т.к. они берут локи по порядку апдейтов. первый апдейт берёт лок на 3, второй на 1. Далее первый пытается взять лок на 1, он уже занят, впадает в вейт Второй апдейтит 7, пытается взять лок на 3, он уже занят - дедлок. Если сортануть оба апдейта, то порядок локов будет такой 1,3,5 1,3,7 И таким образом, второй апдейт будет ждать пока первый не закончит и не будет брать “ненужные” id в свой лок
а почему в транзакцию балки не обернуть?
Roman
ворвался, тред не читал!
Vasily
Хммм, в ПОЕ новая лига
Vasily
Можно банки по КД не жать
Vasily
Слышь, @omgszer
Vlæd
Хммм, в ПОЕ новая лига
Пое 2 же анонсировали какое-то время назад. Не вышел ещё?
Vlæd
Печаль.
Bonart
короче, представьте что есть высококонкурентные апдейты одной таблицы, в каждом апдейте множество атомарных апдейтов вида UPDATE xxx SET xxx WHERE id = xxx UPDATE xxx SET xxx WHERE id = xxx UPDATE xxx SET xxx WHERE id = xxx … так вот, если пиховать такие апдейты на похуй, но уже при незначительном конкаренси начинаются адовые дедлоки и пиздец. Но стоит апдейты сортануть по id, сразу всё збс. Дело в том что если один апдейт апдейтит строки 3, 1, 5 А другой апдейтит строки 1, 7, 3, то происходит дедлок, т.к. они берут локи по порядку апдейтов. первый апдейт берёт лок на 3, второй на 1. Далее первый пытается взять лок на 1, он уже занят, впадает в вейт Второй апдейтит 7, пытается взять лок на 3, он уже занят - дедлок. Если сортануть оба апдейта, то порядок локов будет такой 1,3,5 1,3,7 И таким образом, второй апдейт будет ждать пока первый не закончит и не будет брать “ненужные” id в свой лок
Мда, а постгря еще версионником притворялась
Ayrat
беру не глядя
Pavel S
короче, представьте что есть высококонкурентные апдейты одной таблицы, в каждом апдейте множество атомарных апдейтов вида UPDATE xxx SET xxx WHERE id = xxx UPDATE xxx SET xxx WHERE id = xxx UPDATE xxx SET xxx WHERE id = xxx … так вот, если пиховать такие апдейты на похуй, но уже при незначительном конкаренси начинаются адовые дедлоки и пиздец. Но стоит апдейты сортануть по id, сразу всё збс. Дело в том что если один апдейт апдейтит строки 3, 1, 5 А другой апдейтит строки 1, 7, 3, то происходит дедлок, т.к. они берут локи по порядку апдейтов. первый апдейт берёт лок на 3, второй на 1. Далее первый пытается взять лок на 1, он уже занят, впадает в вейт Второй апдейтит 7, пытается взять лок на 3, он уже занят - дедлок. Если сортануть оба апдейта, то порядок локов будет такой 1,3,5 1,3,7 И таким образом, второй апдейт будет ждать пока первый не закончит и не будет брать “ненужные” id в свой лок
В sqlite такой проблемы нет)
Ilya
Там другие.
Bonart
В sqlite такой проблемы нет)
Там много чего еще нет по сравнению с постгрей. В основном фич
Bonart
С транзакциями будет всё ок, но будет медленнее сильно
Транзакции же всегда есть, откуда замедление?
Mikhαil
Надеюсь он не пишет всерьёз о преимуществах скулита над постгре
Mikhαil
Потому что если да - будет даже не смешно
Ayrat
я могу явно навесить изоляцию покруче и тогда разные апдейты из разных балков никогда не будут пересекаться, но это сильно медленнее
Bonart
у неё разные уровни
Чуть подробнее можно? ПО идее блоки идут, если все конкуретные балки захерачить в одну транзашку
Sergey
Там Стим ос
каюсь был неправ эти додичи перешли на пакеты рача
Bonart
Да, наворотов сильно меньше
А срезанных углов сильно больше
Ayrat
ну ты вроде должен быть в курсе!
Bonart
Я в курсе про уровни изоляции
Ayrat
Вот на Serializable вообще никаких проблем
Ayrat
но сука еле пердит
Bonart
Ты балки в ReadCommitted херачил?
Ayrat
да
Ayrat
Некогда объяснять, надо апдейтить
Bonart
Сгнапшот не пробовал?
Ayrat
:D
Ayrat
Сгнапшот не пробовал?
ну пробовал, разницы не обнаружил, дедлоки появлялись на высокой конкуренции
Ayrat
с сериалазбл вообще збс, но медленно
Bonart
Какую-то дырку ты нащупал похоже
Ayrat
ну вот с сортировкой в апликейшне + рид комитед - топ
Bonart
Версионники обычно от такого не страдают
Ayrat
Какую-то дырку ты нащупал похоже
https://stackoverflow.com/questions/27007196/avoiding-postgresql-deadlocks-when-performing-bulk-update-and-delete-operations её давно нащупали
Vladislav
Костыльный
Крылатый
с сериалазбл вообще збс, но медленно
Кста, а чочо не copy вместо апдейтов пачками?
Ayrat
https://stackoverflow.com/questions/27007196/avoiding-postgresql-deadlocks-when-performing-bulk-update-and-delete-operations её давно нащупали
Но вот здесь предлагают сортировать в запросе прям. Вместо UPDATE table_name SET val_1 = 'some value', val_2 = 'some value' WHERE id_A = ANY(array_of_id_A) AND id_B = ANY(array_of_id_B) делать UPDATE table_name t SET val_1 = 'some value' , val_2 = 'some value' FROM ( SELECT id_A, id_B FROM table_name WHERE id_A = ANY(array_of_id_A) AND id_B = ANY(array_of_id_B) ORDER BY id_A, id_B FOR NO KEY UPDATE -- Postgres 9.3+ -- FOR UPDATE -- for older versions or updates on key columns ) upd WHERE t.id_A = upd.id_A AND t.id_B = upd.id_B;
Ayrat
ORDER BY id_A, id_B ключ ко всему!
Ayrat
грязные хаки
Bonart
Хотя... конкретно одну и ту же запись разные транзашки правили?
Pavel S
Ayrat
Хотя... конкретно одну и ту же запись разные транзашки правили?
да. Пример был когда один балк делает апдейт на 1,3,5 а другой на 3,7,1
Ayrat
если выстроить апдейты по ордеру индекса, всё збс
Bonart
А, тогда другое дело. Тут и версионник обосрется в мосент коммита
Ayrat
я ненастоящий сварщик, меня просто ебаные эксепшны бесили. Починил
Bonart
Я подобную хрень решал через шардинг
Vladislav
да. Пример был когда один балк делает апдейт на 1,3,5 а другой на 3,7,1
вообще я нихуя не понимаю почему апдейт не атомарный
Vladislav
почему порядок
Vladislav
темболее рид коммитед стоит ещё
Bonart
Потому что при коммите с конфликтами СУБД надо упорядочить конфликтующие версии
Ayrat
вообще я нихуя не понимаю почему апдейт не атомарный
апдейт-то атомарный, а вот захват лока по порядку апдейта, это вообще не проблема пока ты не ломишься в 500 коннекшнов в БД и происходит ТОТ РЕДКИЙ кейс
Ayrat
то есть он не применит апдейт если в середине схватил дедлок, БД отрабатывает норм
Bonart
И вот тут коммитят сразу две транзашки, меняющие одни и те же записи
Vladislav
в моём мире
Pavel S
да. Пример был когда один балк делает апдейт на 1,3,5 а другой на 3,7,1
В mvvc вроде 2я транзакция (если 1 успела поправить ту же запись и закомитмться во время работы 2й) должна зафейлится. Почему дедлок то?
Bonart
Если они их меняли в одном порядке - то все легко, а если хаотично - увы
Vladislav
иначе какая-то ебань с роллбеками получается сразу
Bonart
ну типо, лок берётся в начале стейтмента, в нормальных бд
Это только у блокировщиков. Их почти не осталось
Ayrat
ну типо, лок берётся в начале стейтмента, в нормальных бд
ну вот он берёт на строку 3, потом на 1, потом на 5(а уже взяли в это время кто-то другой берёт на 5, потом на 3 (а уже взяли...)
Vladislav
я уже забыл че там у оракла, но сейчас не могу найти
Vladislav
скорее всего чето типо