в чем разница между while и foreach при использовании генераторов?))

чёт не помню откуда в дбале генераторам взяться

в dbal как бы и управления курсором нету, там тупо пробрасывается PDO. А дальше сам курсором рули

ну и завернуть в while + yield - получается красивый такой итератор по записям

ну то есть, хз о чем спор

в чем разница между while и foreach при использовании генераторов?))

Ни в чем

в dbal как бы и управления курсором нету, там тупо пробрасывается PDO. А дальше сам курсором рули

ну я как бы написал, что взяли пдо, идём дальше. а мне "хер там, дбал, а не пдо") ну я и пошёл в соседний чатик)

в чем разница между while и foreach при использовании генераторов?))

в том что в while тебе надо будет ручками проверять валидность итератора + просить следующий элемент, а форич тебе все сам сделает.

ну я как бы написал, что взяли пдо, идём дальше. а мне "хер там, дбал, а не пдо") ну я и пошёл в соседний чатик)

а, ну таки да, для тех кто не знал - DBAL по execute возвращает Pdo-ный стэйтмент который уже курсором рулит

Разве что прийдется дергать valid()

так в чем беда-то?)

короч все ок, так а в чем проблема?

короч все ок, так а в чем проблема?

в 100% загрузке cpu и деградации скорости

но как по мне, проблема в целом в подходе)

деградация скорости может быть если память не чистится

мы ж хз че он там дальше делает

вдруг он объектики сохраняет куда и они висят

ну у меня в первых итерациях демона тоже была проблема, что через 3-4 дня скорость оч сильно падала. Но это как раз недостатки того, что пых всё берёт, но ничего не отдаёт

вдруг он объектики сохраняет куда и они висят

Никуда не сохраняю, форичу по генераторам, а переменные убиваю областью видимости. Память не течет как таковаяэ

МНе и 4-8Гб ОЗУ не жалко отдать пыху, лишь бы скорость не деградировала, но он не берет, а скорость деградирует)

вот сколько часов прошло уже

Очевидно если я даже буду полными датасетами подтягивать данные с PDO, то расход памяти увеличится, но скорости не прибавится

за это время можно было натыкать в каждый файл счетчик времени и в лог написать сколько каждая операция занимает и оптимизировать

но нет, будем просто ныть в чате )

возьми xdebug, запусти 2-3 итерации и сделай снепшот

Задача брать client_id из бд. Как заставить HWIOAuthBundle брать client_id не из конфига какие идеи есть ?

Задача брать client_id из бд. Как заставить HWIOAuthBundle брать client_id не из конфига какие идеи есть ?

нож к горлу

берешь compiler pass, грузишь значение из таблицы, подменяешь

или меняешь сервис, который использует эти значения на свою проксю)

ну вот, смотри какой прекрасный крайний :)

теперь ты знаешь куда смотреть :)

можно дальше смотреть инфу из снепшота и понимать в какой именно момент пиздец к тебе приходит. Да, они тяжёлые и долго генерятся\открываются, но оч хорошая штука)

да не, недолго. Через KcacheGrind 322Мб файл открылся за секунд 5

но вот непонятно нихуя ровным счетом) кроме пары моментов

Господа, а пых разве принуительно вызывает gc по мере работы скрипта? Все утечки в демонах решались gc_colect_cycles

Господа, а пых разве принуительно вызывает gc по мере работы скрипта? Все утечки в демонах решались gc_colect_cycles

канеш

gc_colect_cycles нужен только для циклических ссылок

остальное там и так собирается

у меня таймер висит и каждые 15 минут форсит gc_colect_cycles\gc_mem_caches, ибо нехуй

но в целом сам сборщик мусора в 7ке работает неплохо

демон может пухнуть не от мусора в пхп, а от мусора в скрипте

ваш КО

откуда ж в демоне с доктриной мусору взяться)

?

Всем привет, подскажите, как сделать средствами Doctrine , INSERT INTO ... ON CONFLICT DO NOTHING ?

Всем привет, подскажите, как сделать средствами Doctrine , INSERT INTO ... ON CONFLICT DO NOTHING ?

https://www.doctrine-project.org/projects/doctrine-dbal/en/2.8/reference/data-retrieval-and-manipulation.html#data-retrieval-and-manipulation

Всем привет, подскажите, как сделать средствами Doctrine , INSERT INTO ... ON CONFLICT DO NOTHING ?

Native sql

Тока

С DBAL понятно как сделать, а вот без

Без - без доктрины

Вообще доктрина не умеет в апсерты

https://vivait.co.uk/labs/updating-entities-when-an-insert-has-a-duplicate-key-in-doctrine

Просто наткнулся сегодня на это

Просто наткнулся сегодня на это

Это не апсерт, и это депрекейтед фича

Не юзай ее

Ну все тогда понятно

Значит по старинке гидратор и потом нативный sql

Странно конечно, я думал в доктрине это реализовали, такая мощная либа

Странно конечно, я думал в доктрине это реализовали, такая мощная либа

Разве это фича ORM?

нет, но ORM для этого и служит, чтобы всякие штуки для работы с базой делать, я и без ORM могу обойтись

нет, но ORM для этого и служит, чтобы всякие штуки для работы с базой делать, я и без ORM могу обойтись

Да нет же, какие нафик штуки? ORM умеет стейт твоих объектов в бд и его оттуда доставать. Апсерт с этой точки зрения - абсурд, объект или существует или нет. Или я чего-то не понимаю?

Да, но видимо, я хочу большего)))

https://symfony.com/blog/new-in-makerbundle-1-8-instant-user-login-form-commands радоваться или печалиться ?

наверное, формошлёпить теперь будет удобнее) но это не точно

https://symfony.com/blog/new-in-makerbundle-1-8-instant-user-login-form-commands радоваться или печалиться ?

пральна, а то чот симфони не дотягивает до ларавэля

наверное, формошлёпить теперь будет удобнее) но это не точно

с одной стороны теперь не будут юзать Fostres

с одной стороны теперь не будут юзать Fostres

я тя умоляю

с другой стороны теперь симфони с мейкер бандлом и есть фосрест

будут брать то, с чем больше результатов в гугле

у лары вообще нет фосов всяких, топчег

предлагаю распиарить maker bundle, чтобы вместо фоса все было свое, симфоняшное

@fes0r а скажи мне вот что

как вы batch запросы обрабатываете?

одной транзакцией или с partial failure?

как бизнесу нужно, обычно patial failure

как бизнесу нужно, обычно patial failure

т.е вернул 207 статус и массив с succes: bool ?

https://developers.google.com/classroom/guides/batch или такую упоротость?

с мультиплексированием запросов

вообще чаще даже без мультиплексирования, просто пачка запросов с клиента

но это не потому что я так хотел...

ну у нас там 100+ запросов тогда выйдет)

но нет, пока не сильно загоняемся - мало таких юзкейсов

пытаюсь найти как другие это делают

ну у нас там 100+ запросов тогда выйдет)

ну у нас выходит где-то 5 в среднем, мало кто больше добавляет за раз

пытаюсь найти как другие это делают

ну массив со статусами не такая уж и плохая идея если честно

тут опять же больше в задачу упирается

а чем тебе не нравится вариант гугла? не тот который ты скинул а его замена на json rpc?)

или тебе просто rpc не нравится?)

https://www.elastic.co/guide/en/elasticsearch/guide/current/bulk.html

тут тоже массивчиком возвращают

а чем тебе не нравится вариант гугла? не тот который ты скинул а его замена на json rpc?)

в смысле?

в смысле?

ну то что у тебя по ссылке это их задепрекейченная апишка не?

а, ну с http2 оно вообще не имеет смысла в принципе)

мы могли б и просто зафигачить пачку запросов, но тогда выйдет рейс кондишен и получится кака на бекенде) а синхронизацию делать не хочется

на пятисотой итерации один flush() по времени стал занимать в 55 раз!! больше

тебе точно там доктрина нужна?

да всё, посыпаю голову пеплом, я вообще невнимательный долбоеб =(

сорян, что выебал вам мозги

да эт нормально)