Файлы кажется

И пакет заюзал для Кеша запросов

Т9 бесит

я вот не знаю, почему редис так делает. чем меньше chunk, тем больше не попадает в редис. или это чанк виноват )

я с ним только сегодня познакомился )

я с ним только сегодня познакомился )

попробуй лучше транзакции для таких больших объемов а не чанки

не понял, в выборке использовать транзакции? DB::transaction ?

у редиса есть транзакции

почему именно пайплайн выбран?

https://redis.io/topics/transactions

на вставке куда большими объемами транзакции отрабатывали идеально ничего не теряя

изначально было так:

$marks = \DB::connection('infodb')->table('marks')->select('id','status')->get(); \Redis::pipeline(function($pipe) use($marks,$i) { foreach ($marks as $mark) { $i++; $pipe->set($mark->id, $mark->status); } echo $i; });

value сильно большое? сколько весит 1.3 млн id/value примерно?

db0:keys=1359430,expires=0,avg_ttl=0 used_memory_human:79.01M Но скрипт часто падает, что ему памяти не хватает

лимит у php 1024

в общем в любом случае сколько бы не весило - начинай транзакцию в редис, получай данные чанками с бд, после получения ставь в очередь редиса и при завершении получения данных только делай экзекьют транзакции. ничего не должно упасть на транзакции. а на пайплайне вероятно не успевает все распарсить, хотя конечно маловероятно.

value integer 1-25\

первый раз вообще слышу чтобы редис что-то терял, при условии что ему это конечно отправляли

посмотри в статистике редиса после обнуления сколько обращений было фактически, может позволит найти причину

ок. спасибо, посмотрю

Проверил, по total_commands_processed видно, что серверу поступило количество команд, равное правильному количесту необходимых записей. (на 2 различается, 103265). А в бд редиса попало только 73173. Буду транзакции пробовать.

интересно. а данные точно уникальные?

да, идентификатор в бд

c multi и exec тоже самое (

Нашел проблему. Это chunk виноват.

происходит непонятная вещь, что чанками получается массив с неуникальными значениями.

$redis->multi(); \DB::connection('infodb')->table('marks')->select('id', 'status')->chunk(30000, function ($marks) use (&$redis,& $i, &$ar) { foreach ($marks as $mark) { $ar[] = $mark->id; $i++; $redis->set($mark->id, $mark->status); } echo $i . '<br />'; }); $a = array_unique($ar); echo count($a); echo count($ar); $redis->exec();

НАШЕЛ РЕШЕНИЕ!

?

Связано ли с тем, что используется postgresql, но chunk нормально работает только с orderby

\DB::connection('infodb')->table('marks')->select('id', 'status')->orderby('id')->chunk(30000, function ($marks) use ($redis, &$i, &$ar) {

вот так нормально чанк отрабатывает и не дает дублией

Кучу времени убил, хорошо хоть решилось. Так что редис не виноват

)))

ему просто дубли скармливались

жаль в документации это не отражено, нашел на гитхабе )

но это скорее к Postgresql относится: When using LIMIT, it is important to use an ORDER BY clause that constrains the result rows into a unique order

https://tproger.ru/news/summer-2016-was-a-turning-point-in-the-history-of-russian-web-dev/

работал-работал и отвалился

лол

Кто-то не умеет в исключения

эм?

это дебагер

и ожил снова

как я люблю эти внешние сервисы

Я про разработчиков гугл со своим file_get_content

а, ну это гугл - всё ок

у меня там больше бомбило, что в пакете нет возможности отключить verify_peer

раньше в пыхе дефолтно было офф, потом в более новой версии сделали он

и пошло-поехало

отваливаться всё

хардкод прямо в пакете - наше всё ?

Подскажите можно ли в eloquent вставить вставить в самый конец запроса сырую строку, к примеру OPTION max_matches=50000

добрый вечер дамы и господа

как мне в элоквенте взять только одно поле из строки?

User::where('id')->get('fieldname');?

забыл сказать "окей, гугл"

да в доке слабо описаны атрибуты функций

метод pluck

или value

ERROR: S client not available

я в том смысле, что обязательно мне всю строку тянуть? Одно поле никак?

кастомный запрос тогда

Разве value не рашает проблему ? Как выше ответили

User::select('field')->...;

во

сенкс

pluck уже из коллекции фильтрует

да

ale

op

как задать группе роутов обработчик?

для префильтрации например

Хочу заказать телеграм бота с мордой под ключ, данные которые собирает бот отправлялись на сайт в таблицы. Сколько примерно стоит реализация такого ?

как задать группе роутов обработчик?

уже не надо, уже допер

У меня есть ApiController и контроллеры в папке Api/. Как мне сделать, что бы при вызове каждого контроллера в папке /Api этот контроллер наследовался автоматом от ApiController? Знаю что через сервис-контейнер или провайдер как то, но чет не осиляю. Даже с гуглом и документацией

это ж по сути DI получается

вообще впервые с IoC и DI сталкиваюсь

кто ответит дам админку порулить

?

Хочу заказать телеграм бота с мордой под ключ, данные которые собирает бот отправлялись на сайт в таблицы. Сколько примерно стоит реализация такого ?

Пиши в личку

У меня есть ApiController и контроллеры в папке Api/. Как мне сделать, что бы при вызове каждого контроллера в папке /Api этот контроллер наследовался автоматом от ApiController? Знаю что через сервис-контейнер или провайдер как то, но чет не осиляю. Даже с гуглом и документацией

не совсем понял, в чем проблема отнаследовать их от базового абстрактного BaseApiController ?

ioc не совсем про это

контейнеры по сути реализуют паттерн реестр, ты вызываешь IocManager::getInstance()

у него есть методы типа set(), get()

и create возможно для создания экземляра класса контейнера

которому передаётся текущий класс и набор аргументов

IocManager::create(get_called_class(), func_get_args());

то что ты описал, больше похоже на какое-то динамическое наследование и это не очень хорошая практика

Если нужны общие методы в каких либо классах можно трейты попробовать

А так согласен с Саней. ПРосто экстендишь какой либо базовый класс для API

но у меня этот класс именно что для бутстраппинга юзается