array_walk(array_chunk(file('myfile.txt'), 10), function($value, $key, $prefix){file_put_contents($prefix.'_'.$key.'.txt', $value);}, 'newfilename' );

file_put_contents (s пропустил) в первом варианте.

сейчас работает

?

а что теоретически шустрее? fopen+fwrite+fclose или file_put_contents?

file_put_contents

ок, спасибо

ИМХО. Потому как fopen идет команда на открытие файла, потом дескриптор открытого файла передается обратно в "пхп" код, делается связка, потом какждый fwrite получетс пхпешный дескриптор, переводит в системный, пишет по нему в файл. Потом на закрытии аналогично. А при file_put_contents, на системном уровне открылось, пихнулось, закрылось, получило код ошибки.

Люди. Такая проблема с composer. Пытаюсь стабилизировать набор пакетов, чтобы базовый пакет мог ставиться с minimum-stability по умолчанию, т.е. stable. Свои-то пакеты все стабилизированы, но один из них зависит от стороннего пакета, который есть только в dev-версии. Соответственно, установка обламывается по «conflict with your requirements or minimum-stability». Если ли возможность как-то указать в своём пакете что-то типа «я знаю, что делаю», чтобы корневой пакет мог работать с minimum-stability: stable?

укажи именно этот пакет как не стабильным

@dev в версии? Для некорневых composer.json оно игнорируется.

ИМХО. Потому как fopen идет команда на открытие файла, потом дескриптор открытого файла передается обратно в "пхп" код, делается связка, потом какждый fwrite получетс пхпешный дескриптор, переводит в системный, пишет по нему в файл. Потом на закрытии аналогично. А при file_put_contents, на системном уровне открылось, пихнулось, закрылось, получило код ошибки.

с мелкими файлами нормально работает. скормил скрипту файл 26мб с 2,5млн строк с делением по 1млн. сервер выдал 500 ошибку. еще больше лимит памяти делать или каким то другим образом делать разбивку? сейчас выделено 256мб

с мелкими файлами нормально работает. скормил скрипту файл 26мб с 2,5млн строк с делением по 1млн. сервер выдал 500 ошибку. еще больше лимит памяти делать или каким то другим образом делать разбивку? сейчас выделено 256мб

У тебя задача Большие файлы на несколько бить?:-)

да

от 1млн строк

Тогда память не трогай, читай большой файл построчно и пиши по счётчику в новые файлы

fgets?

Функции file() и file_get_contents() лучше не используй для больших файлов и сам не забудь поэкспериментировать, а то может я чего не знаю или обманул где то:-)

fgets?

Ага, если не csv

обычный текстовый

.... 357516540 357516568 357516669 .....

fgets?

Да

Ты ещё наверное в веб морде это делаешь?

Какая система? Обязательно пхп? Если линух, то там одна команда, можно попробовать через ехец или систем если шела нету

vps, linux

split -l (кол-во линний)

http://rus-linux.net/MyLDP/consol/split.html

пошустрее должно быть

поделил за 1 сек)

Я делил 50 гиговые текстовики ?

осталось только с параметрами разобраться)

может кому понадобится: array_map("unlink", glob('output*')); array_map("unlink", glob('input*')); $tmp_name = $_FILES['file']['tmp_name']; $name = 'input.txt'; move_uploaded_file($tmp_name, $name); exec('split -l 1000000 input.txt output.'); $i = 0; foreach (glob('output.*') as $filename) { $i++; rename($filename, 'output_'.$i.'.txt'); $link = 'https://'.$_SERVER['SERVER_NAME'].'/devider/output_'.$i.'.txt'; echo '<a href="'.$link.'">'.$link.'</a><br />'; }

В сплит можно задать чтобы он числовые ключи отдавал сразу, тогда не нужно ренейм.

Привет народ,пару месяцев назад сдал ZCPE,планирую плотно сесть за фреймворки, посмотрел ZF3,комьюнити что то не нашел,документация ветка 2.4, по 3 все еще нет. Кто что посоветует?Что сейчас востребовано на рынке?

В сплит можно задать чтобы он числовые ключи отдавал сразу, тогда не нужно ренейм.

не нашел такого. так потянет)

-d use numeric suffixes starting at 0, not alphabetic —numeric-suffixes[=FROM] same as -d, but allow setting the start value

-a, —suffix-length=N generate suffixes of length N (default 2)

Не заметил)

Может быть будет кому интересна вакансия по Laravel. ЗП от 125 000 руб. Санкт-Петербург, Петроградская Опыт: 3–6 лет Обязанности: Разработка high-load проекта по мониторингу рекламы (от себя - проект очень перспективный, B2B, уже написана сама начинка и работает, не стартап!) Требования: Опыт работы в веб-программировании от 3-х лет; Опыт работы PHP (laravel); Знание и опыт работы с JS (angular, reactjs, native), Postgresql, Redis, Memcached; Опыт работы с Elasticsearch && kibana, Опыт работы с Bootstrap; Опыт работы c Git; Опыт работы с bash; Опыт работы с PostgreSQL; Опыт работы с различным NoSQL; Знание английского языка на уровне чтения технической документации и общения с иностранным техническим персоналом; Умение работать в команде, ответственность, инициативность, желание развиваться; Желание усваивать новую информацию Приветствуется: Хорошее знание Python; Опыт использования Grafana Условия: Отличный офис в центре города (м. Петроградская); Комфортные условия + неформальная обстановка; Еда в офисе + оплачиваемые обеды; Оплата спорта; Гибкий восьмичасовой график работы; Оформление по ТК, полный соц.пакет + полис ДМС; Гибкий график работы (предпочтительно с 12.00-21.00).

Если интересно - пишите мне ЛС плиз.

Модеры, сорри за спам!

Если интересно - пишите мне ЛС плиз.

ссыль на hh есть? пропеллер чтоль?

ссыль на hh есть? пропеллер чтоль?

Привет. https://hh.ru/vacancy/19253508 Нет, не пропеллер, но в одном здании с ними.

ссыль на hh есть? пропеллер чтоль?

Не на проект рекламной сети, а B2B софта для мониторинга рекламных сетей.

ссыль на hh есть? пропеллер чтоль?

Проект реально очень интересный и уже рабочий.

вот если бы это был проект по мониторингу софта для мониторинга рекламных сетей...

Коллеги, есть знатоки редиса тут?

Приветствую

А что нужно то?

Я с ним работал года 4, ну не сказать что прямо вдоль и поперек

Короче. Проблема такая

бьюсь пару дней уже

Есть проект, у него мультидоменность

домен под фронт и под бэк

когда чувак логиниться на фронте его 302 редиректом отправляет на домен бека

но на самом беке уже сессии нет

Тоесть

Auth:: check false

Долго думал что за фигня, но увидел в env файле стоит session driver redis

думаю что редис просто не подцепился

связка vm+homestead+vagrant

redis стоит

прошу благословления коллеги

на production все ок

а, я не сказал что это все Laravek

Laravel*

ERROR: S client not available

Да это даже непонятно причем тут редис

Во-первых, сессия не распространяется на соседние домены

Во-вторых, на поддомены она тоже не всегда распространяется - там надо в куках кажется добавить точку, чтобы это происходило

ну сессия не из кук берется а из редиса

В-третьих, я не работал с ларавелем, но вангую что там сессия может именоваться в виде хеша от домена

редис как сторадж вместо кук видимо...

все равно что если бы session driver поставить в database

ну сессия не из кук берется а из редиса

id сессии хранится в куках в браузере

Laravel*

в env или в конфиге?

env

а конгиг далее используется в session.php

################################################ # Cache, Sessions & Queue ################################################ CACHE_DRIVER=memcached SESSION_DRIVER=redis #QUEUE_DRIVER=sqs REDIS_HOST=127.0.0.1

а в session.php

'driver' => env('SESSION_DRIVER', 'file'),

Auth:: check false

Ну задебаж вот эту функцию локально и посмотри почему она возвращает false

Также посмотри какие хедеры и кукисы посылаются при запросах к бекендовому домену

И какие к фронтендовому

id сессии должны быть одинаковые

в homestead хоть он и !@#$% есть xdebug, отловить почему не работает не долго

го скайп поможешь

Пожалуйста

раз не долго

:)

что за школоманеры :) я решаю проблемы других людей только за деньги ;)

Ваш ник, говорит о школоманерах не менее Ивана. Но все же спасибо за хоть какой то ответ

Ваш ник, говорит о школоманерах не менее Ивана. Но все же спасибо за хоть какой то ответ

я не перехожу на личности. за 4 часа как я понимаю решение не было найдено?

Так как мне нужно было задеплоить некоторые правки в админке, пришлось просто на этапе перехода на поддомен dashboard получить вручную Юзверя

но все равно нужно будет разобрраться потом с этой проблемой

Помогите Даше найти затерявшуюся сессию называется :D

Вообще процесс поиска таких багов не детерминированный по времени и может зависеть от многих фактов. Решение может быть найдено как за 15 минут так и за сутки копания в коде и конфигурации. Поэтому естественно браться никто из здравомыслящих не рискнет.

Тебе высказали тут несколько хороших гипотез - проверяй их - смени редис на tmp файлы, отдебаж код, проверь кукисы - и найдется проблема.

@chebotarevp смотри за 4 часа можно проверить такие гипотезы: * redis не запущен, запущен но на не верном порту * можно проверить что класс сессий действительно получает настроку "redis" * не знаю как в ларе но проверить session_save_handler * проверить сессионные куки в браузере * проверить авторизацию в режиме инкогнито * залезть в сам redis и проверить что таблицы/коллекции вообще существуют (есть права на запись) * отключить сохранение сессий в редис и проверить что всё работает или не работает