Или тебе именно с ноды нужно?

та в принципе не обязательно с ноды

axel под виндой работает?

Всем привет Есть 50 тысяч URL'ов, каждый URL ведет на отдельный файл. Посоветуйте пожалуйста, как грамотно скачать все 50к файлов? Может модуль какой-то есть для таких объемов? Размер всех файлов 15-20 Гб Пробовал модули download-file, download, got, запросы улетают и тишина... Пробовал юзать wget - почему то очень долго он скачивает

Через потоки

Через потоки

да, сделать ограничение в потоков 50-100 и норм

axel под виндой работает?

Download Master? )

Download Master? )

можно на fl.ru прогера попросить написать программу недорого

тогда уж

хоть мы и в node чате

хоть мы и в node чате

я так понял ему всё равно как скачать

так а какая проблема с миграцией?

не понял твоего "доехать"

Делаешь миграцию sequelize migration:create по командам вот линк http://docs.sequelizejs.com/en/v3/docs/migrations/ и потом в самой миграции что то типо такого https://gist.github.com/anonymous/9e0411ee876fe5c9d8243bd5ba6f312e сам недавно в первый раз с таким столкнулся

Тебе же 1 колонку добавить к таблице нужно?

Вот в том гисте рабочая миграция. Надо было в готовую базу 1 колонку к таблице добавить. Больше ничего не надо писать. Модель там полностью описывать.

либо генерить файлы миграции, что наверное удобнее

миграции имеют свой конфиг + таблицу в бд

блин, это шаблон же

да

я конкретно по seq* не скажу, говорю о механизме миграций

ты имеешь базовую schema и файлы миграции, которые приводят бд к текущей схеме можешь при помощи migrate+seed создать бд , потестить к примеру, откатить... и всё это без CREATE\DROP\ALTER

Пытаюсь установить модуль npm i canvas, получаю ошибку: > canvas@1.6.5 install /var/www/path_to/node_modules/canvas > node-gyp rebuild ./util/has_lib.sh: 31: ./util/has_lib.sh: pkg-config: not found gyp: Call to './util/has_lib.sh freetype' returned exit status 0 while in binding.gyp. while trying to load binding.gyp gyp ERR! configure error gyp ERR! stack Error: `gyp` failed with exit code: 1 gyp ERR! stack at ChildProcess.onCpExit (/usr/local/lib/node_modules/npm/node_modules/node-gyp/lib/configure.js:305:16) gyp ERR! stack at emitTwo (events.js:106:13) gyp ERR! stack at ChildProcess.emit (events.js:191:7) gyp ERR! stack at Process.ChildProcess._handle.onexit (internal/child_process.js:215:12) кто знает, как это исправить?

pkg-config: not found

надо чтобы нашелся

а где он должен быть? и кто его должен создать? не понимаю :(

все заработало, надо было установить пару пакетов

var всемПривет = [Георгий Котов, Автотрейдинг, Делюсь опытом && приношу идеи, быть вкурсе && познакомиться с интересными людьми, SPB, пост Сергея Кокшарова]

1с какой то

Русский то это ок. JS на любом можно писать. А вот название переменных с пробелами тоже конечно можно если пробелы какие-нибудь неразрывные

Не совсем удачная идея для представления.

Русский то это ок. JS на любом можно писать. А вот название переменных с пробелами тоже конечно можно если пробелы какие-нибудь неразрывные

Я о переменных

Накинул http://bysin.net/2017/05/07/no-good-reason-to-use-nodejs/

TLDR

> I’d also like to point out that the C++ server (listed as Boost.Asio on the graph) is not using an asynchronous event-based networking model, but a thread-per-connection blocking network model

Boost.Asio ... is not using an asynchronous event-based networking

Да он поехавший походу

http://bysin.net/assets/nodejs/sync_server.cc

тут треды

Ну в любом случае графики похожи на мои тесты.

Примерно на 4к запросов в секунду начинается тупняк

Но это скорее претензия к коровому нетворкингу. Где 0 аллокаций как в go?

Где в го 0 аллокаций?

http://bysin.net/assets/nodejs/sync_server.cc

Да, верно. Но тут не хватает http парсера

Где в го 0 аллокаций?

Fasthttp

> Zero memory allocations in hot paths

Ну так это мало о чем говорит

Ну то есть, быстрый и быстрый

Ну то есть, быстрый и быстрый

А там есть сравнение количество алокаций с обычным.

Не, ну это нормальный подход к оптимизации

Но то где 0 - выглядит как лукавство

Все равно нужно аллоцировать объект сокета, реквеста и т д

Ну вот а где в ноде стремящейся к минимуму аллокаций подход. Я так понимаю нужно для одного запроса не пересоздавать объект запроса

А использовать имеющийся ну если все параметры одинаковы

Ну это никто не мешает сделать и посмотреть что будет

Из коробки такое сделать нельзя

Все равно нужно аллоцировать объект сокета, реквеста и т д

Так он видимо преалоцирует достаточно и работает с объектом на уровне байтолюбвт

Ну да, пулить можно

И парсить лениво можно

на уровне tcp? на чем кстати http модуль написан?

Ребят, что за магия? Проверяю массив, массив ли это, а также есть ли у него forEach Array.isArray(arr) && arr.forEach Проходя эту проверку, все равно падает приложение, что forEach не функция WTF?

Падает приложение не при каждом вызове Случаи не сказать, что единичные, но редкие

Array instance of Array же

Array instance of Array же

ES6

Ну, я бы для начала развернул условие в полное. Array.isArray(arr) && typeof arr.forEach === 'function'

Ты ведь именно это хочешь проверить, а не то что в объекте есть некий .forEach

Зачем проверять есть ли у массива метод массива?

Зачем проверять есть ли у массива метод массива?

Потому что до этого он прошел проверку на массив

Ты ведь именно это хочешь проверить, а не то что в объекте есть некий .forEach

Да, согласен Не думаю, что ответит на вопрос, но сейчас выкачу изменения

Не это ли называется утиной типизацией? Распространенный подход

Зачем проверять есть ли у массива метод массива?

Вообще, думаю стоит вот это еще глянуть: http://web.mit.edu/jwalden/www/isArray.html

Сейчас чекну какой-то из модулей xml parser

xml2js

Тут много где дергаются массивы, но при этом падает он именно в одном месте

Я бы попытался поймать этот объект. Возможно это не совсем массив, или какая-то модифицированная версия.

Я бы попытался поймать этот объект. Возможно это не совсем массив, или какая-то модифицированная версия.

Да я тупнул до праздников, только сейчас вспомнил о try/catch Буду теперь ждать, пока баг упадет

parseString

Если один элемент, то модуль возвращает его (объект) Если их много, то возвращает массив. При этом каким-то макаром переменная (в которой находится массив\объект) проходит проверку на массив и проверку на forEach и все равно падает.

Информирую, на всякий