Мы смотрели там просадка на создание чанков и метками. Что собственно не получится избежать.

Кто может объяснить, почему этот код срабатывает только один раз? Если второй раз отправить GET запрос, то происходит бесконечное ожидание от сервера http://pastebin.com/nAt51smZ

Я не особый эксперт, но помоему это какое-то не правильное использование промисов

Объём данных какой?

А я сейчас не вспомню — надо смотреть. По записям — 500 метров был поток, и если парсить всё сразу — оно было медленнее. На небольших объёмах сейчас потестил, прочитать и спарсить всё действительно быстрее чем жсонстримом получилось. Точные числа — 86 метров, 317к записей. 1.4 секунды жсонпарсом на горячую (через require) и 490 метров оперативки, 6 секунд стримом на горячую и 30 метров оперативки. Выигрыш от жсонстрима за счёт экономии памяти и того, что гц с катушек не слетает. Но тот 500 метровый поток я ещё и не хранил, а скачивал по сети, и отдавало мне его не очень быстро — так что на парсинг у меня накладных расходов по сути не было с потоком, всё упиралось в скорость передачи.

https://github.com/Level/levelup уже скинули оратору с 350mb json-ом?

https://github.com/Level/levelup уже скинули оратору с 350mb json-ом?

два человека включая меня ему предлагали бд, говорит, нельзя.

встраиваемую нельзя? а json файл можно?

А я сейчас не вспомню — надо смотреть. По записям — 500 метров был поток, и если парсить всё сразу — оно было медленнее. На небольших объёмах сейчас потестил, прочитать и спарсить всё действительно быстрее чем жсонстримом получилось. Точные числа — 86 метров, 317к записей. 1.4 секунды жсонпарсом на горячую (через require) и 490 метров оперативки, 6 секунд стримом на горячую и 30 метров оперативки. Выигрыш от жсонстрима за счёт экономии памяти и того, что гц с катушек не слетает. Но тот 500 метровый поток я ещё и не хранил, а скачивал по сети, и отдавало мне его не очень быстро — так что на парсинг у меня накладных расходов по сути не было с потоком, всё упиралось в скорость передачи.

Мне все равно данные нужны в памяти для моментального доступа.

встраиваемую нельзя? а json файл можно?

Да я тоже удивляюсь.

Мне все равно данные нужны в памяти для моментального доступа.

LRU cache, как раз в levelup есть

Задача такая. При первой инициализации распарсить бинарник и сохранить кэш для последующих запусков. Сами данные всегда лежат в памяти для моментального обращения к ним.

LRU cache, как раз в levelup есть

Гляну

моментального - синхронного?

Задача такая. При первой инициализации распарсить бинарник и сохранить кэш для последующих запусков. Сами данные всегда лежат в памяти для моментального обращения к ним.

Так тебе лучше шуткой которая сохраняет стейт оперативы для проги юзать

#whois Учусь, работать времени нет. Веб-разработка(front) Пришёл задавать вопросы. Из Ташкента. Из Гугла.

Но не уверен что овчинка стоит выделки

так из Ташкента, или гугла?))

Я из Ташкента, узнал от Гугла.

Парсить пусть даже гигабайт не сильно долгое дело. Может io упираешься так положи файл в память

Нужна помощь. В первом примере на http://learn.javascript.ru/ajax-xmlhttprequest код работает нормально. Мне же пришлось ставить setTimeout на if и else, ибо не успевает подгружать данные с сервера. Почему так?

Вот весь код.

долистай до момента с xhr.onreadystatechange

pro.js.noobs -> https://telegram.me/joinchat/Be4rsT3Uyr1TjmSlrRc77g

А как можно получить данные переданные с клиента?

res.?

т.е. req?

https://developer.mozilla.org/en-US/docs/Web/API/XMLHttpRequest но с такими вопросами тебе точно туда ^

https://developer.mozilla.org/en-US/docs/Web/API/XMLHttpRequest но с такими вопросами тебе точно туда ^

Со стороны nodejs как получить данные? Как отправить с помощью ajax я уже разобрался.

https://nodejs.org/api/http.html#http_class_http_incomingmessage

первый аргумент у requestListener'a

Со стороны nodejs как получить данные? Как отправить с помощью ajax я уже разобрался.

Если expressjs, то body-parser

Со стороны nodejs как получить данные? Как отправить с помощью ajax я уже разобрался.

На learn.javascript.ru подкаст по NodeJS смотрел?

Пока что хард кором. Без express

Ну тогда да, как сказали выше

На learn.javascript.ru подкаст по NodeJS смотрел?

Сейчас смотрю. Говорят что он уже не актуален???

Есть мальца, но это не критично, с учетом качества

первый аргумент у requestListener'a

Понять не могу. Где requireListener?

это функция которую ты передаешь как аргумент в createServer

requESTListener

Ты про req? Всё понял. А как же вытащить из require сообщение или файл?

Совсем запутался. Не require, а request

выведи его в консоль и посмотри где там твои данные лежат.

Уже разобрался. Всем спасибо.

Сделал так:

Справа.

Работал кто-то с socket.io-client на ноде? Мне надо подключится к сокет серверу через ноду

Подключаюсь неофициально, за сервером стоит cloudflare и скорее всего кидает мои запросы в таймаут. Что делать?( Подключился с браузера, в extraHeaders ноде отдал куки браузера с сессией Cloudflare. Но все равно в таймауте. Внезапно, но загрузить просто страничку сайта за cloudflare получается без всяких куков, а сокет отлетает (через nodejs)

ну как варианнт открыть дополнительный порт напрямую хотя cloudflare поддерживает вроде websocket'ы

В принципе зарезолвил IP за CloudFlare, но как мне заставить socketio обращаться к нему напрямую, а не к серверам CF

я бы скзаал ща гляну у нас один аккаунт на клаудфларе ( и админ там не я но помню что как-то обходили

впрочем socket.io может без вебсокетов работать

ну как варианнт открыть дополнительный порт напрямую хотя cloudflare поддерживает вроде websocket'ы

Я не имею доступа к панели, я вообще *в тайне от грозных админов сайта* все это делаю ( ͡° ͜ʖ ͡°)

вот это вообще зря (

Через браузер соединение работает, а через ноду нет

Один и тот же код

через браузер он у тебя деградирует?

Через браузер соединение работает, а через ноду нет

эмулируй заголовки которые шлет браузер и будет тебе щасте

Эмулировал уже

Полный набор хидера браузера

чего-то где-то недоэмулировал походу

в крайняй через фантомку гонять попробуй

не ну если ты через свой сервер это делаешь ходи напрямую

какие проблемы

ERROR: S client not available

Возможно, ибо мои возможности ограничены реализацией socket.io клиента на ноде

чего-то где-то недоэмулировал походу

.

кстати через клаудфлёр ты можешь сделать урл (субдомен) для хождения напрямки, без прикрытия

Нет у меня доступа к панели) Я пишу маленький клиент к стороннему сайту

а ну тады ой, а куки ловишь?

там походу клаудфлёр сам еще мутит свои мутки втихушку, гляди в браузере чего он там присылает

Мне кажется сокет.ио вообще не может нормально устанавливать хидер запроса. Посмотреть, что он там подключает тоже не могу, к прокси клиент подключаться не умеет

Дебага у клиента нет никакого

В принципе зарезолвил IP за CloudFlare, но как мне заставить socketio обращаться к нему напрямую, а не к серверам CF

Как изменить dns кэш внутри ноды глобально?

Чтобы домен по другому ip резолвился

хз nook

попробуй

ну это не dns cache конечно же

ну или проще всего стучать по ip и подставлять нужный хостнейм

ввсего-то

Ага, только это надо будет сурсы модуля клиента править

Это совсем не мой вариант.

Надо чтобы все работало их коробки

ну тогда занукай или еще чем-то подобным лол

Nook? Это файловая система же (грубая формулировка), причем оно тут

https://github.com/node-nock/nock

хотя хз как редирект сделать

ну понятно как редирект непонеятно как вебсокет

А есть какие то варианты посмотреть все обращения ноды в сеть?

В чарлике оно не отображается

Обходит глобальное прокси в ОС, идет по прямому подключению

ну тыэто заверни в докер

и пропиши в контейнере

редирект

изикатка

zhe

Не очень изи