Запросы по http

Я понял, только зачем их прерывать ? Обычно если они работают зеркально, то запрос посылается в инстансы и кто первый ответил, того и тапочки

Можно конечно заморочиться, но там столько пограничных условии , что атата

Проблема в том, что они отдельно работают и ничего не знают друг о друге.

Да? Я думал, что достаточно статуса != 200

В тех же одноклассниках посылают запрос на пул и получают два самых быстрых ответа, на остальные тупо забивают

Если не 200 то эт не валидный ответ сразу)

Мне этого достаточно

Ну если задача долгая, то пошли запрос на отмену всем

Просто я могу про специфику очень долго распинаться, но это имеет мало отношения к вопросу. Пока я не придумал ничего лучше итератора для списка хостов и блокировки до прихода ответа. Но считаю, что это глупо.

Нет. Задача опрос рест апи, ответ часто закеширован, но не всегда.

А если цепочка фьючей? Один закончился с фейлом - делаешь recover с новым фьючом. И так итерируешься по всем хостам, но не блокируясь.

Пошли параллельно всем http запросы, дождись первого, на первом пошли всем отмену, если ответ успеет прийти, то игнорируй

Пошли параллельно всем http запросы, дождись первого, на первом пошли всем отмену, если ответ успеет прийти, то игнорируй

Спасибо, пожалуй так и поступлю. Как такой подход под нагрузкой себя может повести? Это я уже скорее из любопытства.

Нормально

А если цепочка фьючей? Один закончился с фейлом - делаешь recover с новым фьючом. И так итерируешься по всем хостам, но не блокируясь.

Спасибо!

Я бы на самом деле даже назад бы ничего не слал, хотя эт зависит от типа задачи

Назад нужно, т.к. если не закеширован, то что-то тяжелое может быть, но это редко.

Ну эт если к тебя задачи долгие

Если нет, то незачем сеть нагружать

Предельный случай времени 71 час.

Поэтому имеет смысл.

А, ну тогда шли

71 час)

Еще раз огромное спасибо за помощь

А что за задачи такие, на 71 час

Выгрузка отчета из оракла по факту выполнения обслуживания самолета

Какой то большой отчёт)

Ну да... Но скорее просто написано не очень. Т.к. слишком много вычислений там и индексов нет почти. Про организацию хранения лучше умолчать.

И опять же это предельный случай. Обычно сильно меньше.

Подскажите, где можно посмотреть примеры программ на Free?

в воображении и на конфах, видимо =)

Например https://github.com/tpolecat/tuco

Или сразу doobie

Лучше смотреть издалека

у меня вопрос есть, на чем сейчас грабберы принято писать ? javascript не нужен

tagsoup + xpath?

мне jsoup нравится )

еще есть такая штука http://htmlcleaner.sourceforge.net/

И опять же это предельный случай. Обычно сильно меньше.

Хорошо слышать, что обычно сильно меньше 71 часа выполняется запрос

:D

может он там биткоины маинит?)

А получается что клиент ждёт, пока ответ не пришёл?

А получается что клиент ждёт, пока ответ не пришёл?

было б забавно, если б на след день этот отчет был бы уже не валиден xD

Клиент, имею в виду сервис который запросы делает, не ui

Непосредственно когда пользователь работает с самим ораклом (оберткой над ним) то нет. Отчет показывается в списке доступных.

было б забавно, если б на след день этот отчет был бы уже не валиден xD

Это отчет который финализирует работу предприятия с этим воздушным судном, он не устаревает

Нельзя реализовать что-то типа вебхуков? Отправляешь запрос, тебе сразу приходит ответ что запрос поставлен в очередь. Когда там посчитается отчёт, сообщаешь своему сервису о том что все посчитано

Или ты не имеешь власти над тем сервисом который делает отчёты?

Туда у меня доступа нет и не будет никогда.

Ясно

Непосредственно той частью занимается несколько людей, которые свято уверенны, что все кроме оракл версии 8.3 это от лукавого, а языки моложе жавы 1.4 это глупости и незрелый новодел. Примерно так.

Ну еще PL/SQL

tagsoup + xpath?

спасибо , я буду смотреть

вообще хотелось бы весь текстовый контент получить страницы максимально быстро.

о, это иначе решается

раньше были библиотеки boilerpipe и goose, но они, емнип, умерли. сейчас надо смотреть в сторону apache tika и, если нет привязки к JVM, scrapy

scarpy медленный вроде же , ну и плюс там всякие xpath ,,,чтобы распарсить страницу

без подобных библиотек со страниц не выбросить рекламу, навигацию и прочий мусор. boilerpipe до сих пор должен нормально работать: там было много эвристик

без подобных библиотек со страниц не выбросить рекламу, навигацию и прочий мусор. boilerpipe до сих пор должен нормально работать: там было много эвристик

а почему забросили ?

без подобных библиотек со страниц не выбросить рекламу, навигацию и прочий мусор. boilerpipe до сих пор должен нормально работать: там было много эвристик

спасибо

а почему забросили ?

автор понял, что пора переходить на го ?

хотя нет, на го очередной порт. тогда у меня нет версий

наблюдение: хотел товарища перетянуть на правильную сторону, что бы он начал изучать скалу во имя добра.. а товарищ мне отвечает: "да кому сдалась эта ваша скала? все со скалы на го переходят! Одерски на гитхабе вообще почти не контрибутит в скалу" (но товарищ не знал, что Мартин там в дотти контрибутит ого-го сколько) а еще говорит - "typesafe отказалась от скалы и что бы их не ассоциировали со скалой, им даже бренд пришлось сменить!" вот мы тут шутки шутим, а много мнительных людей на свете.. хотя может и правильно, что они присоединяются в другие сообщества..

наблюдение: хотел товарища перетянуть на правильную сторону, что бы он начал изучать скалу во имя добра.. а товарищ мне отвечает: "да кому сдалась эта ваша скала? все со скалы на го переходят! Одерски на гитхабе вообще почти не контрибутит в скалу" (но товарищ не знал, что Мартин там в дотти контрибутит ого-го сколько) а еще говорит - "typesafe отказалась от скалы и что бы их не ассоциировали со скалой, им даже бренд пришлось сменить!" вот мы тут шутки шутим, а много мнительных людей на свете.. хотя может и правильно, что они присоединяются в другие сообщества..

всё правильно товарищ сказал

ERROR: S client not available

ну я не пишу на скале каждодневно, но мне почему-то кажется что комунити растет и в целом ситуация с каждым годом улучшается. показалось?

пока непонятно

давно больших крутых продуктов на скале не было

к счастью в целом они есть и это заставляет порой людей писать на скале (хотя как верно замечено некоторые пытаются от скалы отмазаться)

IT шоу с хороводами

Вот у котлина все наоброт - его публично многие типа любят, но вроде еще нет ни одного нормального проекта на котлине

опенсорного

громкого

а зачем, если он для тырпрайза как лучшая джава?

а тырпрайз уже принимает в себя котлин?

ну было бы круто если бы апи чего-то использовало силу котлина

иначе какой смысл

т.е. смысл есть и польза, но она слишком мала

кекс рассказывал что используется в тырпрайзе

с таким же успехом можно было и на скале писать

адопшн идет

да не нужна скала типичным спринго-тырпрайзам

ну я не пишу на скале каждодневно, но мне почему-то кажется что комунити растет и в целом ситуация с каждым годом улучшается. показалось?

практически всё, что есть на скале офигенного родилось и развилось до своего офигенного состояния с отсутствующим или ограниченным воздействием энтерпрайзов, людей смотрящих на звёздочки в гитхабы и т.п. Когда на технологии начинают делать слишком много денег, она становится зависимой от бюрократизированных комьюнити процессов, обратных совместимостей и корпоративных заказов. Так что если мы хотим видеть скалу в передовых рядах компиляторных фронтендов, стоит поддерживать определённую хипстерность языка и очень умеренное количество прагматично-настроенных юзеров.

Так понимаю, неясным в вопросе похорон Scala остался только один момент: когда устроить поминки.

Так понимаю, неясным в вопросе похорон Scala остался только один момент: когда устроить поминки.

26-го в мск помянем.

там столько желающих уже, что я переживаю не за "хватит ли всем места?", а за "хватит ли всем пива?"

Сейчас 80. Обычно приходит треть.

Может приехать в Москву

хочешь лично спросить почему не нетти?

Да

ну вот на нет у меня была рифма заготовлена

а так я растерялся

А какие темы докладов? Ну кроме 'почему не нетти?'

ну вот на нет у меня была рифма заготовлена

Ну тогда, нет)

ну теперь не так интересно

А какие темы докладов? Ну кроме 'почему не нетти?'

Ни кто не хочет в докладчики. Один отказался, трое пока не подтвердили.