если бы там распределение от кода зависело, то вопрос явно бы был сформулирован иначе так что скорее всего руками на таски ничего не пилилось, работает поверх какой-либо либы

А что они делают то? io?

не, там всякая шляпа типа работы с кешем, со строками и тп

Или числодробилки? БД?

Скорее всего эти два треда прост успевают подхватить твои таски)

ну я тоже так думал, но при этом цп улетает в 100%

Как цп смотришь

что хотя может быть из-за тех же походов в базу

в лс.. ну вообще из jmc как раз

sar -P ALL 1 10

Тред дамп сделай

Посмотри в каком состоянии висят

kill - 3 если что)

ну вот эти два работающих РАННАБЛ, остальный паркинг

На чем ранбл

И сделай в линуксе top ещё

да я старые jfr смотрю, топ негде брать)

ранбл на работе с кешем

Че за кэш

Смахивает на дедлок)

эээ, не так то все работает

Нагрузка на приложуху сильная?

Продолжая мой вброс. Многие тут отличают например PARKING от WAITING?

Возможно просто эти два треда гвоздями прибиты к узкому месту

прибиты и жрут всё цпу? ну вообще вариант интересный получается..

ну возвращаясь к изначальному вопросу, распределение некурильщика по форкджоин воркерам должно быть равномерное?)

Я не знаю чем ты цпу мерил

флайтрекордер мне это показал

вот мол твое цпу, под 100%, вот самые горячие треды (эти два)

Он ж не реалтаим стату показывает

Топ вон может и по 800 процентов показать

Уаааахахахахахахахах

Даже и больше

В кэшах любят делать спинлоки, тогда впринципе твои проценты объяснимы

для 8 ядер 800% это нормально жи?

Нормально

Если в топе мерить

для 8 ядер 800% это нормально жи?

Load average при этом какой? 8?

Load average при этом какой? 8?

Wat

ну короче пофиг о чем вы, в jmc 100% - это максимум, к топу никак не относится

А ты че ему так доверяешь

Проверь топом)

да каким топом, если я смотрю старые нагруженные jfr?

Ну тогда отдохни и забей?

Топ вон может и по 800 процентов показать

@le_xs ну я предполагаю что имелось ввиду да

никогда в топ не смотрю на самом деле

htop же

Так и не нашел в коде sbt проверки подписей

И не вижу нигде указания, каким ключом эта подпись делалась -_-

Правильно говорят, надо load average смотреть. Если больше кол-ва ядер - печаль

htop же

++

@denis_davydkov почему печаль? зависит от целей

так-то иногда и половина печаль

а иногда и в два раза больше норма (но это все-таки исключительный случай должен быть)

Ну а какие могут быть цели, если у тебя грубо говоря задач становится больше чем может одновременно быть обработано. Помню было что CPU около 5-10%, а load average подскачил в три раза - все стало тормозить безбожно. С сетью были проблемы

> а иногда и в два раза больше норма Значит вторая половина “ждет” - не думаю что это норма ))

А половина - ну да тоже не айс, “недоутилизация”

Как пиво без водки

TIL java.text.SimpleDateFormat не thread-safe

Убил полдня на то чтобы поймать ошибку вызванную этим курьезным фактом

И не вижу нигде указания, каким ключом эта подпись делалась -_-

Айдишник ключа в подписи содержится, оказывается.

load average на то и среднее, что надо понимать на каком периоде усреднение берется, иначе можно просто продолбать, что нагрузка рваная и подается пиками также лучше смотреть утилизацию по отдельным ядрам, а не общую видел, живые примеры, когда забиты пара ядер, а остальные курят (хотя для большинства местных обитателей это произойдет скорее всего никогда)

а иногда и в два раза больше норма (но это все-таки исключительный случай должен быть)

Я видел порядка 80-100. На 8ми ядрах. При этом все работало.

пример который вчера был с полной загрузкой на двух ядрах, тоже показателен поскольку больше двух потоков для работы не требуется, то полная утилизация не аффектит задержки (нет ожиданий в очереди задач) хотя нормально метрики снять все же стоит =/

Кто пробовал коррекцию ошибок Петера Норвига для русского языка? Как оно?

ERROR: S client not available

Кто-то в курсе, что у Akkи сейчас с Typed? Я правильно понимаю, что они TypedActors выкидывают на помойку и предлагают http://doc.akka.io/docs/akka/2.4.10/scala/typed.html пользовать?

Кто пробовал коррекцию ошибок Петера Норвига для русского языка? Как оно?

Хуже, чем любой алгоритм, который учитывает морфологию. Ну или надо ему на входе скормить все формы

Тот же hunspell будет лучше, если скорость не критична

есть с десяток подходов до коррекции ошибок, смотря что надо

скорость и качество

я на одном проекте использовал хитрый поиск по n-gramm с учетом edit distance, но там специфика задачи такое позволяла

(оно достаточно дорогое по ресурсам, ну и надо эти самые нграммы иметь)

Хуже, чем любой алгоритм, который учитывает морфологию. Ну или надо ему на входе скормить все формы

Ему все формы и скармливают вроде бы.

я на одном проекте использовал хитрый поиск по n-gramm с учетом edit distance, но там специфика задачи такое позволяла

Это типа коррекция через word2vec? Находим векторы с ближайшим расстоянием?

близко, но не совсем, word2vec скорее про сематическую близость

в моей случае был "перебор популярных словосочетаний"

близко, но не совсем, word2vec скорее про сематическую близость

Это понятно. Я где-то читал что ворд2век можно использовать для коррекции, если учить его не на редактированных текстах.

через word2vec тоже можно сделать, насколько это уместно, зависит от предметной области

да, тут вопрос как раз в количестве данных для обучения

Ему все формы и скармливают вроде бы.

Это плохо работает с неологизмами и жаргонизмами. Да и с обучением тоже не фонтан. Но если имеется прямо-таки свежий снапшот русского языка, будет терпимо

Мне вообще надо что бы оно просто работало в первом приближении. А Петер Норвиг это 20 строк кода и словари из чего угодно. По этому и спрашиваю.

грубо говоря, если есть 10% от потенциально используемого жаргона, то w2v сработает лучше нграмм

есть 50%, то нграммы лучше

Мне вообще надо что бы оно просто работало в первом приближении. А Петер Норвиг это 20 строк кода и словари из чего угодно. По этому и спрашиваю.

В первом точно будет

кстати, а есть тг-чат для околомльнонлпшных обсуждений?

Спасибо, ребята.

кстати, а есть тг-чат для околомльнонлпшных обсуждений?

вроде был, но не уверен что найду большое сообщество есть в слаке

гляну, спасибо

opendatascience если что

ага, спс

Гайз, можно скинуть вакансию? Могу ответить на вопросы по вакансии. Хочу помочь нашим HR’ам найти хороших спецов :)

Скидывай конечно.

как обсуждалось, вакансии от девелоперов это ок

https://jobs.dou.ua/companies/megogonet-/vacancies/19267/

сюда еще не скидывали вакансий в Киеве, поэтому может быть интересно киевским скалистам

и сразу пишете можно нет на удаленку. многие хотят =)