там на коленке скриптик просто

Стринги — не для мужиков.

я этим же мотивировался!

в байтах или стрингах

Смотря чем мотивироваться. Байты совсем немного быстрее, но писать на один символ больше и надо об этом не забыть.

ну ок, спасибо, я потом подправлю

может быть ты еще и с snmp случайно на третьем питоне работал? :)

Работал, но это было давно и я не доделлал проект - уволился раньше

может быть ты еще и с snmp случайно на третьем питоне работал? :)

Неплохо тебе судьба намекает. ;)

Неплохо тебе судьба намекает. ;)

Я из-за нового начальника уволился, а не из-за snmp)

а какую либу использовали?

Я из-за нового начальника уволился, а не из-за snmp)

Судьба не всегда действует прямо.

Я же вроде писал выше, обычный pysnmp

Но там надо было десяток свитче опросить всего раз в несколько минут

https://github.com/fgimian/easysnmp

это детский лепет, а не библиотека

там половины функций не реализовано

да и вообще это обертка над netsnmp

Опроси 20к железок :)

тот проект я на ГО переписал, там было очень критично быстродействие, который мне даже не дал асинхронный pysnmp

но сейчас надо другой делать, там по сути OSS для инженеров

они кнопочку нажали в веб форме, сделался запрос на свитч, что-то там сделал

Ну запали тогда на голэнге со всеми функциями

библиотеку?

тот проект я на ГО переписал, там было очень критично быстродействие, который мне даже не дал асинхронный pysnmp

я боюсь спросить что ж вы там делали, что вам даже асинхронный питон не помог

gosnmp

Может его допилили, но на тот момент, что я использовал pysnmp, он как-то странно работал под трешкой. Я в куче мест словил бесконечный цикл, при условии, что на 2x со старой версии либы было все ок

я боюсь спросить что ж вы там делали, что вам даже асинхронный питон не помог

он помог, но ГО быстрее

32 сек против 22 у меня получилось в среднем

при меньшей нагрузке на сервер, почти в 2 раза

1к устройств в секунду примерно опрашивает

это топология интернет провайдера

да я уже понял. там, скорее всего, всё в asn1 уперлось

Если хочется быстро - скорее всего придётся писать свою реализацию поверх epoll ну или хотя бы uvloop/asyncio.

он помог, но ГО быстрее

а на питоне что использовал?

Если хочется быстро - скорее всего придётся писать свою реализацию поверх epoll ну или хотя бы uvloop/asyncio.

можно просто взять gevent/eventlet

Это если 2x

Если хочется быстро - скорее всего придётся писать свою реализацию поверх epoll ну или хотя бы uvloop/asyncio.

uvloop не запустился с netsnmp

а на питоне что использовал?

netsnmp, пробовал сменить на pysnmp

там по сути все осложняет то, что это топология дискаверится, новые данные поступают постепенно и их надо обрабатывать сразу, на ГО их просто в горутину закидываешь и все

а на питоне приходилось каждый раз создавать пачку заданий на выполнение

если бы были известны все устройства сразу, то было бы так же

netsnmp, пробовал сменить на pysnmp

Мне эти либы страшно не понравились.

окей, альтернативы?

Я в лобовуху системные вызывал, благо не критично

вот я это тоже хочу делать

через что вызывал, cffi?

или ты команды вызывал?

там по сути все осложняет то, что это топология дискаверится, новые данные поступают постепенно и их надо обрабатывать сразу, на ГО их просто в горутину закидываешь и все

gevent.spawn в помощь.

да не будет быстрее на питоне

Я команды вызывал. Была еще идея воткнуть како-нибудь twisted, но отказался по итогу

не не, команды это сразу нет

я думал дергать сишные функции

т.е. все еще рассматриваю такой вариант

я думал дергать сишные функции

но зачем?

или пробовать запустить netsnmp под 3й питон, но не хочется

вообщем, вы какую-то дичь предлагаете

потому что синхронный pysnmp слишком медленный

выше я приводил бенчмарки

в 10 раз медленее утилиты

Хотя можешь импортнуть из твистед его snmp модуль.

0.2 сек только подготовка к вызову

ERROR: S client not available

Хотя можешь импортнуть из твистед его snmp модуль.

он еще медленее :)

Тебе же сетку мониторить, как я понимаю

нет

H H, [18.06.16 18:41] но сейчас надо другой делать, там по сути OSS для инженеров H H, [18.06.16 18:42] они кнопочку нажали в веб форме, сделался запрос на свитч, что-то там сделал

А, у нас такое реализовано.

у меня тоже, на втором питоне с netsnmp

все очень хорошо работает

потому что синхронный pysnmp слишком медленный

что мешает использовать его в асинхронном режиме?

потому что одна железка

если ты несколько раз ее опросишь параллельно, она ребутнется

Я тут вспомнил, что к меня коллега писал быструю опрашивалку для ipmi/snmp. Но если первое точно работает, то по втором как-то мало строк на гитхабе, может оно и не доделано. Если ответит - напишу.

если ты несколько раз ее опросишь параллельно, она ребутнется

Это что за железка такая?

Это что за железка такая?

их тысячи, свитчи на чердаке

потому что одна железка

очередь. пачка воркеров-опрашивателей разгребающих очередь. в чем трабл? )

Я тут вспомнил, что к меня коллега писал быструю опрашивалку для ipmi/snmp. Но если первое точно работает, то по втором как-то мало строк на гитхабе, может оно и не доделано. Если ответит - напишу.

спасибо

Так что за железо то?

очередь. пачка воркеров-опрашивателей разгребающих очередь. в чем трабл? )

потому что это интерактивно все, в реалтайме

это не очередь заданий, это у меня тоже есть, для других вещей

вы предлагаете как с костылями бороться, что не очень правильно

Так что за железо то?

да я же говорю, много моделей, точно пробовал на длинке каком-то сделать cablediag асинхронно на всех портах - ребут

ну вот и не надо напрямую юзеру давать пинать такие вещи.

пусть по графику ставятся таски, выполняются и юзер имеет фидбек

это не юзер, а инженер

а инженер — не юзер? инженер — софт? :)

да я же говорю, много моделей, точно пробовал на длинке каком-то сделать cablediag асинхронно на всех портах - ребут

Ребут??? Или ты каблдиаг делал на оптических портах?

потому что это интерактивно все, в реалтайме

что? и что мешает в эту очередь в реалтайме добавлять?

который может тоже самое сделать и руками на свитче

что? и что мешает в эту очередь в реалтайме добавлять?

именно.

но ты же код пишешь не в блокноте

я могу легко разом опрашивать хоть 10к устройств