{'a': {'a':1}, 'b':{'b':2}}

Ну вот последняя моя редакция какая-то такая. Просто коробит слегка, что нельзя комфортно работать с предложенной структрой.

А я как-то посмотрел видос, как негр с пятью азиатками, и тоже так захотел

А я как-то посмотрел видос, как негр с пятью азиатками, и тоже так захотел

вот ты сказал, и теперь я тоже так хочу!

Еще троих осталось найти вам

А я как-то посмотрел видос, как негр с пятью азиатками, и тоже так захотел

а что не так? если я получаю ускорение в пять раз, почему ты так говоришь, словно это плохо?

а ос какая?

винда

10

и он делает это процессами...

"если я получаю ускорение в пять раз, почему ты так говоришь, словно это плохо?"

а тут посмотрел видос, где парень в 40 процессов инфу получил на порядок быстрее и тоже так захотел)

Потоками или процессами?

multiprocessing

я ебал какой там оверхед

какой? по оперативке?

в никсах разве сильно лучше будет?

15...40 мб оперативки на процесс пережить можно

в никсах разве сильно лучше будет?

когда-нибудь ознакомься с архитектурой

Программеры, а для многопоточки лучше multiprocessing использовать или есть другие модули?

мультипроцессинг нахер не нужен, если вы не понимаете зачем он

очевидно, чтобы ускорить время выполнения

Ну как. Мре нужно чтобы несколько процессов (около двкх десятков) одновременно выполнялись

Процессов или потоков?

Потоков, прости

Для потоков multiprocessing точно не нужен

для процессов тоже не нужен

А зачем нужен?

для упрощения параллелизации задач где нужно передавать сложные данные хтмл к ним не относится примерно никак

Смотри тогда. Смысл такой. Есть около 20 магистральных коммутаторов, к которым подключены менее мощные коммутаторы. Я хочу считать данные с менее мощных, но желательно, чтобы это происходило параллельно для ускорения работы программы

львиную долю мультипроцессинг модуля составляет сложный механизм сериализации, который 99% людей нахуй не всрался

Т.е. multiprocessing тут не нужен?

но нет. нубы смотрят очередное порево с одной нигрой и 5ью азиатками

но нет. нубы смотрят очередное порево с одной нигрой и 5ью азиатками

Можешь что тогда посоветовать?

Трединг?

Смотри тогда. Смысл такой. Есть около 20 магистральных коммутаторов, к которым подключены менее мощные коммутаторы. Я хочу считать данные с менее мощных, но желательно, чтобы это происходило параллельно для ускорения работы программы

а под "считать данные" тут что именно? телнет сессия, дёргающая show interface counters за вымя? снмп? нетфлоу?

Почти. Номера вланов и дальнейший поиск по lldp протоколу

Почти. Номера вланов и дальнейший поиск по lldp протоколу

Хе-хе, пров?

оу... ллдп скан кроссроутерно?

Ес

Да да

ну в данном случае по-моему задача просится на асинк решение

Чем поток от процесса отличается

В двух словах

оу... ллдп скан кроссроутерно?

скорее, это обход по лесу графов.

ну в данном случае по-моему задача просится на асинк решение

И как тогда поступить?

ллдп трафик не пересекает нормальные свитчи ж, там надо собирать со всей поляны

Юзать асинк и корутины

так как данные придётся дергать по сети, то собсно асинк напрашивается сам собой - сокетами и дёргать инфу с коммутаторов

по крайней мере сборщик изначальных данных для построения графов или еще какой красоты - отдельный клиент

Это понятно как дёргать. Я просто хотел запустить несколько потоков - 1 комм= 1 поток

это примерно как сортировка пузырьком

просто и дебильно

ллдп трафик не пересекает нормальные свитчи ж, там надо собирать со всей поляны

Поподробней, если можно

Т.е. предлагаешь не использовать multiprocessing а тупо всё 1 потоком?

что поподробнее? ты ж как сетевой админ должен знать что такое BPDU frames

что поподробнее? ты ж как сетевой админ должен знать что такое BPDU frames

У нас все нормально собирается, хотя не идеально. Но над этим работаем.

Т.е. предлагаешь не использовать multiprocessing а тупо всё 1 потоком?

как именно ты сейчас собираешь инфу?

У нас все нормально собирается, хотя не идеально. Но над этим работаем.

ты вроде про нетфлоу говорил, это другое совсем

ты вроде про нетфлоу говорил, это другое совсем

Про нетфлоу точно не я. Топология по ллдп собирается.

как именно ты сейчас собираешь инфу?

С экстрима sh lldp neighbours * , далее на цискарях sh lldp entry *

С экстрима sh lldp neighbours * , далее на цискарях sh lldp entry *

т.е. по телнету?

Немного другая на экстриме команда, эта приблизительна. Да

ну вот модным асинком эту задачу можно решить в один поток

Немного другая на экстриме команда, эта приблизительна. Да

Сколько у вас вообще устройств, с которых нужно снимать топологию и которые вообще ллдп понимают.

Ллдп понимают все. В общем объектов 30 на каждом из которых 5-50 коммутаторов

50 коммутаторов о.о

ну вот модным асинком эту задачу можно решить в один поток

Async модуль?

ERROR: S client not available

асинкио

50 коммутаторов о.о

30*5-50

или брать готовый модуль твистеда

Оке. Ещё не слышал о таких.

всем привет)

это сколькипортовки-то?

Разные. В основе 24

кто на чём пишет бэк?

А там и 8 и 48 попадаются

это сколькипортовки-то?

Да в наших реалиях, скорее всего, все на Длинках. А они почти все умеют в ллдп

Неа. Именно цискари

Что лучше, MySQL или SQLite?

для бота второго хватит вполне

Линксис?

Вообще еще джуниперы и экстримы но из меньше

кто на чём пишет бэк?

На питоне

это понятно

я имел ввиду фреймворк

или брать готовый модуль твистеда

Про это вообще не в курсе

Django

Про это вообще не в курсе

Это что за зверь?

Django

чем выбор обусловлен? почему не hug / flask?

чем выбор обусловлен? почему не hug / flask?

Про hug не знаю, django привычнее и функционала из коробки больше

Про это вообще не в курсе

Если совсем не вкурсах, то лучше не пытайтесь.

Ок. Тогда с asyncio повожусь

Я могу ща сказать какой примерно пак юзается для подобных задач

Давай

import sys import MySQLdb import os import memcache import time import copy import re import telnetlib import json import threading import random import subprocess import datetime #from multiprocessing import Pool import multiprocessing

Лол

Еще пак отдельно скомпилированныз утилит.

чем выбор обусловлен? почему не hug / flask?

что такое hug?

Так multiprocessing все таки нужен?

что такое hug?

Это вроде того же фласка но для рест апи, кажется