Gabriel
то есть n - это шаг?
Gabriel
ааа
Gabriel
туплю, понял вроде
️Skill
нужно обрабатывать большие .txt файлы(1+ гб), беру каждую строку и проделываю с ней операции можно ли оптимизировать процесс? думал может с генераторами как-то получиться, но не знаю как реализовать лучше
Aragaer
оптимизировать по какому параметру?
Aragaer
и соответственно в ущерб чему
️Skill
оптимизировать по какому параметру?
не загружать все в память
Aragaer
да, можно
Aragaer
например не грузить все в память
Nikolay
🦔
️Skill
да, можно
с потоками получиться так?
Aragaer
with open(very_big_file) as my_file: for line in my_file: do_stuff(line)
Nikolay
Переписать на го
Aragaer
в каком месте ты собрался сюда прикручивать потоки и зачем?
Aragaer
и зачем потоки, если ты пытаешься экономить память?
️Skill
в каком месте ты собрался сюда прикручивать потоки и зачем?
потоки нужны, чтобы паралельно делать запросы на мой сервер
Aragaer
ты что-то говорил про строки в файле
Aragaer
как потоки связаны с файлом?
️Skill
как потоки связаны с файлом?
просто думаю, что если потоки юзаю, то это как-то менят процесс оптимизации с файлом
Aragaer
смотря в каком месте ты юзаешь потоки
Aragaer
если ты в одном потоке работаешь с файлом, а пулом потоков тыкаешься на сервер, то ничего не меняется
Sasha
У меня такой общий вопрос архитектуры, интересен чужой опыт: Если вы тестируете бэкенд или api эндпоинты, где куча взаимосвязей и внешних ключей, например с помощью pyttest, то для каждого теста создаете и дропаете таблицы через фикстуры или удаляете ‘руками’(имеется ввиду помодельно) только то, что наплодили?
magabiev
Привет всем, наверное немного не по теме, но не могли бы вы посоветовать хорошие курсы по питону для новичков!
magabiev
Алевтина
Привет всем. Изучаю машинное обучение и надо к алгоритму деревья решений "прикрутить" алгоритм random forest как это сделать? Для деревья решений использую библеотеку sklearn.tree (DecisionTreeClassifier)
Anonymous
В сайките разве нет случайных лесов?
Anonymous
RandomForestClassifier
Yegor
товарищи, как поиметь список директорий в указанной директории, без поддиректорий, файлов?
Yegor
os.listdir(path) выводит файлы и папки
Yegor
циклом проверить папка или нет?
Алевтина
я читаю статейки и т.д. и что то к готовому алгоритму прикрутить второй алгоритм как-то не понятно Сразу говорю я новичок
Anonymous
Ну случайный лес ето композиция деревьев
Anonymous
Прикрутить его к одному дереву не получится
Алевтина
у меня все просто. Есть обучающие данные ввиде таблицы. Создаю класс DecisionTreeClassifier, обучаю дерево через fit, и в конце прошу сделать прогноз по введенными данными вручную через predict. Получается нужно несколько деревьев надо создать или как?
Anonymous
В компанию 365 group, требуется Back-end python-программист Мы предлагаем: -Работу в молодом коллективе профессионалов. Команда - одна из наших самых больших гордостей -Вилку по заработной плате - 20 000 - 40 000 тыс (руб) -Сложные, но интересные задачи, безграничные возможности для развития -Отсутствие бюрократии и настоящий дух старт-апа Чем предстоит заниматься: -Писать алгоритмы для обработки поисковых запросов -Добавлять в сайт интеграции с другими сервисами, например, авторизация и регистрация через Telegram или работа с API Яндекс.Вордстат -Деплой на сервера Ubuntu Навыки: -Хорошее знание Python 3.5+ -Желателен опыт работы с фреймворками Django -Опыт работы с Linux & Docker, PostgreSQL или MySQL, REST API, git или bitbacket Контактная информация: Контактное лицо Диана Александровна Шорох Телефон 8 (969) 0660033 E-mail: verizhnikova.natalya@bk.ru #удаленка #работа #puthon #вакансия
Yegor
https://docs.python.org/3/library/pathlib.html#basic-use Listing subdirectories
То что надо, но без цикла не обошлось)))
Alex
В компанию 365 group, требуется Back-end python-программист Мы предлагаем: -Работу в молодом коллективе профессионалов. Команда - одна из наших самых больших гордостей -Вилку по заработной плате - 20 000 - 40 000 тыс (руб) -Сложные, но интересные задачи, безграничные возможности для развития -Отсутствие бюрократии и настоящий дух старт-апа Чем предстоит заниматься: -Писать алгоритмы для обработки поисковых запросов -Добавлять в сайт интеграции с другими сервисами, например, авторизация и регистрация через Telegram или работа с API Яндекс.Вордстат -Деплой на сервера Ubuntu Навыки: -Хорошее знание Python 3.5+ -Желателен опыт работы с фреймворками Django -Опыт работы с Linux & Docker, PostgreSQL или MySQL, REST API, git или bitbacket Контактная информация: Контактное лицо Диана Александровна Шорох Телефон 8 (969) 0660033 E-mail: verizhnikova.natalya@bk.ru #удаленка #работа #puthon #вакансия
локацию неплохо бы тоже указывать. не все тут из ДС. и эм... 20-40к это простите чего?
AMD Chan
Хочу из Json достать интовое значение по ключу и заменить его на это же значение + 1 такая конструкция выдает краш, приведение к инту стринга функцией int() (хотя вряд-ли там это нужно, значение без кавычек) тоже дает краш. как починюкать?
Danil
В компанию 365 group, требуется Back-end python-программист Мы предлагаем: -Работу в молодом коллективе профессионалов. Команда - одна из наших самых больших гордостей -Вилку по заработной плате - 20 000 - 40 000 тыс (руб) -Сложные, но интересные задачи, безграничные возможности для развития -Отсутствие бюрократии и настоящий дух старт-апа Чем предстоит заниматься: -Писать алгоритмы для обработки поисковых запросов -Добавлять в сайт интеграции с другими сервисами, например, авторизация и регистрация через Telegram или работа с API Яндекс.Вордстат -Деплой на сервера Ubuntu Навыки: -Хорошее знание Python 3.5+ -Желателен опыт работы с фреймворками Django -Опыт работы с Linux & Docker, PostgreSQL или MySQL, REST API, git или bitbacket Контактная информация: Контактное лицо Диана Александровна Шорох Телефон 8 (969) 0660033 E-mail: verizhnikova.natalya@bk.ru #удаленка #работа #puthon #вакансия
Не забывайте ставить хеш-теги)
Anonymous
Спасибо за замечания. 20-40 тыс рублей. Вакансия на удаленного программиста.
AMD Chan
краш? вот прямо так и написано "краш"?
keyerror хотя value лежит в корне json-а
Jocker
Вот вывел такое. Теперь как мне обращаться по индексу к reality?
Alex
keyerror хотя value лежит в корне json-а
ну значит ты обращаешься по ключу, которого нет в словаре.
AMD Chan
Ась, я понял где налюбился, спасибо
Alex
.get('PlayersNum', 0)
встал и вышел.
Danil
Alex
Грешно же
не грешно, а хуйню написал
Alex
давайте называть долбоебов своими именами
Nikita
Чот вы злые пиздец
Alex
Чот вы злые пиздец
ибо нехуй пытаться влезть с советами, если сам нихера не знаешь.
Nikita
У тебя личностные проблемы какие-то?)
Danil
Пожалуйста, не переходите на личности
Alex
У тебя личностные проблемы какие-то?)
хроническая непереносимость идиотов.
Nikita
К психологу сходи :)
Alex
К психологу сходи :)
пройди пожалуйста нахуй уже.
Anonymous
Ребят, а в python коментарий только через хаштэг оставляется?
kosc
Ребят, а в python коментарий только через хаштэг оставляется?
Можно мултилайн строку с """ использовать
kosc
Докстринги так пишутся.
Alex
Докстринги так пишутся.
докстринг - это не комментарий
kosc
докстринг - это не комментарий
Но может служить той же цели.
kosc
Почему?
Alex
докстринг, многострочный строковый литерал и комментарий - это 3 охеренно больших разницы.
Alex
несмотря на то что первый реализуется с помощью второго
🍁 Jaŭhien
Под докстринг аллоцируется память, он сохраняется где-нибудь в аттрибуте __doc__, а комментарий просто игнорируется
Anonymous
А в чём разница между контантенацией вот такой ( , ) и вот такой ( + )
Tishka17
Чо