Aragaer
пример - мой код https://github.com/aragaer/human2pa/tree/char тута
у меня почти везде есть код, чтобы загрузить данные, составить словарь, составить словарь эмбеддингов
Max
ну унаследовался я и решил пару параметров изменить. у меня почти вся фунция предыдущая остаётся
Aragaer
сделай эти параметры аргументами/полями
Max
да сложно это всё
Aragaer
ну да, гораздо проще написать одну большую портянку и жаловаться, что ее нельзя без дублирования переопределить
Max
почему портянку? там код разбит на классы, всё довольно структуризировано
Aragaer
но почему-то ты не можешь переопределить одну часть без дублирования остального
Aragaer
а одна часть она должна быть достаточно маленькой, чтобы ее можно было скопировать, но не "много копировать"
Tishka17
Tishka17
Tishka17
Max
Aragaer
это у дорофеева было. Мол народ говорит "это я еще не привык, поэтому сложно, а вот когда научусь, чтобы не задумываться..." Нет, задумываться всегда надо
Tishka17
20-40
И сколько из них надо поменять в тестовом?
Max
Tishka17
1-2
Ну так вынеси эти 1-2 во внешнюю функцию
Aragaer
докинь еще один параметр, по умолчанию значение False, в тестовом классе True, эти 1-2 строки убери под if этот параметр
Aragaer
для эксперимента должно быть достаточно
Max
Aragaer
аналогично же
Max
придётся постоянно менять код на всех инстансах, не ограничиваясь одним файликом модели
Aragaer
почему?
Max
ну потому что когда я делаю рабочую модель и заливаю, я ещё не знаю, какие изменения будут в тестовой
Aragaer
вот смотри
Max
поэтому заранее заложить параметр не могу
Aragaer
https://github.com/aragaer/human2pa/blob/char/char-predict.py - вот у меня код, который грузит модель и пытается с ее помощью генерить фразы
Aragaer
беда в том, что на вход надо подавать вектора такого размера, какого входной слой у модели
Aragaer
а я его постоянно меняю
Aragaer
думаешь, я его в этом коде меняю?
Aragaer
нет, я загрузил модель, ткнулся во входящий слой и достал его размер
Aragaer
этот код будет абсолютно одинаково работать с любой моделью, которую я наэкспериментирую в другом месте
Aragaer
без разницы, сколько будет промежуточных слоев, какие входной и выходной. Ну точнее входной это embedding по символам, а выходной это классы символов. Словарь общий. Но его размер тоже - какой есть, такой и использую
Max
ок, спасибо. понятно, что иначе никак, подумаю, как сделать
Max
может какой-то автоматический переименовыватель классов можно сделать?
Aragaer
пока ты не покажешь конкретный код, я все равно не пойму, что тебе не нравится в тех вариантах, которые тебе предложили, и почему ты упорно держишься за свою (непонятную мне) идею
Tishka17
Max
Tishka17
При чем тут файлы?
Aragaer
а почему до этого нельзя было в одном файле?
Max
сейчас в одном файле и есть
Max
только если я его меняю и потом загружаю вторую модель, классы из этого файла ломаются
Aragaer
не меняй, добавляй
Tishka17
Я ничего не понимаю
Tishka17
У тебя там юпитер что ли?
Max
какой юпитер?
Tishka17
Ноутбук
Aragaer
нет, он создал класс и кинул в пикл. Потом поменял код класса, а потом грузит его из пикла
Max
во что нашёл https://wiki.python.org/moin/UsingPickle/RenamingModules
Tishka17
Tishka17
Я уже говорил, что не надо юзать пикл?
Roman
Max
почему не надо? а чем мне сериализировать модель?
Aragaer
а зачем вообще в пикл засовывать класс?
Tishka17
Aragaer
модель сериализовывать встроенными средствами твоего движка
Max
а функции с классами я туда как засуну?
Aragaer
model.save для кераса
Tishka17
Max
Denis
Tishka17
Засунешь абстрактное название и ладно
Aragaer
нет, h5
Max
мне помимо этого ещё надо функции для генерации фич делать
Aragaer
сохраняются слои и связи между ними
Aragaer
а функции генерации фич это не модель, это само по себе
Tishka17
А потом в зависимости от своей логики по этому названию создашь инстанс тестового или обычного класс
Aragaer
модель это только пачка матриц
Max
Fast compressed Persistence: a replacement for pickle to work efficiently on Python objects containing large data ( joblib.dump & joblib.load ).
Max
так что не пикл, я наврал
Max
раньше пикл был, уже и забыл
Max
о, а можно модуль при импорте переименовывать в переменную? ну например по timestamp
Max
import Features as 'Features20191123'
Max
типа такого
Vladimir
Кто шарит в DRF? Пытаюсь зайти, но выводит ошибку
Vladimir
http://127.0.0.1:8000/api/books/
Vladimir