а с самой регуляркой не поможете ☺️

а в чем удобство keras и tensor?

Готовые слои + гпю

а в чем удобство keras и tensor?

В keras Вы декларативно задали слои нейронки, поставили обучаться, она и обучается. В numpy все операции с матрицами и тензорами вы должны расписывать. Кода на порядок больше получается.

В keras Вы декларативно задали слои нейронки, поставили обучаться, она и обучается. В numpy все операции с матрицами и тензорами вы должны расписывать. Кода на порядок больше получается.

а где уверенность, что у них будет тот слой который надо? К примеру если стоит задача научиться писать стихотворения как Пушкин?)

а где уверенность, что у них будет тот слой который надо? К примеру если стоит задача научиться писать стихотворения как Пушкин?)

LSTM там есть

LSTM там есть

и думаешь его кто поймет? Зашел в гитхаб, что то там многоо проектов именно связанных с машинном обучение итп. И в оснвном это связано с видео и фото. С текстом наврено намного сложнее. Тут не понятно какой текст ему на вход давать. Тоесть отбирать определенной тематики?

Зависит от решаемой задачи. Если надо научиться писать как Пушкин, то и давать надо тексты Пушкина

Вопрос, на винде в git bash есть make?

Что можете посоветовать почитать/посмотреть Python разработчику, которого перевели на проект с Hadoopом?

Вопрос, на винде в git bash есть make?

Похоже, нет

Что можете посоветовать почитать/посмотреть Python разработчику, которого перевели на проект с Hadoopом?

Есть такая книга Hadoop with Python, самое оно, поищи в гугле/телеге

Что можете посоветовать почитать/посмотреть Python разработчику, которого перевели на проект с Hadoopом?

Вот в телеге есть, например: https://t.me/bigdatabooks/14

про тексты на том же гитхабе есть пример на 1000 строк на чистом нумпи генерация текста через реккурентные сети

Вот в телеге есть, например: https://t.me/bigdatabooks/14

Спасибо

https://gist.github.com/karpathy/d4dee566867f8291f086

конкретно вот

По слову ERROR и до второго перевода строки, не забудьте флаг мультистрокового выражения (re.MULTILINE)

и до второго перевод ... это как

про тексты на том же гитхабе есть пример на 1000 строк на чистом нумпи генерация текста через реккурентные сети

там наверно не поймешь ничего, если в алгебре слаб?

ну так значит надо начать с алгебры

ну так значит надо начать с алгебры

а тут уже нужен талант)

можно начать с простеньких курсов - например курс эндрю ына на курсере. Или есть еще курс от самсунга на степике

а где уверенность, что у них будет тот слой который надо? К примеру если стоит задача научиться писать стихотворения как Пушкин?)

Давайте определимся с тем, что делает слой. Слой описывает связи между нейронами этого слоя и предыдущего. Это строительный блок нейросети. Проверить его функциональность можно хотя бы тестами. Подать на вход единичку (индикатор) и проверить выходы. А функциональность нейросети в целом обеспечивается ее общей архитектурой. Современные нейросети имеют порядка сотен слоев + вспомогательные нейронки + различные связи сквозь толщу слоев. Если Вам нужно генерировать текст, попробуйте char-rnn от человека по фамилии Carpathy.

Давайте определимся с тем, что делает слой. Слой описывает связи между нейронами этого слоя и предыдущего. Это строительный блок нейросети. Проверить его функциональность можно хотя бы тестами. Подать на вход единичку (индикатор) и проверить выходы. А функциональность нейросети в целом обеспечивается ее общей архитектурой. Современные нейросети имеют порядка сотен слоев + вспомогательные нейронки + различные связи сквозь толщу слоев. Если Вам нужно генерировать текст, попробуйте char-rnn от человека по фамилии Carpathy.

Пропустил, выше уже давали ссылку.

Кто шарит в парсинге, как мне найти последнюю страницу на сайте (просто ее номер), я нашел div, который отвечает за пагинацию divs = soup.find_all('div', attrs={'data-qa': 'pager-block'}) Если так смотреть, то он только 3 выбирает, которые показаны

Господа, джангисты есть? Нада помощь. В чате джангистов помощи не дают

а с самой регуляркой не поможете ☺️

Сейчас под рукой питона нет, извините.

а с самой регуляркой не поможете ☺️

А сам?

Давайте определимся с тем, что делает слой. Слой описывает связи между нейронами этого слоя и предыдущего. Это строительный блок нейросети. Проверить его функциональность можно хотя бы тестами. Подать на вход единичку (индикатор) и проверить выходы. А функциональность нейросети в целом обеспечивается ее общей архитектурой. Современные нейросети имеют порядка сотен слоев + вспомогательные нейронки + различные связи сквозь толщу слоев. Если Вам нужно генерировать текст, попробуйте char-rnn от человека по фамилии Carpathy.

тоесть простому юзеру чтобы сделать свою модель понадибся очень большая вычислительная мощь, что обычно не бывает. А на малых мощностях врятли выдит что то хорошее?

тоесть простому юзеру чтобы сделать свою модель понадибся очень большая вычислительная мощь, что обычно не бывает. А на малых мощностях врятли выдит что то хорошее?

Да

divs = soup.find_all('div', attrs={'data-qa': 'pager-block'}) for div in divs: print(div.find('span', attrs={'bloko-button-group'}).text) покажет только 5 страниц, а как по другим шагать

divs = soup.find_all('div', attrs={'data-qa': 'pager-block'}) for div in divs: print(div.find('span', attrs={'bloko-button-group'}).text) покажет только 5 страниц, а как по другим шагать

Боюсь тут жаваскрипт

divs = soup.find_all('div', attrs={'data-qa': 'pager-block'}) for div in divs: print(div.find('span', attrs={'bloko-button-group'}).text) покажет только 5 страниц, а как по другим шагать

Если там адекватные ссылки можно просто по ним шагать

можно к page + 5 делать?

ты это имеешь в виду

тоесть простому юзеру чтобы сделать свою модель понадибся очень большая вычислительная мощь, что обычно не бывает. А на малых мощностях врятли выдит что то хорошее?

Если речь о нейронках то да, там десятки часов и сотни ядер ГПУ. Но при этом 1) простые сети можно хоть на ноутбуке обучать. 2) на Амазоне можно арендовать виртуалку с гпу, оплата по часам.

Укажи order явно

А не, выведи просто, что там возвращается

тоесть простому юзеру чтобы сделать свою модель понадибся очень большая вычислительная мощь, что обычно не бывает. А на малых мощностях врятли выдит что то хорошее?

С другой стороны, для генерации текста могут подойти цепи Маркова, которые "обучать" довольно просто.

С другой стороны, для генерации текста могут подойти цепи Маркова, которые "обучать" довольно просто.

Они умеют намного меньше

Ну это же разные вещи

А не, выведи просто, что там возвращается

Там ваще бредятина Если напрямую, то у одних полей значения других, а значения некоторых ваще проебались А если через values то все ок

Там ваще бредятина Если напрямую, то у одних полей значения других, а значения некоторых ваще проебались А если через values то все ок

Выведи сам объект и пойми почему

Сломал джангу

divs = soup.find_all('div', attrs={'data-qa': 'pager-block'}) for div in divs: print(div.find('span', attrs={'bloko-button-group'}).text) покажет только 5 страниц, а как по другим шагать

Бывает, что в невидимом элементе есть список всех страниц.

Бывает, что в невидимом элементе есть список всех страниц.

лол и правда

Если речь о нейронках то да, там десятки часов и сотни ядер ГПУ. Но при этом 1) простые сети можно хоть на ноутбуке обучать. 2) на Амазоне можно арендовать виртуалку с гпу, оплата по часам.

а есть какие то штуки, в китае продают, выглядят как флешки именно специально для нейронок, хрень?

Выведи сам объект и пойми почему

<Models: Models object (0)> ?

У Гугла есть Tensor processing unit. Можно ли купить, не знаю

а есть какие то штуки, в китае продают, выглядят как флешки именно специально для нейронок, хрень?

Вообще всяких ускорителей нейронок понаделали, по-моему у intel есть как раз что-то в околофлешечном формате. Вариант intel Edison вроде бы такой.

Лан то фигня, там переопределено представление строки было, не суть. Один фиг это объект, его вывод даст мне только адрес в лучшем случае Ща гляну через консоль пайчарма чего там

Может быть, .all() перед взятием индекса?

Ща попробую

Или list(...), чтоб наверняка

Нет

Да лист тож пробовал

Ночь перестает быть томной

А первичный ключ это id?

А первичный ключ это id?

Ага

Давайте определимся с тем, что делает слой. Слой описывает связи между нейронами этого слоя и предыдущего. Это строительный блок нейросети. Проверить его функциональность можно хотя бы тестами. Подать на вход единичку (индикатор) и проверить выходы. А функциональность нейросети в целом обеспечивается ее общей архитектурой. Современные нейросети имеют порядка сотен слоев + вспомогательные нейронки + различные связи сквозь толщу слоев. Если Вам нужно генерировать текст, попробуйте char-rnn от человека по фамилии Carpathy.

насчет "Если Вам нужно генерировать текст, попробуйте char-rnn от человека по фамилии Carpathy." Посмотрел на гитхабе. Такое хрен разберешь, какой то порог выхождения высокий)

Выведи сам объект и пойми почему

Блин камон. Скажи уже просто а

Яж не просто так по чатам побежал

Я не из тех кто лезет спрашивать сразу Я сперва сам пытался докопаться

Гугл мне ничего толкового не выдал Былоб удобно чет вроде .fetch() как и .values(), только при этом вытаскивать данные с бд и иметь полные объекты, для удобной работы

в бд данные верные, на верных полях, если что А здесь у объекта получается какой-то бред вроде init_ip = [данные из поля даты] is_nsfw = [как раз init_ip]

nsfw ?

Я не из тех кто лезет спрашивать сразу Я сперва сам пытался докопаться

> Былоб удобно чет вроде .fetch() как и .values(), только при этом вытаскивать данные с бд и иметь полные объекты, для удобной работы ORM так и работают Покажи модель свою.

Кстати если ты по id строишь запрос, то почему не get?

Добрый вечер! Я вот сваял библиотечку с py37 датаклассами которые умеют форсировать для значений полей типы указанные в аннотациях: https://github.com/arishpyne/powerdataclass Может пригодится!

Ваяж ваяж

Добрый вечер! Я вот сваял библиотечку с py37 датаклассами которые умеют форсировать для значений полей типы указанные в аннотациях: https://github.com/arishpyne/powerdataclass Может пригодится!

Обычно заигрывания с автотрансформацией типов оканчиваются плохо. Лучше орать, если типы кривые, или оно умеет? Для функций есть такие либы, хз как для датаклассов. И я бы сделал на декораторах. Базовые классы хорошо, если код твой и там не будет треша с наследованием. А вот если о давать "в люди" то каждый лишний базовый класс - проблема

умеет орать когда типы неправильные или если не смог скастовать в указанный в аннотации тип. запилил в целом как решение для проблемы хранения разнородных данных в nosql

Ну а так то норм, я за либы для типизации

Добрый вечер! Я вот сваял библиотечку с py37 датаклассами которые умеют форсировать для значений полей типы указанные в аннотациях: https://github.com/arishpyne/powerdataclass Может пригодится!

Эм. Не совсем въехал, а что оно делает?

Эм. Не совсем въехал, а что оно делает?

В питоне 3.7 появились датаклассы как продолжатель идей NamedTuple

Это типа замена mypy?

В питоне 3.7 появились датаклассы как продолжатель идей NamedTuple

Да я в курсе, у меня своя либа для них

привет пытаюсь хранить словарик в редисе, а оно не хочет словарик: {'last': 1564696164, 'data': [[596396828, 'message', datetime.datetime(2019, 8, 2, 0, 13, 8), 1564697588, 303986717, 303986717, 'text']]} bytes() выдает ошибку TypeError: 'str' object cannot be interpreted as an integer json.dumps() выдает ошибку TypeError: Object of type 'datetime' is not JSON serializable остался только pickle?

нет, mypy это статический анализатор, а этот датаклас умеет в автоматический каст переданных в конструктор параметров к типам указанным в аннотациях этих параметров, причем произвольной вложенности

нет, mypy это статический анализатор, а этот датаклас умеет в автоматический каст переданных в конструктор параметров к типам указанным в аннотациях этих параметров, причем произвольной вложенности

https://github.com/Tishka17/dataclass_factory

Типа этого?

в том числе умеет автоматически распаковывать словари в датаклассы если датакласс указан как тип параметра

Давай вместе пилить :))

привет пытаюсь хранить словарик в редисе, а оно не хочет словарик: {'last': 1564696164, 'data': [[596396828, 'message', datetime.datetime(2019, 8, 2, 0, 13, 8), 1564697588, 303986717, 303986717, 'text']]} bytes() выдает ошибку TypeError: 'str' object cannot be interpreted as an integer json.dumps() выдает ошибку TypeError: Object of type 'datetime' is not JSON serializable остался только pickle?

Json хавает iso формат времени

Давай вместе пилить :))

Норм! твоя либа больше сериализатор/десериализатор и еще как я понял умеет в создание классов в рантайме

Это неблохо

Норм! твоя либа больше сериализатор/десериализатор и еще как я понял умеет в создание классов в рантайме

В общем, давай присоединяйтеся :))

Я не совсем понял, что твоя либа делает, правда

Норм! твоя либа больше сериализатор/десериализатор и еще как я понял умеет в создание классов в рантайме

Не. Классы надо заранее создать. А вот данные конвертировать, это моё