
Ivan
10.06.2019
09:00:20
6 лет опыта написания веб приложений.
а сколько лет опыта с питоном?

Olga Pesnya
10.06.2019
09:03:32

Мой любимый
10.06.2019
09:04:08
И зачем 6 лет? Чего не 5, не 4?

Tishka17
10.06.2019
09:06:06

Google

Ael
10.06.2019
09:07:33

Alex
10.06.2019
09:08:03
5-6 лет программист только опыта набирается.

Andrey
10.06.2019
09:10:31


Алексей
10.06.2019
09:10:54
#вакансия #работа #офис #Питер #СПб #fulltime #python
Всем привет!
Разбавлю обсуждение интересной вакансией:
Ищу кандидата на позицию Senior python dev (так же подойдет сильный Middle)
Это международная продуктовая компания "Quest Software" из Калифорнии.
В компании очень высокий уровень разработки. Работать предстоит над облачным SaaS сервисом бэкапа и восстановления данных: это новый проект, ему 2-3 года.
Кстати, они очень плотно работают с Microsoft и получают новинки раньше других.
Требования:
-Опыт разработки веб-приложений не менее 6 лет;
-Уверенные знания Python
-Опыт администрирования Linux
-Разговорный и письменный английский (средний или более высокий уровень)
-Знание виртуализации и контейнеризации (Docker, Kubernetes)
-Amazon Web Services/Azure/Google cloud services experience
-Асинхронное программирование Asune, Asuncio, aiohttp и другие
-Опыт работы с базами данных NoSQL (Cassandra, Redis, MongoDB) и связанными с ними технологиями
Предлагаем:
-Официальное оформление. Полностью “белая” з/п + есть годовая премия в размере 8% от годового дохода.
-Зарплатная вилка 145 000 – 195 000
-Отпуск 36 дней.
-Кабинетная система, тихая уютная, без шумных опенспейсов. При этом есть общая зона, где можно пообщаться, кухня.
Если есть вопросы по вакансии, да и не только, пишите в личку
6 лет опыта, норм английский и меньше 200к, ну удачи


Andrey
10.06.2019
09:10:55

Tishka17
10.06.2019
09:12:43

Alex
10.06.2019
09:12:51

Tishka17
10.06.2019
09:12:52

Alex
10.06.2019
09:13:22

Andrey
10.06.2019
09:13:36

polunin.ai???
10.06.2019
09:13:43

Google

Marsel
10.06.2019
09:21:27
Народ, всем привет!!
хочу в юпитер ноутбуке визуализировать дерево решений, но ничего не получается
может кто подсказать, что я делаю не так?
from IPython.display import SVG
from graphviz import Source
from IPython.display import display
from IPython.display import HTML
style = "<style>svg{width:70% !important;height:70% !important;}</style>"
HTML(style)
graph = Source(tree.export_graphviz(clf, out_file=None,
feature_names=list(X_test),
class_names=['Negative','Positive'],
filled = True)
display(SVG(graph.pipe(format='svg')))
вот что выдает:
File "<ipython-input-18-86b3e91e5517>", line 14
display(SVG(graph.pipe(format='svg')))
^
SyntaxError: invalid syntax

Aidar
10.06.2019
09:23:22

Marsel
10.06.2019
09:24:41
скобку пропустили
ExecutableNotFound: failed to execute ['dot', '-Tsvg'], make sure the Graphviz executables are on your systems' PATH

Aidar
10.06.2019
09:25:53

Marsel
10.06.2019
09:26:05
я все модули установил
все равно не понимаю что еще не так

Aidar
10.06.2019
09:26:53
graphviz ставили?
случаем не на винде запускаете?

Marsel
10.06.2019
09:28:00
попробовал по другому:
export_graphviz(clf, out_file=None,
feature_names=list(X_test),
class_names=['Negative','Positive'],
filled = True)
graph = pydotplus.graph_from_dot_data(dot_data.getvalue())
Image(graph.create_png())
снова ошибка:
----> 6 Image(graph.create_png())
AttributeError: 'list' object has no attribute 'create_png'

Михаил
10.06.2019
09:30:00
Текс, повросик возник
1. postgresql
2. python 3.7.3
3. доступ к базе через psycopg2
4. комп под виндой (ага, и не надо меня пинать за это :) ), Core i7 + 16Гб + SSD на системе и базе
надо вставить ~170 млн строк в таблицу, с контролем уникальности, уникальных строк ~100 млн
уникальность по ID - int8 PK
сейчас скорость ~3-5 тыс в сек
есть метод как "раскочегарить" все это хотя бы в два раза.
З.Ы. Да, я изначально не подумал сразу в базу писать ?

Tishka17
10.06.2019
09:31:32
170 млн строк? Вы уверены, что вам нужен постгрс?
вангую сильное падение скорости

Михаил
10.06.2019
09:32:41

Google

Tishka17
10.06.2019
09:33:02
смотря что с данными потом будут делать
ну в целом можно конечно и постгрес
ускорить - можно попробовать шардировать на несколько таблиц, а потом объединиить
хз правда как потом грязное объединение сделать

Nick
10.06.2019
09:34:46

Tishka17
10.06.2019
09:34:55

Nick
10.06.2019
09:35:04
фласк
еба я вдвойне охерел)

Andrew
10.06.2019
09:35:12

Tishka17
10.06.2019
09:35:29

Михаил
10.06.2019
09:35:42

Andrew
10.06.2019
09:35:56

Nick
10.06.2019
09:36:06

Tishka17
10.06.2019
09:36:15

Nick
10.06.2019
09:36:21
а если меньше, то я втройне охерею ахха

Михаил
10.06.2019
09:36:32

Nick
10.06.2019
09:36:42

Andrew
10.06.2019
09:37:41

Михаил
10.06.2019
09:38:00

Andrew
10.06.2019
09:38:07

Google

Tishka17
10.06.2019
09:38:48
возможно кликхаус подойдет
или эластик
но в эластике стопудово надо выключить индексирование на время вставки

Andrew
10.06.2019
09:40:01

Tishka17
10.06.2019
09:40:10
хотел скзаать что у нас эластик работал бытсро, потом вспомнил ,что вообще та мдесяток шардов был

Михаил
10.06.2019
09:40:35
нет, идиотизм, но клиент пока толком не признается.
подозреваю - обычная выгрузка, потом только обновление - вставка новых
данные - это медиа из инстаграма.

Tishka17
10.06.2019
09:40:39
как и везде)
у него индексирование - это несколько другой процесс

Nick
10.06.2019
09:40:54

Admin
ERROR: S client not available

Tishka17
10.06.2019
09:40:57
хотя удаление вроде было

Михаил
10.06.2019
09:41:40
просто мне это 100 млн потом еще "обойти" надо, данные собрать. Так что 100 или 170 млн - разница доя меня ахренительная ?

zee
10.06.2019
09:42:46

Andrew
10.06.2019
09:43:17

True
10.06.2019
09:43:34
Коллеги, привет! Можете доступно пояснить алгоритм работы стандартного API. задача вытащить данные из Яндекс Директ.

zee
10.06.2019
09:43:35
поч?

Andrew
10.06.2019
09:44:01
поч?
проверка PK при вставке

Google

Nick
10.06.2019
09:44:28
Это только у меня гитхаб не открывается?

Daniil (a1mirr) NN
10.06.2019
09:44:49
у меня всё ок

Tishka17
10.06.2019
09:44:52

Andrew
10.06.2019
09:45:03

Nick
10.06.2019
09:45:50

Andrew
10.06.2019
09:46:01

Nick
10.06.2019
09:46:18
или это уже мелкософт шалит

Andrew
10.06.2019
09:46:35

Михаил
10.06.2019
09:46:40

Andrew
10.06.2019
09:47:47

Михаил
10.06.2019
09:48:07

Andrew
10.06.2019
09:48:41
поставь то что поможет ?
Я тебе уже предложил
В общем то вставить в таблицу без PK, свернуть, результат вставить и добавить PK

True
10.06.2019
09:49:26

Михаил
10.06.2019
09:49:27
"свернуть" - а по русски это что?

Andrew
10.06.2019
09:49:36

Михаил
10.06.2019
09:50:49
Сгруппировать блядь
группировка на неидексированном поле, 170 млн записей....
та я даже боюсь представить сколько это времени займет :)

Andrew
10.06.2019
09:50:50

Михаил
10.06.2019
09:51:41

Tishka17
10.06.2019
09:51:45
или это будет все равно в пару раз быстрее?

Andrew
10.06.2019
09:52:21