А вот кто работает со спарковскими джобами на питоне - чем и как вы их тестируете? Исполняете против тестовых витрин и проверяете результат?

А вот кто работает со спарковскими джобами на питоне - чем и как вы их тестируете? Исполняете против тестовых витрин и проверяете результат?

скаловые то никто не покрывает тестами, а ты про питоновские

rdd достаточно легко, кстати, протестировать

А вот кто работает со спарковскими джобами на питоне - чем и как вы их тестируете? Исполняете против тестовых витрин и проверяете результат?

Примерно так

но вообще юнит тесты в паре с интеграционными работают

а кто пишет их?

а кто пишет их?

мы стараемся, юнит хотя бы

Впринципе холденкрау норм либу сделал

Основная боль - сбор эталона

Да, надо просто с чём-то сравнивать

А так не вижу проблем и надобности в либах контекст создал локальный и ок

Интеграционные нужны чисто чтоб следить за сериализацией хотя бы

А так не вижу проблем и надобности в либах контекст создал локальный и ок

Ну там кафка если и в кассандру ещё чо пишешь/читаешь

Ну там кафка если и в кассандру ещё чо пишешь/читаешь

Ну это уже условия, под свой аутпут свои допилы

а что за либа у холдена?

а что за либа у холдена?

https://github.com/holdenk/spark-testing-base

я вот подумал может testz попробовать под такие тесты, чтобы эту хренотень не творить с бефорами а фтерами и шареным спарк контекстом

А вот кто работает со спарковскими джобами на питоне - чем и как вы их тестируете? Исполняете против тестовых витрин и проверяете результат?

Мы проверяем на продовых витринах)

#job #вакансия #hadoop #spark #smartdata #vacancy #java #bigdata Всем привет! Вакансия: Разработчик Hadoop Город: Москва. Занятость: полная, работа в офисе. Зарплата: до 250К + квартальная премия. По требованиям: - Знание Java/Scala на высоком уровне - Опыт работы с Hadoop от 1,5 лет - Участие в проектах с большим количеством источников - Знание ETL-средств, - Знание SQL запросов - Желательно знание Python - Желательно наличие сертификатов в области Big Data По задачам: - Развитие и поддержка решения BigData на базе Hadoop - Проведение code-review, автотестирование По условиям: - Оклад обсуждается до 250К gross + квартальная премия. - Офис в центре Москвы, метро Новослободская. - ДМС. Мои контакты: oksana@bcraft.ru @oksanaalieva +7(916) 482-47-42

#job #вакансия #hadoop #spark #smartdata #vacancy #java #bigdata Всем привет! Вакансия: Разработчик Hadoop Город: Москва. Занятость: полная, работа в офисе. Зарплата: до 250К + квартальная премия. По требованиям: - Знание Java/Scala на высоком уровне - Опыт работы с Hadoop от 1,5 лет - Участие в проектах с большим количеством источников - Знание ETL-средств, - Знание SQL запросов - Желательно знание Python - Желательно наличие сертификатов в области Big Data По задачам: - Развитие и поддержка решения BigData на базе Hadoop - Проведение code-review, автотестирование По условиям: - Оклад обсуждается до 250К gross + квартальная премия. - Офис в центре Москвы, метро Новослободская. - ДМС. Мои контакты: oksana@bcraft.ru @oksanaalieva +7(916) 482-47-42

сертифицирован и до 250к? омг

желательно ж

а какие сертификаты есть в бигдате котируемые рыночком?

желательно ж

боюсь это как раз чтобы 250 получать, и то получается 217

тк гросс

#job #вакансия #hadoop #spark #smartdata #vacancy #java #bigdata Всем привет! Вакансия: Разработчик Hadoop Город: Москва. Занятость: полная, работа в офисе. Зарплата: до 250К + квартальная премия. По требованиям: - Знание Java/Scala на высоком уровне - Опыт работы с Hadoop от 1,5 лет - Участие в проектах с большим количеством источников - Знание ETL-средств, - Знание SQL запросов - Желательно знание Python - Желательно наличие сертификатов в области Big Data По задачам: - Развитие и поддержка решения BigData на базе Hadoop - Проведение code-review, автотестирование По условиям: - Оклад обсуждается до 250К gross + квартальная премия. - Офис в центре Москвы, метро Новослободская. - ДМС. Мои контакты: oksana@bcraft.ru @oksanaalieva +7(916) 482-47-42

расскажите, откуда пошла мода писать до 250к, а потом типа это гросс?

у нас не европа, не штаты, налоги фиксированные

расскажите, откуда пошла мода писать до 250к, а потом типа это гросс?

яндекс скорее всего

Яндекс эти планки и поставил

Причем до 250. 80-это тоже до 250.

расскажите, откуда пошла мода писать до 250к, а потом типа это гросс?

В Гросс оффер выставляют финансовые компании

Это намёк, что вакансия в какой-нибудь втб?

Причем до 250. 80-это тоже до 250.

Меньше чем 180 Гросс не предлагают оклад

Причем до 250. 80-это тоже до 250.

во во, я помню ходил на собесы с з\п "до", начиналось потом...

это говорит что ты не убедил

Меньше чем 180 Гросс не предлагают оклад

это человеку который первый раз хадуп увидит?

это говорит что ты не убедил

да я после слов "куберспрей", тестеры при кубере ненужны и не пытался особо

это человеку который первый раз хадуп увидит?

Почему первый раз? Написаны же требования)

Почему первый раз? Написаны же требования)

потому что для требований меньше 300к на руки это смешно

Это намёк, что вакансия в какой-нибудь втб?

Нет, другой банк. Есть ещё квартальная премия 12 процентов

потому что для требований меньше 300к на руки это смешно

Ничего себе) Надо было хадуп изучать...

Нет, другой банк. Есть ещё квартальная премия 12 процентов

12% премия - это вообще не мотиватор

Ничего себе) Надо было хадуп изучать...

рядом в эстонии такое 5к евро после налогов

вакансия норм, я не вижу тут требований на 300k

12% премия - это вообще не мотиватор

особенно не ясно с чего премия, может с оклада в 80к

написали же что минимум 180к

я думаю ищущий найдет

написали же что минимум 180к

так а не факт что там не 80к+премия

12% премия - это вообще не мотиватор

Нормальная премия. Например Если оффер 200 Гросс, с квартальной премией получится средняя 198 на руки

а теперь товарищи которым не нравятся цифры могут озвучить свою зп текущую ?

0. уволился полчаса назад

У меня 1 зарплата. Вторую чёт не дают.

написали же что минимум 180к

180 Гросс это с опытом Hadoop чуть больше года

Ну речь же идет об опытном разрабе, который “писал на джава/пишет на скале” больше 5 лет, я понимаю 5к евро, если шарит

а накидай вакансии в эстонии на 5k

@oksanaalieva будем откровенны, вы врядли что-то путное найдёте за эти деньги. Тем более в МСК.

Тем более в банк.

@oksanaalieva будем откровенны, вы врядли что-то путное найдёте за эти деньги. Тем более в МСК.

подписываюсь под каждым словом

@oksanaalieva будем откровенны, вы врядли что-то путное найдёте за эти деньги. Тем более в МСК.

Вот всегда так говорят) а искать все равно приходится)

ну вы найдете

только способности будут ниже требований

а потом через годик человек уйдет

вот как бы и все

Вот всегда так говорят) а искать все равно приходится)

да ладно, не надо отчаиваться, если они реально готовы платить 210-220 на руки, то закроете за месяц-другой. А если это 180 гросс, то тогда да, тяжеловать

Налетай, кароч. Вакансия-огонь!

я лучше подожду вакансий от 5k в эстонии, за эти деньги можно потерпеть тамошний хреновый климат

А вы из Сочи?

Я лучше айфон Xs Max куплю. Спасибо.

буэээ

А вы из Сочи?

нет, а вы из Таллинна?

Нет, а вы?

Нет, а вы?

а я уже подумал, что задел за живое, вот возьмут на работу в талинне на 5k, тогда буду

И там ещё трамваи бесплатные так-то.

а я уже подумал, что задел за живое, вот возьмут на работу в талинне на 5k, тогда буду

Будете там Андрейс Смирновс.

я лучше подожду вакансий от 5k в эстонии, за эти деньги можно потерпеть тамошний хреновый климат

вы конечно очень оптимистичны по поводу ЗП в Таллине. 5к это уже сеньор DE, глассдор в помощь)

Налетай, кароч. Вакансия-огонь!

Тут только Сочи и Таллин с запросами от 300К? А до 250 никого нет?

вы конечно очень оптимистичны по поводу ЗП в Таллине. 5к это уже сеньор DE, глассдор в помощь)

это не я, это старый хрыч, я так, пруфов попросил

Тут только Сочи и Таллин с запросами от 300К? А до 250 никого нет?

Есть я, но я не знаю ни джавы, ни хадупа ??‍♂

Что, собственно, и требовалось доказать.

А так, мне нравится такая зп)

вы конечно очень оптимистичны по поводу ЗП в Таллине. 5к это уже сеньор DE, глассдор в помощь)

А за наводку на глассдор спасибо. Я вот не знал такого сайта.

ну и зарплаты у вас в москве. зажрались, одно слово.

ну и зарплаты у вас в москве. зажрались, одно слово.

Дык это не у нас в Москве, а у Хрыча в Спб.

а сколько джавер со стажем в ~19 лет может зашибать в столице?

300к/секунду

300к/секунду

нет, для этого надо искусственный интеллект делать

а сколько джавер со стажем в ~19 лет может зашибать в столице?

вы все еще думаете что платят за знание языка? Тогда у меня для вас плохие новости :)

Ну речь же идет об опытном разрабе, который “писал на джава/пишет на скале” больше 5 лет, я понимаю 5к евро, если шарит

если шарит спокойно берёт 90

а сколько джавер со стажем в ~19 лет может зашибать в столице?

Очень общий вопрос. Всё от джавера зависит.

вы все еще думаете что платят за знание языка? Тогда у меня для вас плохие новости :)

я чё, настолько похож на дебила, что ли? ее, спринг, и вся экосистема. хадуп вон, год уже.

а вообще я был слегка фрустрирован, особенно если сравнить средние ставки после налогов в Москве и Берлине,например, а так же на numeo посмотреть на стоимость жизни/per month окажется что быть миддлом в мск выгоднее, например а вот сеньором - там

выгодней удалёнка. жить тут, а работать там. зп в евро

выгодней удалёнка. жить тут, а работать там. зп в евро

жить тогда уж можно где-нибудь на побережье Португалии - дешевле и теплее - но это если есть удаленка стабильная

Тут только Сочи и Таллин с запросами от 300К? А до 250 никого нет?

217, не надо вводить в заблуждение

btw, жить можно спокойно и в провинции, а работать на буржуев

жить тогда уж можно где-нибудь на побережье Португалии - дешевле и теплее - но это если есть удаленка стабильная

не бывал, не знаю, возможно ))