@jvmchat

Страница 1349 из 2890
Oleg
11.04.2017
21:13:46
нет, на этой позиции практически нет ни спарка, ни скалы
А если в хадупы не очень умею? Ну типа они у нас есть на проекте, но я в основном другим занимаюсь

Nikolay
11.04.2017
21:14:11
Google
Nikolay
11.04.2017
21:14:24
по сути, инжиниринг вокруг потока данных

из кафки и из разных источников других, того же HDFS, например

Adam
11.04.2017
21:15:01
поток данных из хдфс

воу воу

Nikolay
11.04.2017
21:15:36
поток данных из хдфс
файлы раз в 10 минут появляются новые, можешь не называть это потоком, ок

Митко Соловец?
11.04.2017
21:15:38


смотрите что откопал

Oleg
11.04.2017
21:16:13
Вот да

Nikolay
11.04.2017
21:16:43
Расскажи про стэк
есть легаси-система вокруг хадупа, когда данные от кастомеров сливаются в файлы на HDFS, есть новый модный поток в кафке, вокруг которого мы сейчас городим реалтайм-архитектуру

Adam
11.04.2017
21:17:36
просите кастомеров пересесть с хдфс на кафку?)

Nikolay
11.04.2017
21:17:53
компания занимается dns-серверами, соответственно, основной продукт (кроме самого сервера) - это блэк- и вайт-листы, который прокидываются клиентам на их инстансы сервера согласно разным security-политикам

Google
Nikolay
11.04.2017
21:18:30
да и не то что просим, им для этого минимум телодвижений нужно

ну и вот, часть реалтайм-архитектуры пишем на C++, часть будем делать, скорее всего, на спарке, там будет уже скала

и есть часть на джаве, которая как раз собирает и формирует эти листы согласно обученным моделькам от датасаенс-команды

Nikolay
11.04.2017
21:20:10
вот туда и ищем людей, там довольно крутые ребята

Adam
11.04.2017
21:20:39
а что днс провайдер делает с блэклистом?

Oleg
11.04.2017
21:20:50
А. А там какой-то медэкс был)

Nikolay
11.04.2017
21:20:56
а что днс провайдер делает с блэклистом?
блокирует вирусню на уровне ресолва урла на днс-сервере

А. А там какой-то медэкс был)
это название российского юрлица :)

Митко Соловец?
11.04.2017
21:21:15
Николай прям Тарас Бульба

сам срач начал, сам и закончил, увожение

Nikolay
11.04.2017
21:21:42
ну а то

в общем, давайте к нам, у нас круто, команда в штатах хорошая

Adam
11.04.2017
21:24:54
технически наверное да

предметная область какая то скучная

Nikolay
11.04.2017
21:25:23
скучная?) чем?

30% мирового dns-трафика - наверное, это скучно, да

Adam
11.04.2017
21:26:27
бабушке своей обьяснить не сможешь когда спросит чем занимаешься

скучная тем что как то нежизненно

Google
Adam
11.04.2017
21:27:47
далеко от людей

фидбек от пользователей не видишь

Nikolay
11.04.2017
21:28:13
еще как видишь

клиенты - провайдеры интернета

Adam
11.04.2017
21:28:35
да я до этого момента даже не знал что этим кто то занимается)

Nikolay
11.04.2017
21:28:55
их клиенты, в свою очередь, хотят себе разные политики, например, parental control

Adam
11.04.2017
21:29:29
что dns занимается чем то помимо маршрутизации

Alexander
11.04.2017
21:29:32
предметная область какая то скучная
Для самары,например, вакансия отличная

Adam
11.04.2017
21:29:51
ну за 150 я бы поработал в Самаре)

Nikolay
11.04.2017
21:29:51
Для самары,например, вакансия отличная
а там необязательно Самара, можно откуда угодно

Adam
11.04.2017
21:29:57
если бы не уехал

Alexander
11.04.2017
21:30:18
ну за 150 я бы поработал в Самаре)
В самаре и выбирать особо не из чего

Nikolay
11.04.2017
21:30:20
что dns занимается чем то помимо маршрутизации
dns - это база данных по сути :) поверх нее можно накрутить все, что угодно

Nikolay
11.04.2017
21:32:05
вообще меня радует тенденция, что все больше компаний переходят на удаленную работу

Anton
11.04.2017
21:32:54
ну или как посмотреть, конечно

Nikolay
11.04.2017
21:32:55
не от хорошей жизни :)
ну, это просто логичный и разумный шаг

Google
Nikolay
11.04.2017
21:33:04
Это разве хорошо?
для сотрудников - разумеется

для компаний - во многом тоже, но зависит от специфики

Adam
11.04.2017
21:33:31
разве что для тех кто не в офисе

Anton
11.04.2017
21:33:42
конечно хорошо. вот нашёл ты работу - супер, а хотел бы остаться где ты есть. а тебе - без релокации незя. ну и всё. облом.

Nikolay
11.04.2017
21:33:43
ну да, я про это и говорю

Alexander
11.04.2017
21:33:47
для компаний - во многом тоже, но зависит от специфики
У меня сложилось мнение, что команду удаленно не построишь

Nikolay
11.04.2017
21:34:00
и на прошлой работе было так же

Alexander
11.04.2017
21:34:28
Смотря что под командой понимать :)

Admin
ERROR: S client not available

Alexander
11.04.2017
21:34:34
Группу людей и один беклог

То да

Nikolay
11.04.2017
21:34:43
ну, скажем, удаленно менеджером проекта быть сложно, да

а вот дата саентистом или девопсом - зашибись

Alexander
11.04.2017
21:35:11
Почему?

Митко Соловец?
11.04.2017
21:35:19
не все удаленно могут работать

слишком много факторов

Anton
11.04.2017
21:35:26
видел пример работы полностью распределённой команды. где ниодного человека вместе не сидело. норм - работают, существуют, деньги зарабатывают

Nikolay
11.04.2017
21:35:44
Почему?
потому что одна из основных задач менеджера - говорить с людьми

Anton
11.04.2017
21:35:53
специфичные люди конечно должны быть и специфичный проект

Google
Nikolay
11.04.2017
21:35:56
а саентистам надо, чтобы их никто не трогал

Alexander
11.04.2017
21:36:04
И саинтистов

Nikolay
11.04.2017
21:36:54
Я про деповопсов
а девопсам нет проблем удаленно все настроить, они так или иначе все равно это делают удаленно. С людьми же общения на обычных регулярных митингах вполне хватает

Nikolay
11.04.2017
21:37:19
И саинтистов
сайнтистам лучше всего, если их не трогают. Они там сидят в углу, тестируют гипотезы, тренируют модельку

Alexander
11.04.2017
21:37:23
И как
И когда

Nikolay
11.04.2017
21:37:45
Ну так надо же знать, что настраивать
ну так тикеты в жире и скайпы-слаки

Alexander
11.04.2017
21:37:46
Данные набирает

ну так тикеты в жире и скайпы-слаки
Ну и тут все утыкается в людей, которые тикетов заводят

Или человека

Nikolay
11.04.2017
21:38:35
А инфраструктуру для них у вас кто готовит?
у компании есть отдельная команда девопсов, которая отвечает за выдачу виртуалок и мониторинг

Alexander
11.04.2017
21:39:02
Так я про взаимодействие этих людей

Nikolay
11.04.2017
21:39:05
и есть дата инженеры типа меня, которые выступают посредниками между саентистами и девопсами

Adam
11.04.2017
21:39:22
это как

Alexander
11.04.2017
21:39:39
Ты как прокси для всех?

Adam
11.04.2017
21:39:46
может я тоже дата инженер

Nikolay
11.04.2017
21:39:56
Так я про взаимодействие этих людей
ну, обычно люди ведут какие-то проекты, в рамках этого проекта формируются экшн пойнты для девопсов, что нужно развернуть и какой процесс наладить

Страница 1349 из 2890