А. Уже на этой неделе

Олег же будет!

Ну вот если только ради Олега

max.poll.records connections.max.idle.ms

где в кафки эти параметры задать

нигде не могу найти в конфигах

только в код лесть и гита брать модуль

где в кафки эти параметры задать

Для чего- брокера/консьюмера/продьюсера?

Для чего- брокера/консьюмера/продьюсера?

программисты задают это у себя в коде, пытаясь к кафке обратится, она говорит, что таких параметров нет

Раз poll.records, предположу что для консьюмера, тогда в Properties которые передаются KafkaConsumer при его создании

Для чего- брокера/консьюмера/продьюсера?

второй параметр нужен, чтобы когда кафка закончила обрабатывать очередь она не срала логи и ещё что-то сообщением о закрытии коннекта

Раз poll.records, предположу что для консьюмера, тогда в Properties которые передаются KafkaConsumer при его создании

даже таких слов нет вообще в конфиге том

на гитхабе видел, но там говорят лесть в гит и модуль фигачить какой то

То ли я не понял вопрос, то ли ты не понял ответ. Когда в коде создаешь инстанс класса KafkaConsumer, ему надо передать обычный java Properties, вот в него можно по ключу max.poll.records положить нужное тебе значение в строковом представлении

ну чего, расслабились все без разбора? Держите: https://www.facebook.com/events/1741305915898629/

Без Донатов и смс?

То ли я не понял вопрос, то ли ты не понял ответ. Когда в коде создаешь инстанс класса KafkaConsumer, ему надо передать обычный java Properties, вот в него можно по ключу max.poll.records положить нужное тебе значение в строковом представлении

я админ а не кодер

кодеры неделю уже не могут найти как эти параметры заставить работать

во вторых они у меня пишут на C#

во вторых они у меня пишут на C#

Ну тогда могу только посочувствовать, я могу максимум сказать как в java коде это сделать

Ну тогда могу только посочувствовать, я могу максимум сказать как в java коде это сделать

на гитхабе можешь выложить

я им как пример покажу

толку, неизвестно что они за либы юзают у себя

просто они говорят, типа я кафку не настроил и потому у них не работает

http://docs.confluent.io/current/clients/consumer.html#python-go-and-net-clients

это для дефолтной кафки, которая на сайте тупо скачивается, или для патченной?

это для дефолтной кафки, которая на сайте тупо скачивается, или для патченной?

Для самой дефолтной

просто например сделать для кафки yaml файл это целая история

Чем для брокера не устраивает .properties файл? Всегда его использовали, всё круто

poll стандартная хрень если это не видится, то скорее всего с импортами косячат (и пишут в блокноте)

poll стандартная хрень если это не видится, то скорее всего с импортами косячат (и пишут в блокноте)

вижуал студия 2017

Ну или в дотнете у них там своя атмосфера

Ну или в дотнете у них там своя атмосфера

это да

я выше линк кинул, там пример дотнета

есть еще вариант делаешь тоже самое на java, показываешь что клиент работает

и их начальству тоже ?

и их начальству тоже ?

которое шлёт меня нахуй, и говорит, чтобы написал тогда на С#

Без Донатов и смс?

Лучше, конечно с донатом, но можно и без

Ну кстати да, в ссылке выше все описано максимально подробно, если разрабы и такое не смогут разобрать, мб стоит задуматься что это за разрабы такие

connections.max.idle.ms

ты админ, не тебе код писать но если ты покажешь что кафка работает без проблем (пусть и с другим клиентом) то проблема реализации исключительно на их стороне

а вот этот параметр?

poll не настраивается в самой кафке, это параметр, коотрый говорит сколько тащить сообщений за один раз

исключительно вотчина клиента

Какой библиотекой вы пользуетесь для кафки из шарпа?

Какой библиотекой вы пользуетесь для кафки из шарпа?

в душе пока не ебу. мне задачи набегами ставят

стандартной какой то

я в их С# не лезу

https://github.com/confluentinc/confluent-kafka-dotnet/blob/master/examples/SimpleConsumer/Program.cs u are welcome

и так и нагрузочные тесты провожу, и стресс тесты и объясняю как детям, разницу между коробочными продуктами и опенсорсом

connections.max.idle.ms /нет там про него

То что я скинул выше это официальный клиент от confluent для кафки, пример максимально простой, и примеры настроек там есть

банальный вопрос консольными клиентами кафку тестировал на работоспособность?

банальный вопрос консольными клиентами кафку тестировал на работоспособность?

всё у них работает кроме 4 парметров

мой кластер из 3 кафок очередь в 300 тыс топиков сделал

проблем кроме вот с этими параметрами не было

300 тысяч топиков это звездец она ж сдохнет при ребалансе

ага, я бы на такое посмотрел

300 тысяч топиков это звездец она ж сдохнет при ребалансе

у клиента, которому пишем софт, будет в день больше

может сообщений а не топиков?

может, 300к сообщений

задач

топик это как очередь

то есть в кафку ставится задача

и потом кафка её распределяет между кассандрами

В кафку можно просто отправить сообщение и получить сообщений из неё, там нет таких терминов как задачи, это message broker

ERROR: S client not available

Кафки, касандры. Вы что, Гугл?)

Кафки, касандры. Вы что, Гугл?)

увы нет

была ж статья хорошая на хабре про эт

@dmsol вроде кидал

Кафки, касандры. Вы что, Гугл?)

но могу обрадовать, без этой системы вы скоро не купите лекарства, бытовую химию, шубу

карта мир?)

Насчёт твоей настройки - в офф доке консьюмера такая настройка есть, значит её надо просто для консьюмера в коде выставить, я хз с чем там разрабы справиться не могут, одарённые что ли?

карта мир?)

нет, аналог егаиса

блэт, пора валить похоже

но могу обрадовать, без этой системы вы скоро не купите лекарства, бытовую химию, шубу

не куплю шубу без кафки?

Насчёт твоей настройки - в офф доке консьюмера такая настройка есть, значит её надо просто для консьюмера в коде выставить, я хз с чем там разрабы справиться не могут, одарённые что ли?

они C# программисты

забавно, но я вообще шубу не куплю

не куплю шубу без кафки?

шубу, лекарства, бытовую химию

ну я не склонен тенденции этого чата унижать шарпистов, но тут какие-то особо одарённые похоже

забавно, но я вообще шубу не куплю

просто еще не женат

@optician_owl еще? мои iq так низко не падет xD

@optician_owl еще? мои iq так низко не падет xD

все мы так думали в молодости

ну я не склонен тенденции этого чата унижать шарпистов, но тут какие-то особо одарённые похоже

что за движуха?

ну я не склонен тенденции этого чата унижать шарпистов, но тут какие-то особо одарённые похоже

мне бы аналог той картинки, ток для этого параметра, а то заебут

шубу, лекарства, бытовую химию

не понимаю как это связано?

что за движуха?

трём про шарпистов которые не могут выставить пропертю кафке консюмеру

ну я не склонен тенденции этого чата унижать шарпистов, но тут какие-то особо одарённые похоже

ну как же, это же любимый вид спорта

обычному интернет магазину кафка нахер не сдалась

мне бы аналог той картинки, ток для этого параметра, а то заебут

Ну я же скинул ссылку на гитхаб, там прямо пример на шарпе, если у вас эта же либа, только будут ещё дополнительные настройки выставляться

обычному интернет магазину кафка нахер не сдалась

два чаю этому господину

не понимаю как это связано?

софтина. в которой будет учитваться продажа, изготовление, поставка, перевозка лекарств. бытовой химии, шуб, будет использовать кафку, кассандру и hbase

какая интересная выборка типов продукции

без передачи в этот софт данных, ты не имеешь права осуществлять продажу данных товаров

лекарства, бытовая химия, и шубы

кафка и шуба братья на век

какая интересная выборка типов продукции

табак будет позже делаться

как хорошо что я теперь вейпер и подворачиваю штаны, не придется страдать из-за шарпистов