Или на клиенте или на сервере

Или на клиенте или на сервере

Сервер

Тогда таки судя по всему практически тоже что я в монго сделал

Вопрос только в какой ее части

Эээ..сча найду слоеную архитектуру

Очень похоже что в +- аналогичном месте - между данные из базы и данные на вывод

Очень похоже что в +- аналогичном месте - между данные из базы и данные на вывод

Я так сделал: Asgoret: СУБД - Apache Accumulo на HDFS (взят от Hortonworks) Поточка через - Apache Kafka Аналитика через - Apache Spark (кластер Apache Storm) Рендер - Geoserver IMDG - Google Guava Веб - JS Liferay (есть свои кастомы) Тестовая среда разработчика - Apache Zeppelin ———————————- В Kafka\Spark\Accumulo имплементирован java Geomesa

Очень похоже что в +- аналогичном месте - между данные из базы и данные на вывод

Но у меня еще выхлоп шел в OLAP Jaspera

Но у меня еще выхлоп шел в OLAP Jaspera

Ага. Чисто бизнес аналитика

Там кстати, если только это не биржа, выборки имеют право быть не мгновенными

Ага. Чисто бизнес аналитика

Не только, бизнес + динасическая карта и плавные переходы из таблички с цифрами, на карту по 1 клику

У меня задача отображение текущей недвижимости по северной Америке

В реалтайм блин:)

Там кстати, если только это не биржа, выборки имеют право быть не мгновенными

Хз, развитие было без меня) если не заговнякали, то реал-тайм должен работать

В реалтайм блин:)

Дааа... никому не нужен отклик в 10 минут)))

В реалтайм блин:)

И реалтайм разный

Aka zillow

Первый вариант выборку на онтарио - даёт 5 секунд. Это типа долго

Там что то около 100к недвижимости

Это вывод всех маркёров

Вот и полез внутри монго. Руки в кровь по локоть:)

Вообщем пока лазил по mongo issue tracker узнал новое - geohash. Алгоритм на основе создания хеша который может дать возможность выборки Points по квадратам с разным размером ребра. вот тут табличка есть https://www.movable-type.co.uk/scripts/geohash.html

народ таким образом групирует

Вообщем пока лазил по mongo issue tracker узнал новое - geohash. Алгоритм на основе создания хеша который может дать возможность выборки Points по квадратам с разным размером ребра. вот тут табличка есть https://www.movable-type.co.uk/scripts/geohash.html

Тогда ты наверно и про https://dev.mysql.com/doc/refman/8.0/en/spatial-types.html не слышал

Тогда ты наверно и про https://dev.mysql.com/doc/refman/8.0/en/spatial-types.html не слышал

Не-а не слышал :)

И как тебе ? Использовал ?

И как тебе ? Использовал ?

Да это старая штука же. Ею раньше все кто так или иначе с гео связаны были юзали.

Да это старая штука же. Ею раньше все кто так или иначе с гео связаны были юзали.

прошла мимо. старая система что я строил клиенту этак лет 7м назад, караз на mysql но тогда таких данных не было у него как сейчас

и там были банальные int поля lat lon

и на фронте делалась кластеризация маркеров. В итоге разрабы клиента zoom out ограничили

вообщем реальные тесты $cluster - ссылка на гугл доку https://docs.google.com/document/d/1dN2ralEdKwjmupp-SYfr1LGgDMlfogVmErVrnLu1X68/edit?usp=sharing

камрады, почему это возвращает 404? location /api/v1 { proxy_set_header Request-ID $request_id; rewrite ^/api/v1(/.*) $1 break; proxy_pass http://mtgate:8000; }

до mtgate именно эти запросы не доходят ?

как можно побольше логов включить, чтобы понять в чем проблема?

только этот не работает, а те что выше - ок?

ага

дебаг включил, реврайт лог включил, в логах по прежнему тишина

а полностью конфиг? если убрать все рерайты до него?

https://hastebin.com/ejatekorat.nginx

тупо ради интереса

поменяй местами location /api/v1/telegram и location /api/v1/

?

или просто убей location /api/v1/telegram

не интересно, система живая https://nginx.viraptor.info/ - вот тут можно поиграться

насколько я понимаю? rewrite работает только тогда, когда совпадёт location

дебаг включил, реврайт лог включил, в логах по прежнему тишина

и в дебаге тишина ? есть compose повторить ?

соответственно, предыдущие rewrite никак влиять не могут у меня это всё в докере, stderr настроена по инструкции, но там полная тишина, хотя дебаги все включил, тут пока не знаю в чём причина

Можешь еще раз полностью озвучить задачу: Такое-то хочу в mtproxy, остальное в telegram

наоборот, это в телеграм, остальное в прокси

и оно всё работает, но тут мне приспичило сделать префикс /api/v1 ?

rewrite_log on; пробовал ?

если совсем никак - кидай compose, где telegram и mtproxy - контейнеры nginx могу посмотреть что там не так.

пробовал

Всем привет! Хочу в докер-компоузе забиндить папку так, чтобы если нет папки на хосте, то оно не делало пустую папку и в контейнере, есть ли способы?

если совсем никак - кидай compose, где telegram и mtproxy - контейнеры nginx могу посмотреть что там не так.

там всё так, проблема только в конфиге nginx, в одном месте

это понятно - с nginx всегда так)) давно я таким не обмазывался))

Всем привет! Хочу в докер-компоузе забиндить папку так, чтобы если нет папки на хосте, то оно не делало пустую папку и в контейнере, есть ли способы?

Задача какая ?

Задача какая ?

Есть к примеру пхп-проект в контейнере. В него маунтится код, который изменяешь на хосте, и он изменяется в контейнере. Тут все просто. Но, иногда нужно запускать тот же компоуз файл, когда нет кода на хосте. И без кода на хосте - это все отваливается. Другой файл компоуза не хотелось бы использовать

а откуда брать файлы контейнеру ? Через add . /project_name ?

они есть в контейнере изначально

но при маунте из несуществующей папки - они затираются

нельзя ли какие-то условия выставить в докер-компоузе?)

нельзя ли какие-то условия выставить в докер-компоузе?)

давай определимся - что именно ты хочешь - чтобы с одного compose запускался проект и в dev и в prod ?

я объяснил чего я хочу. > Но, иногда нужно запускать тот же компоуз файл, когда нет кода на хосте. И без кода на хосте - это все отваливается. Другой файл компоуза не хотелось бы использовать

прод тут не причем

я объяснил чего я хочу. > Но, иногда нужно запускать тот же компоуз файл, когда нет кода на хосте. И без кода на хосте - это все отваливается. Другой файл компоуза не хотелось бы использовать

код-то куда делся или git pull отменили ? Пока твой запрос выглядит "странным".

выхода нет - пиши 2 docker-compose а по сути - нужно понимать твою задачу, чтобы подобрать решение.

Там куча сервисов описано в компоузе, на каждый делать гит пулл накладно, когда есть код в контейнерах

Задача простая - есть много разработчиков, и все хотят юзать один докер-компоуз без скачивания каждый раз всех сервисов на хост машину.

у некоторых разработчиков может и не быть доступа даже до исходников некоторых

хм, у меня сделан dev-хост, куда прокинуты публичные эндпоинты на все сервисы разработчик у себя в env указывает куда ему идти за сторонним сервисом, а свои разрабатывает сам. если он фул-стек - есть типовой шаблон деплоя.

и не нужно - это ж микросервисы - пусть ходит к ним по API.

пусть) но ему нужно получается скачивать исходники пыха на свой хост, а он там может ваще на РАСТе херачит, или каждый раз комментировать строчку биндинга папки в куче сервисов

я канеш понимаю, что во всем виноват пых) но все же)

стоп, зачем ему пых скачивать, если он на расте фигачит. Контейнер с репы скачал - там собранный пых, который обеспечивает API

а теперь вернитесь пожалуйста к моему первому посту)

> Есть к примеру пхп-проект в контейнере. В него маунтится код, который изменяешь на хосте, и он изменяется в контейнере. Тут все просто. Но, иногда нужно запускать тот же компоуз файл, когда нет кода на хосте. И без кода на хосте - это все отваливается. Другой файл компоуза не хотелось бы использовать

он тоже не хочет пых пулить

У тебя монолит или микросервисы ?

30 сервисов, описанные в докер-компоузе. Там есть и пых и раст к примеру. Разработчик раста, когда поднимает у себя всю инфру, сталкивается с проблемой маунтинга папки до пых-проекта

брр. зачем разработчику на расте доступ к папке на php?

?

ему нужен проект этот, как часть общей системы. Но он не поднимается без исходников

Давай я еще раз озвучу то, что писал. 30 сервисов. Значит для dev мы можем каждому дать публичный эндпоинт - это ж дев, верно ? пускай разработчик свой сервис делает в удобной ему IDE, а к другим сервисам соединяется по публичным эндпоинтам в дев среде. на кой хрен на локалхосте 30 сервисов ?

на расте зависимость от php? что ?

да, на локале 30 сервисов нужны. И они взаимосвязаны между собой все, гдето по http, где-то по grpc.

у каждого свое окружение

да, на локале 30 сервисов нужны. И они взаимосвязаны между собой все, гдето по http, где-то по grpc.

мне твой подход не нравится, но бог с тобой. тогда пишем 2 docker-compose: 1. Локальный разработчиков - как сбилдить _своё_ приложение и запушить в registry 2. как поднять своё приложение, когда все 30 сервисов берутся из registry, а своё приложение собирается в compose но честно для 30 микросервсов (сколько там команд) я бы запилил dev-среду не так дорого стоит.

мож голосом обсудим ? Либо я не понимаю задачу, либо ты меня)

Да, вижу только два файла, спасибо. Но тогда придется все дублировать, а это прям боль(( Не, голосом сейчас не получается, сорри.

дев-среда то чем не зашла или вопрос в 30 баксах ?

дев-среда не подойдет, нужно пхп-приложение свое, так как оно коннектится к базам, которые тоже нужно чтобы были локальные. Тут нужна независимость полная.