если уж на то пошло, то на фронт можно и aws\s3 либу затащить что умеет делать это все под капотом. Но опять, авторизация

Возобновлением занимается? Есть ли обертки чтобы s3 заменить на gcp/azure? Что с корсами?

вопрос был лишь в том - умеет ли с3 сдк фронтовый ресторить при обрыве или нет.

minio есть такой проект, реализует S3 протокол под вашу проблему должен подойти иначе делать реализацию под каждый клауд отдельно

мой вопрос был 1

ты видимо ни вопроса не понял ни схемы.

А вообще я бы порезал и в горутинах загрузил на бэке

А вообще я бы порезал и в горутинах загрузил на бэке

Да не выйдет это без бека

ты видимо ни вопроса не понял ни схемы.

Права на запись в blob storage нет с фронта без бека. Боже. Гошный чат.

но у Евгения был вопрос — сделать без бека

ну меня деклассифицировали из сеньоров до джуна+ 🙂 можно джуну простить не знание сижу джуню с готовым решением как могу

ну меня деклассифицировали из сеньоров до джуна+ 🙂 можно джуну простить не знание сижу джуню с готовым решением как могу

Ты ж недавно говорил, что не сеньёр?)

Права на запись в blob storage нет с фронта без бека. Боже. Гошный чат.

Да хорош уже нюни ныть ё-моё

я случайно упомнял свой сеньорский опыт в пхп в виде резюме

Пхп не опыт)

tus диаграмка делает все что ты спрашиваешь, и частями грузит, и рестартует загрузку если надо, и вообще готовый пример запустил бы уже да проверил)

Плюс если тебя можно деклассифицировать в джуна сообщением анонимуса - то какой ты тогда сеньор

топик стартеру, я плохо понимаю вопрос изначальный, потому и накинул Толи есть проблема, толи нету

проблем нету, вопрос из праздного интереса - умеет ли жаваскриптовая с3сдк лить с восстановлением при обрыве. ожидался ответ - да умеет / нет, еще не завезли. начался балаган про го и пересылание через бэк, какие-то либы, пляски с корсом...

Да проще ответить "Да, можно. А нужно ли?"

У s3 хранилищ есть такая штука как presigned url. Её может сгенерировать бэк индивидуально для конкретного клиента и он сможет используя эту ссылку залить файл, либо провести другую операцию. В зависимости от того какие права бэк вшил в ссылку и тд. Такой подход как раз используется что бы не забивать свои каналы гоняя кучу трафика, а давая клиенту сделать это самому

У s3 хранилищ есть такая штука как presigned url. Её может сгенерировать бэк индивидуально для конкретного клиента и он сможет используя эту ссылку залить файл, либо провести другую операцию. В зависимости от того какие права бэк вшил в ссылку и тд. Такой подход как раз используется что бы не забивать свои каналы гоняя кучу трафика, а давая клиенту сделать это самому

Хм красиво, не знал

в tus выше же ровно это и использовано, гляньте внимательней если оно вам действительно нужно

У s3 хранилищ есть такая штука как presigned url. Её может сгенерировать бэк индивидуально для конкретного клиента и он сможет используя эту ссылку залить файл, либо провести другую операцию. В зависимости от того какие права бэк вшил в ссылку и тд. Такой подход как раз используется что бы не забивать свои каналы гоняя кучу трафика, а давая клиенту сделать это самому

да мой вопрос давно закрыт уже когда Михаил ответил одной фразой :)

дорогий дневник, шел 3ий день выходных. Все демонстрации пройдены, весь мусор собран, больше не знаю чем занятся.

что такое ВО?

Тут спрашивали, какую бы задачу решить на го вместо простых и тестовых, есть такая интересная задача, которую бы я отдал на аутсорс/тестовое/стажировку Есть го-сервис, который делает запросы в LLM (gemini, Qwen-Code, GPT-4, Claude), ответ ожидает в формате interface Response { files: { [filePath: string]: string } message?: string error?: string } то есть овтет будет прмиерно таким { "files": { "main.ts": "console.log('Hello, world!');", "utils/helper.ts": "export function greet(name: string) { return `Hello, ${name}`; }" }, "message": "Файлы успешно сгенерированы" } Проблема Когда llm в виде стрима отдает этот json — она рисует его последовательно то есть в таком виде чанк 1 { "files": { "main.ts": "console.log('Hello чанк 2 , world!');", чанк 3 "utils/helper.ts": и так далее (и чуть мелкими кусочками)... надо сделать так, чтобы: - когда появлялось новое название файла — слалось ws сообщение на клиент и потом поток событий на доавбление его контена - как только появился вторйо файл — все повторялось (событие о том, что мы отдаем уже другой файл и опять поток с его содержимым Кто готов сделать такое или есть наработки — готов буду заплатить или помочь с реализацией, просто у меня работа с проектом делается не только на стороне разработки, а еще куча дизайна, маркетинг и прочее сейчас я в mvp прошу llm делать ответ в другом формате, но llm температурят и отдают в кривом (особенно claude) виде, gpt4 через раз, только qwen справляется буду рад участию и упомяну на сайте codiew.io, и даже заплачу, можно будет в резюме указать если решите поизучать как ее реализовать, есть пара известных способов: - использовать gjson - использовать токенайзер нативной encoding/json - использовать решение типа https://docs.boundaryml.com/guide/baml-basics/streaming на клиенте это будет выглядеть так https://codiew.io/r/6n0?t=12000

Ну то есть, надо парсить жсон почанково.

ага и стримить когда мы находимся внутри чанка files.[*].content до закрытия files.[*].content и ноды files.[*]

https://github.com/Blaze2305/partial-json-parser/blob/main/examples/json_stream/main.go - ну в принципе что-то такое сделано, остается следить, в какой ноде мы находимся.

нууу очень круто выглядит! спасибо! 1 example и ровно под стримминг осталось только найти исполнителя 🙂

Джсон так себе для стриминга подходит. Какие структуры надо парсить будет? Произвольные?

{ "files": { "main.ts": "console.log('Hello, world!');", "utils/helper.ts": "export function greet(name: string) { return Hello, ${name}; }" }, "message": "Файлы успешно сгенерированы" } или { "error": "Some error" } вот в таком формате буду запрашивать

Маленькие структуры зачем тут стриминг

это пример стримминг нужен, что live режим во время записи поддерживать

Так непонятно что будет стремится. Такую структуру не проще просто передать целиком?

ndjson можно просто взять.

@halabooda кстати, а если качать через твой сервер, то кто будет резать на части на фронте ? ну т.е. я в браузер кидаю файл на 5 гиг, что дальше происходит ?

фронтовый ? тогда непонятен был твой вопрос про то - кто в браузере будет резать и потом отправлять команду на склейку.

а если браузер закрыть, открыть и снова кинуть тот же файл, оно продолжает ?