Ruslan
это для парсинг страниц, понятное дело
Ruslan
Nikolay
Объясни
https://xkcd.com/1171/
Omodamos
Ruslan
Ruslan
почому?
я без наезда, я просто рили не понимю почему все так бояться регулярочек
Philipp
А вот такой ещё вопрос, как вы версии выставляете для сервисов, где храните, как получаете и указываете в пайплайнах для установки тегов на образы?
Я костылирую, хочу уйти от подобного, но не знаю в какую сторону смотреть:
У меня в папке с сервисом есть базовый .env.common файл, в котором я указываю неизменяющиеся от среды выполнения переменные, такие как версия апишки и т.п., там же валяются .env и .env.docker, первый для разработки, второй для работы в контейнере (что уже само по себе мне не нравится, но пока не искал как это решить). Сейчас у меня в корне папки с сервисом валяется скрипт get_version.py, который я дёргаю из пайплайна и получаю версию сервиса хранящуюся в .env.common. Всё это выглядит очень - очень криво, есть у кого-нибудь на примете хорошие статьи по теме?
Tishka17
А вот такой ещё вопрос, как вы версии выставляете для сервисов, где храните, как получаете и указываете в пайплайнах для установки тегов на образы?
Я костылирую, хочу уйти от подобного, но не знаю в какую сторону смотреть:
У меня в папке с сервисом есть базовый .env.common файл, в котором я указываю неизменяющиеся от среды выполнения переменные, такие как версия апишки и т.п., там же валяются .env и .env.docker, первый для разработки, второй для работы в контейнере (что уже само по себе мне не нравится, но пока не искал как это решить). Сейчас у меня в корне папки с сервисом валяется скрипт get_version.py, который я дёргаю из пайплайна и получаю версию сервиса хранящуюся в .env.common. Всё это выглядит очень - очень криво, есть у кого-нибудь на примете хорошие статьи по теме?
Есть система деплоя, там лежать настройки сервиса. В докере или вне докера крутится сервис - ему пофиг
Tishka17
Никаких .енв не юзаю, просто передаю переменные окружения силами ОС
Tishka17
Хз какое отношение имеет версия к энвам
Tishka17
Tishka17
Адреса базы и прочее
Tishka17
Tishka17
Точнее для чего ты её собрался где-то указывать
Philipp
Ну ок, при сборке и пуше в докер регистр я могу всё хранить в variables, но что при разработке у себя на компе? тут же удобно с .env.
Philipp
Tishka17
По сути, в гитхабе ты оперируешь ветками и тэгами
Philipp
То есть, что бы получался не всегда my_service:latest, а например my_service:0.2.42
Tishka17
С latest сложнее. Но по сути ты вешаешь в гитхабе на отпоеделнную ветку (master) установку так же latest тэга кроме версии
Philipp
Делай её из тэга гита
Я тоже подумал, сегодня как раз, что есть же номер пайплайна, вот его и собачить тегом.
Tishka17
Tishka17
Мне больше нравится тэги в Гите, так как можно сразу чекаут сделать. Но если сборка не воспроизводимая, лучше ещё номер пайплайна юзать дополнительно к Тэгу
Philipp
Ну, вообще да, версия апи, это же нифига не версия образа сервиса.
Philipp
Я ведь могу нифига в апишке не менять, но внутрянку сервиса переписать.
Tishka17
Maxim
Ruslan
Maxim
понятно
https://stackoverflow.com/a/1732454
Ruslan
Ihor
Ребята что лучше изучать для Киева Python or .NET ? И почему количество вакансий по .NET так стремительно растет?
Philipp
Вообще, я бы latest пихал и не парился на время разработки, но вот что получается, я в стейдже build собираю образы сервисов и пушу их в gcr, после этого, стартует стейдж тестов, в котором я пуллю образы обратно, поднимаю контейнеры и запускаю тесты, но может сложиться ситуация, когда параллельно идут два пайплайна и один успевает запушить свои версии сервисов и только начинает стейдж тестов, как второй перезатирает latest версии в gcr, поэтому могут возникнуть косяки... Думаю использование номера пайплайна в качестве тега может решить проблему, НО, я в правилах отслеживаю изменения в папках сервисов и билжу новые версии только если что-то поменялось, соответственно, если сервис A поменялся в пайплайне 42, то он запушится в gcr как A:42, но при этом, если в сервисе B нифига не поменялось, то он не будет пересобираться, соответственно в gcr последним тегом может быть вообще какой-нибудь B:20...
Philipp
Maxim
Вот код ошибка в 20 строке https://pastebin.com/q0SApbYe
Tishka17
Maxim
?
Tishka17
Ошибки начинаюися с 15 строки
Tishka17
А за то, что выложил файл без подсветки - просто фу
Anonymous
Anonymous
26, 28 беды с экранированием
Tishka17
extension = filename.split(".") - просто пиздеж. В результате сплита получится не расширение файла, а имя и всё ещё расширения
Tishka17
Соединять имена через +"/" нельзя, надо юзает os.patn.join
Anonymous
base_name, ext = os.path.splitext(file_name) для расширения
Глеб
#вакансия #москва #Python #middle #senior #remote
Компания: SL Tech
Город и адрес офиса: г Москва, ул Гашека, д 7 стр 1
Формат работы: Офис или удаленно
Занятость: полная
Зарплатная вилка: 100 - 170 тыс/мес
✅Python разработчик
Описание вакансии:
SL Tech – компания, которая управляет портфелем проектов, предназначенных как для потребителей, так и для партнеров - поставщиков услуг в высокотехнологичных областях.
Компания родилась в 2006 году как часть группы SEALINE, в которую также входит страховой и перестраховочный брокер SEALINE, входящий в ТОП-10 страховых брокеров РФ.
Мы создаем современные IT-решения для бизнеса и жизни, помогая выстраивать коммуникацию между поставщиками и потребителями услуг. Своим партнерам мы предлагаем готовые решения, которые позволяют расширить возможности существующего бизнеса и получить дополнительный доход.
SL Tech не просто разрабатывает продукты, отвечающие современным запросам партнеров и их клиентов, но и влияет непосредственно на формирование новых сегментов рынка
✅Что делать:
Требуется Middle-Senior/Senior Python Разработчик на проект, связанный со страховыми.
Проект построен сейчас по принципу одного монолита, выполняющего основую задачу со страховками, который обслуживают несколько макросервисов.
Делаем сейчас много нового в рамках этих сервисов, но старое тоже нужно поддерживать.
В проекте используются технологии:
Python 3.7
Django 2
Celery 4 (w/ RabbitMQ backend)
API предоставляет DRF, взаимодействие с сервисами идет через RabbitMQ. Внутри в монолите и в сервисах мы полагаемся на Redis. В общем, достаточно станадртный стек.
Разработка ведется в GitLab, с настроенным CI/CD.
Деплой идет в Docker Swarm.
Для нормальной разработки мы используем flake8, pytest и всё это прогоняется в GitLab.
Помимо опыта работы со всем выше, хочется увидеть желание:
писать поддерживаемый и отслеживаемый код: мы любим логи и стараемся любить тесты 🙂
участовать в архитектурных решениях, как проекта в целом так и отдельных сервисов
участовать в code review с обоих сторон баррикад
учить новое, так как помимо Python в стеке местами присутствует Elixir
✅Условия и преимущества
• Оформление по ТК РФ
• Полностью белая зп;
• Уровень зп обсуждается индивидуально (в соответствии с вашим уровнем и ожиданиями) ЗП вилка 100-170 тыс.руб.
• ДМС (после испытательного срока 3 месяца)
• Офис в центре (5 минут от м.Маяковская)
• Чай, кофе, печеньки
• Адекватное руководство
• Весёлая, сильная команда
Контакты: @sandevl в любое время
Pavel
oh my god
87 строчек, и это с обработкой ошибок
Kirill
Так что, по вашему не стоит их разделять?
Только ради того, что бы таски выделить в отдельную репу - я бы не стал.
Скорее всего таскам может понадобится какой-то код, который использует в том числе и веб-приложение (первое что приходит в голову - работа с базой данных, модели, конфиги и др.). Будешь либо дублировать код, или выделять ещё 3-ий репазиторий под общий код.
В тестах веб-приложения придётся, что-то придумывать, что бы эмулировать выполнение тасков (или запускать для тестов сервис с тасками).
Повышается вероятность косяков, т.к. вместо импорта тасков для их вызова, придётся использовать строковые имена этих тасков, которые никто не проверит на правильность. С импортами хотя бы сам питон тебе скажет если ты сделаешь опечатку.
Omodamos
А как сейчас принято читать настройки для скриптов?
- configparser + ini-файл
- from config import *
- json.load(open('config.json'))
Желательно без сторонних модулей и максимально просто и удобно
Philipp
Только ради того, что бы таски выделить в отдельную репу - я бы не стал.
Скорее всего таскам может понадобится какой-то код, который использует в том числе и веб-приложение (первое что приходит в голову - работа с базой данных, модели, конфиги и др.). Будешь либо дублировать код, или выделять ещё 3-ий репазиторий под общий код.
В тестах веб-приложения придётся, что-то придумывать, что бы эмулировать выполнение тасков (или запускать для тестов сервис с тасками).
Повышается вероятность косяков, т.к. вместо импорта тасков для их вызова, придётся использовать строковые имена этих тасков, которые никто не проверит на правильность. С импортами хотя бы сам питон тебе скажет если ты сделаешь опечатку.
Забавно, что я сейчас как раз по именам их создаю, не знал, что можно как-то по другому =)
Alex
Alex
еще можно yml использовать для этого, но это уже сторонний модуль
Anonymous
Philipp
Anonymous
Philipp
Omodamos
в .gitignore кладется сам конфиг? settings.py под гитом?
Anonymous
это позволяет менять формат файлов для хранения
Omodamos
Anonymous
Антон
Эксперт на вебинар по Python
10 Ноября 19:00-21:00
Аудитория вебинара: начинающие программисты
Оплата 5-10 т.р. за эфир
Писать @milyakov с описанием своего опыта.
Anonymous
всем привет я новенький
Anonymous
у меня есть вопрос
почему не работает
print = hello
Александр
лол
Anonymous
(хочу чтобы в програмке было написано hello)
Anonymous
я видел что хауди хо что то типо такого делал
&
Anonymous
но у меня не работает (hello)
Anonymous
&
а как
А документацию по print() открой
Александр
да он же троллит
Tishka17