А могут и оба "поломаться" ? И если "задачу" не сохранить куда-то, то она протеряется.

Тогда видимо придётся на "втором" сервере ждать "подтверждения", что задача была до конца выполнена на "первом", дабы быстро среагировать на поломку "первого".

Да, я думаю нормально.

А могут и оба "поломаться" ? И если "задачу" не сохранить куда-то, то она протеряется.

Есть такой вариант, но тут уже ничего не попишешь.

Вот очередь с подтверждением выглядит заманчиво, но вот как избавиться от потенциальных дублей. Опять же с помощью локов наверное. Но тогда уже и без очереди можно обойтись.

При налии Рдиски, можно в принципе проэмулировать подобную очередь, заодно и с дедупликацией - просто сохранять в редиску задачку с каким-то уникальным ключём для дедупликации. Там же хранить статус её обработки, что бы в случае поломки обеих сервером можно было её найти и продолжить выполнение. Но это уже будет комплексная задачка. Вероятно в ней имеет смысл использовать готовые решения в виде Celery или dramatiq

Про dramatiq не знал - сейчас почитаю. Спасибо!

Хм, а вот условие "гарантированно выполнилось" локами как таковыми не предоставляется. Тут надо либо использовать "очереди" с подтверждением обработки "сообщения" + какой-то механихм дедупликации (например сохранять в базе дату выполненной команды и не запускать вторую с такой же датой (если команды раз в день приходят). Либо на "втором" сервере ждать пока не будет снят лок, и проверять что "первый" сервер действительно успешно выполнил команду. После этого либо завершать обработку, либо самому запускать обработку команды. В случае сихнронной реализации серверов получится, что оба сервера будут "заняты" пока идёт обработка команды.

Ну вот SQS так и работает. Первый кто получил сообщение, делает его невидимым в очереди на 30 секунд (условно). Если за 30 секунд он его не удалит из очереди, его может получить другой

привет в питоне есть библиотеки, позволяющие сделать такой же красивый вывод текста на экран, как например color.js? colorama выглядит немного грустно

Хз что за color.js

Colorama никакой магии не делает, просто юзает фичи твоей консоли

Жесть какая

И в чем проблема?

Насколько я вижу, терминал линукса способен на кучу цветов А колорама использует как-то совсем мало

http://www.lihaoyi.com/post/BuildyourownCommandLinewithANSIescapecodes.html

Насколько я вижу, терминал линукса способен на кучу цветов А колорама использует как-то совсем мало

От терминала зависит, но да

Добро пожаловать, @oqrom! Не забудь ознакомиться с правилами чата. https://t.me/ru_python/802295

Есть скрипт для удаления файлов, которые были созданы более 2 часов назад, но он не работает, как надо(не удаляет), в чем может быть проблема? async def check_for_old_files(loop): while True: files = glob.glob("/path_to_files/*") for _file in files: dt = datetime.fromtimestamp(mktime(time.localtime(os.path.getmtime(_file)))) if fabs((int(dt.hour)-int(now.hour))) > 2 and "JUSTaFiLe" in _file: os.remove(_file) await asyncio.sleep(7200, loop=loop)

Есть скрипт для удаления файлов, которые были созданы более 2 часов назад, но он не работает, как надо(не удаляет), в чем может быть проблема? async def check_for_old_files(loop): while True: files = glob.glob("/path_to_files/*") for _file in files: dt = datetime.fromtimestamp(mktime(time.localtime(os.path.getmtime(_file)))) if fabs((int(dt.hour)-int(now.hour))) > 2 and "JUSTaFiLe" in _file: os.remove(_file) await asyncio.sleep(7200, loop=loop)

эм… это прекрасно.

то есть ты сравниваешь не время а “часы”

Есть скрипт для удаления файлов, которые были созданы более 2 часов назад, но он не работает, как надо(не удаляет), в чем может быть проблема? async def check_for_old_files(loop): while True: files = glob.glob("/path_to_files/*") for _file in files: dt = datetime.fromtimestamp(mktime(time.localtime(os.path.getmtime(_file)))) if fabs((int(dt.hour)-int(now.hour))) > 2 and "JUSTaFiLe" in _file: os.remove(_file) await asyncio.sleep(7200, loop=loop)

слип 2 часа? рили?

Особенно прекрасно, что это на асинкио

/whois

то есть ты сравниваешь не время а “часы”

Понял, авнокод написал?

Есть скрипт для удаления файлов, которые были созданы более 2 часов назад, но он не работает, как надо(не удаляет), в чем может быть проблема? async def check_for_old_files(loop): while True: files = glob.glob("/path_to_files/*") for _file in files: dt = datetime.fromtimestamp(mktime(time.localtime(os.path.getmtime(_file)))) if fabs((int(dt.hour)-int(now.hour))) > 2 and "JUSTaFiLe" in _file: os.remove(_file) await asyncio.sleep(7200, loop=loop)

Есусе

Есть скрипт для удаления файлов, которые были созданы более 2 часов назад, но он не работает, как надо(не удаляет), в чем может быть проблема? async def check_for_old_files(loop): while True: files = glob.glob("/path_to_files/*") for _file in files: dt = datetime.fromtimestamp(mktime(time.localtime(os.path.getmtime(_file)))) if fabs((int(dt.hour)-int(now.hour))) > 2 and "JUSTaFiLe" in _file: os.remove(_file) await asyncio.sleep(7200, loop=loop)

find /path -mmin +120 -type f -delete

Что-то такое

И в крон

И в крон

ммм...это что?)

man cron

find /path -mmin +120 -type f -delete

Опять ДЕВОПСЫ, которые в командную строку не умеют?

судя по соседнему каналу, девопсы в России это в основном бывшие админы и работники техподдержки.

иу

А работа с файлами есть в asyncio что ли ?

Нет же вроде

есть обычная синхронная =)

есть обычная синхронная =)

А если например хочу так сделать

Асинхронно читать например

АСИНХРОННО ЧИТАТЬ С ЖЕСТКОГО ДИСКА

ГОСПОДИ ДА

А если например хочу так сделать

что вданном случае должно быть асинхронным? ожидание заполнения буфера диска?

АСИНХРОННО ЧИТАТЬ С ЖЕСТКОГО ДИСКА

aiofiles же ну

aiofiles же ну

треды ну

aiofiles же ну

хуйня какая-то

А если например хочу так сделать

берешь http://man7.org/linux/man-pages/man7/aio.7.html и вперед

aiofiles же ну

aiofiles это банальное синхронное чтение в тредпуле

судя по соседнему каналу, девопсы в России это в основном бывшие админы и работники техподдержки.

А чем они занимаются сейчас? Что актуально?

А чем они занимаются сейчас? Что актуально?

По сути, они занимаются деплоем и инфраструктурой: docker, aws, openshift, всякие хуки для выкатки кода, sonar, крутят настройки веб серверов и т.д.

У нас в конторе например разработчикам вообще нельзя править конфиги nginx и wsgi.

#работа #офис #vacancy Senior QA with Python (https://telegra.ph/-07-19-35) - Product Engine 3500$-4000$ Sr. engineer, SDET 7+ years of prior work experience in the following Good to have: • Knowledge of docker containers • Knowledge of web service API testing tools like Selenium WebDriver • Experience in the Set top box automation is preferred • Working with open source frameworks such as Robot framework, Pytest for end to end automation • Experience with Mobile Apps Automation using Appium Education Required: • Bachelor’s degree in computer science or related field. Masters preferred. If you have questions, here are some easy ways to get in touch with us: @Alex_DNA325, team@dna325.com

Приветствую! Задали на лето ребенку выучить таблицу умножения. Когда стало понятно, что солнце и лень матушка сильнее, решил наколенить проверочную программу) Без таймеров всё отлично! Но стоило задуматься, как таймер внедрить на ответ, сразу грабли полезли. Уже больше часа пробую разные варианты, пока так и не удалось добиться) После окончания таймера в input не попадает "неправильный ответ" (у меня 0), а просто выводит сообщение, о времени и дальше ждёт ввода на тот же вопрос. https://pastebin.com/SKyy2SsD

есть обычная синхронная =)

Aiofile ?

По сути, они занимаются деплоем и инфраструктурой: docker, aws, openshift, всякие хуки для выкатки кода, sonar, крутят настройки веб серверов и т.д.

Интересно-интересно... Т.е. им питон просто для написания собственных костылей нужен?

Интересно-интересно... Т.е. им питон просто для написания собственных костылей нужен?

Да по-разному, нашим девопсам хватает баша, на питоне не пишут

Aiofile ?

aiofile или aiofiles?

aiofile честно асинхронная там где это возможно, но не предоставляет совместимый интерфейс с io.IOBase

aiofiles просто враппер над тредпулом

проблема в том что posix aio работает в оочень ограниченом числе случаев и в большинству людей это не нужно.

aiofile честно асинхронная там где это возможно, но не предоставляет совместимый интерфейс с io.IOBase

Честно не знал, спасибо :)

проблема в том что posix aio работает в оочень ограниченом числе случаев и в большинству людей это не нужно.

Sad(

Вроде в 5.1 линуксе выкатили что-то веселое или нет?

зарта на вас нет. вы сначала определитесь нахрена вам это нужно.

Добро пожаловать, Бикти! Не забудь ознакомиться с правилами чата. https://t.me/ru_python/802295

зарта на вас нет. вы сначала определитесь нахрена вам это нужно.

Что бы не ожидать там, где можно не ожидать? Хотя подозреваю, что профит будет лишь на реально больших файлах

Что бы не ожидать там, где можно не ожидать? Хотя подозреваю, что профит будет лишь на реально больших файлах

и в чем проблема с тред пулом?

Ну, такое. На самом деле, практически никакой, кроме того, что честная асинхронность по идее дешевле для памяти :) Но на самом деле, да, с ним в целом все ок, так все делают

А чем они занимаются сейчас? Что актуально?

инфраструктура, деплой, интеграция, мониторинг. Своего рода “смазка” между всеми отделами - от айти до маркетинга.

Добро пожаловать, @maxim24t! Не забудь ознакомиться с правилами чата. https://t.me/ru_python/802295

У нас в конторе например разработчикам вообще нельзя править конфиги nginx и wsgi.

это как раз противоречит методологии ДевОпс. Все процессы должны быть прозрачными и доступными, чтоб можно было учиться.

это как раз противоречит методологии ДевОпс. Все процессы должны быть прозрачными и доступными, чтоб можно было учиться.

Ну не знаю, мне кажется наоборот хорошо - разграничение ответственности. Все конфиги разработчики могут посмотреть же, просто нельзя на проде их менять

Разграничение ответственности это классно ровно до того момента, когда проблема не возникает на границах двух зон ответственности. А в IT такое происходит сплош и рядом

И вот тут начинаются прекрасные приключения в духе "у нас два дня на проде не работает оплата, а админы мне все еще не могу скинуть логи, так как для этого нужен аппрув от тимлида"

Приветствую Вас! Уважаемые разработчики! Я болею Сахарным Диабетом уже 5 лет. Зная примерную работу технологий и собственную нужду (частичную потерю зрения, уколы, ....) - Понимаю - Какой голосовой помощник нужен Глухим, Немым, Слепым - Инвалидам - Для данных людей . И по всем законам - Дуся, Ассистенты, Агрегат - Рядом не стоит и лет 5 Им шагать к человеческой логики и смекалке. Хочу найти инвестора на Интелектуальный Обучаемый Голосовой Помощник с неплохим техническим отделом. Для связи @maxim24t Жлаю Всем Успехов и Преодоления НеВыполнимых Задач!

И вот тут начинаются прекрасные приключения в духе "у нас два дня на проде не работает оплата, а админы мне все еще не могу скинуть логи, так как для этого нужен аппрув от тимлида"

Чет это не похоже на девопс)

Чет это не похоже на девопс)

Ну так девопс же не про разграничение ответственности

девопс как раз появился из-за недостатков разграничения ответственности, когда программисты заявляли “У меня все работает” и “это проблема ай-ти”. В Нетфликсе вообще нет разных ролей. Все программисты и отвечают за полный цикл разработки

Ну так девопс же не про разграничение ответственности

Именно, про процесс

Ну тип, когда есть прогеры кроме девпопсов, то девпопсы становятся просто админами ну и получается то шо получается

?

Хах, если бы

Есть прогеры, которые пишут код. А есть девопсы, которые делают все, в том числе и пишут код

Боль

Ну, тогда это просто админы, которые пишут код

надо определить ориентацию PDF (portrait/album) - как думаете, что быстрее будет - что-то готовое на питоне искать или через pdfinfo (получил через subprocess аргументы, распарсил из строки, обработал)?