тогда весь ант не нужен, хватит баш скрипта

и яву можно удалить с хоста

Да, я тоже предлагал переписать на баше. На что мне предложили более аутентичный make. Ну и пока было решено оставит как есть.

Ява выполняет часть необходимых задач.

по идее надо bash заменить на SHELL какой нить, чтобы в нём запускать pip install ...

надо более кроссплатформенно к этому относиться

Привет всем в этом чатике. У меня есть (наверняка глупый) вопрос: есть несколько VPS (10 штук), на каждом из этих VPS запущено по одному python-скрипту. Каждый скрипт заточен под добычу данных (например прокси). Каждый скрипт собирает определенные именно для него данные. Вопрос заключается в следующем: хочу чтобы каждый скрипт добавлял свои данные в отдельную таблицу. Какую БД/СУБД использовать, чтобы она выдержала всё это? Чтобы работала быстро и на запись и на чтение? Ориентировочно, каждый из скриптов присылает БД по 1 запросу в секунду.

Не поспоришь

Привет всем в этом чатике. У меня есть (наверняка глупый) вопрос: есть несколько VPS (10 штук), на каждом из этих VPS запущено по одному python-скрипту. Каждый скрипт заточен под добычу данных (например прокси). Каждый скрипт собирает определенные именно для него данные. Вопрос заключается в следующем: хочу чтобы каждый скрипт добавлял свои данные в отдельную таблицу. Какую БД/СУБД использовать, чтобы она выдержала всё это? Чтобы работала быстро и на запись и на чтение? Ориентировочно, каждый из скриптов присылает БД по 1 запросу в секунду.

PostgreSQL

по тонкому льду

в правилах стикеры не желательны

есть 1000 объектов

нужно делать шаг в 100 объектов

и итерироваться по каждому из этой сотни

for step in range(0, 1000, 100): pass

?

есть 1000 объектов

есть 2 стула

for step in range(0, 1000, 100): pass

неа

так ты просто сделаешь 100 200 300

а надо в первой сотне итерироваться по каждому, затем ожидать

соррян, действительно

for i in range(10): for step in range(i*100, (i+1)*100):

def chunks(l, n): """Yield successive n-sized chunks from l.""" for i in range(0, len(l), n): yield l[i:i + n]

for i in range(10): for step in range(i*100, (i+1)*100):

но это не общая формула:(

???

ну сделай общую

в правилах стикеры не желательны

это чтобы был повод банить дегенератов

это чтобы был повод банить дегенератов

че я-то сразу?

¯\_(ツ)_/¯

А подскажите пожалуйста, вот есть у меня пакет, зависящий от нескольких тяжёлых пакетов(opencv, numpy etc). Хотелось бы его как-то вместе со всеми прямыми и косвенными зависимостями упаковать в автономный и пригодный для установки через pip в оффлайне вид. Я в документации по колёсам нашёл способ, как напихать эти самые колёса в папку: pip wheel -w bundle_dir my_package.whl pip install --use-wheel --no-index --find-links=bundle_dir my_package Это в принципе делает то, что мне нужно, но выглядит топорно. Можно всё в один пакет собрать или лучше тогда использовать pyinstaller и подобное?

ахахах

есть 1000 объектов

всё-таки решил не связываться с queue...

всё-таки решил не связываться с queue...

Да у меня все заработало

По 500 страниц гружу

Привет, вопрос, только у меня по 2ой части 5 задания елки, рассчет идет , секунд так 10

14 сек

это нормально, пользуйся pypy или другими языками

если хочешь быстрее

pypi?

pypy

да, вторая часть это секунд на 15-20, а с pypy меньше полсекунды

pypi?

Еще глядишь и вместо пупы лупой воспользуешься

ого, что-то новенькое

Да у меня все заработало

да оно по-любому заработает, просто то был более интересный вариант.

чот я действительно не тем смотрю

ну это реализация питона, которая с jit-ом

ого, что-то новенькое

Ты сейчас хочешь сказать, что мимо тебя прошла вся тема с pypy?

no kak

мдя, я просто сначала подумал что у меня цикл в бесконечность ушел, перезапустил , опять ... начал читать код, думаю что за фигня

не, я сабмиттил задачки на нём, но криво запомнил название

реализация на си работает за 0.3 секунды у меня

а потом просто отвлекся и хопа, цифра в в 24 млн

а с флагами оптимизации еще в 2 раза быстрее

while step: if i >= len(newList): break number = newList[i] if number >= 3: newList[i] -= 1 else: newList[i] += 1 i += number count+= 1

что тут считать то вообще ....

а дропбоксовский pyston как, загнулся?

while step: if i >= len(newList): break number = newList[i] if number >= 3: newList[i] -= 1 else: newList[i] += 1 i += number count+= 1

ну ты в данные посмотри

а ты размер не смотрел списка?

там очень большие отрицательные числа

конечно видел =)

ERROR: S client not available

пойду в 1С попробую ...

не вижу условия if i < 0

потому что это тоже считается за выход

а дропбоксовский pyston как, загнулся?

они вроде загибали, да

сказали, что чет сложновато оказалось, перепишем лучше на го

Aragaer, [06.12.17 19:16] не вижу условия if i < 0 Ммм, а это не будет выход за предел масива ? и ошибка

try: .. except: pass

???

а не , отрицательно, с конца же берет =) чей то я

Парни, почему гугл и яндекс используют разные версии мобайл и десктоп, а не адаптив? из за широкого функционала? или как-то нагрузку попутно этим тоже снижают? Так как принципиально разная структура?

потому что адаптив это фигня?

легче две держать, чем гребаный адаптив

Адаптив это нормас, просто гугл и яндекс слабые

потом, совокупности пользователей разные, эксперименты разные

сегодня обнаружили, что в яндекс таксо выпилили опцию "подать ко времени"

давно уже вроде

теперь не заказать на утро такси в аэропорт

ну я таксой не пользуюсь

вот да

так-то для обычного использования норм вот это вот "через 15 минут"

там "через 10" и "как можно быстрее"

Кто работал с Docker, создаю контейнер с постгрессом и хочу что бы все файлы от базы данных хранились в нужной мне папке рядом с проектом. Как правильно подмонтировать эту папку? Вот что имею сейчас, НО при таком раскладе папка с файлами хранится на хост машине не понятно где ... db: image: postgres:latest container_name: ps01 volumes: - db-data:/var/lib/postgresql/data volumes: db-data:

Кто работал с Docker, создаю контейнер с постгрессом и хочу что бы все файлы от базы данных хранились в нужной мне папке рядом с проектом. Как правильно подмонтировать эту папку? Вот что имею сейчас, НО при таком раскладе папка с файлами хранится на хост машине не понятно где ... db: image: postgres:latest container_name: ps01 volumes: - db-data:/var/lib/postgresql/data volumes: db-data:

В директиве постгреса том объяви как /home/vasya/postgres:/var/lib/...

не получается, типа нельзя подмонтировать напрямик

не получается, типа нельзя подмонтировать напрямик

У меня все работает.

ругается контейнер что нет прав и нельзя подмонтироваться ибо там уже что-то есть

ругается контейнер что нет прав и нельзя подмонтироваться ибо там уже что-то есть

Ну так дай права и убери то, что там уже есть.

а как права дать внутри контейнера?

запускаю все это через докер компос

а как права дать внутри контейнера?

Не надо внутри. На хосте.