Дима
Ну вот надо уточнять задачу сразу)
Konstantin
Max
стартап ж ёпте
Max
денег нету
Alexander
Просто гоняли миллионы задач в нем и нормально было
Alexey
или даже постгрес
мы пробовали юзать mysql как очередь - там можно, но после определённой нагрузки тоже становится понятно, что абстракция немного не та и из-за этого нагрузка на базу становится очень большой, а locking между воркирами через базу работает мягко говоря не оптимально =)
Max
Alexey
Просто гоняли миллионы задач в нем и нормально было
миллионы — это не обьёмы - если у тебя 100к пользователей (что очень не много для современных стартапов) то у тебя могут десятки миллиардов(10^10 КАРЛ!11) событий проходить через эту очередь в день
Max
Алексей за меня на вопросы отвечает - чует тему )
Max
здесь речь не о том что вы гоняли. а о том когда оно упрётся
Alexey
(на одной ноде рэббит работает относительно ок кстати)
Alexey
Konstantin
а я своё писал
Konstantin
на классик асп :D
Alexey
впрочем очередь поверх mysql скейлится до сотен миллионов пользователей и кода там меньше тысячи строк на Go. Так что тоже себе подход, сильно проще rabbitmq, ибо в отличие от последнего, любой программер может разобраться за пару часов, что тот код делает, что тоже имеет свои прелести.
Max
Max
на одной ноде да ок работает
Max
пока не ёбнется по каким-либо причинам
Max
читай пока не проебёшь очередь
Max
В общем то, парни, спасибо за подсказки )
Alexander
читай пока не проебёшь очередь
Ну смотрите сами. Просто самый быстрый вариант. С другой стороны - может вам какой нибудь облачный вариант подойдёт? Типа в ажуре есть очереди и сервис басы всякие. Они на миллиарды рассчитаны. Но тут надо деньги считать)) во всяком случае - интересная задачка ) хотелось бы почитать потом как решили
Max
Max
я сейчас говорю о продакшене в DO
Max
если навернём нужное количество юзверей, то переедем в AWS или GCP и получим кучу бабок от сотовых операторов в рашке и китае
Roman
Roman
Alexey
А как же zbr?
Наш предводитель, Евгений, главный специалист по подводным лодкам и игре на саксафоне, в тот момент был занят самим Elliptics'ом
Roman
Vladimir
Имхо, так и есть
Ну просто если б для того кода взяли б плюсы, он стал бы читабельнее :)
Roman
Бтв, сам эллептикс норм? И почему новый проект, а не ceph?
Alexey
да, сам эллиптикс много где на плюсах. А не ceph потому что требования к CAP и производительности были другие, да и ceph тогде не работал как надо
Vladimir
Alexey
потому что начинался давно, людьми которые писали ядро
Roman
Roman
Я его раньше активно читал, особенно когда он kevent пытался в ядро занести
Alexey
и Си не так уж плох если ты из ядра пришёл, например если нужен stdlib и контейнеры, то всё довольно просто делается через
cp -a ~/linux/include/linux/{list,rbtree}.h ~/elliptics/include/
Alexey
Roman
А так ни kevent, ни aio :(
Roman
Даже fadvise ставит все колом :(
Roman
Был товарищ, который в 2012 принес патч, выносящий fadvise willneed в workqueue
Arcos
#вопрос
У меня есть Маааленький VPS с 80Гб места. Свободно там 5Гб
Может кто знает как в этом случае сделать дамп на удаленный FTP или уж в идеале в дропбокс или яндекс диск?
Алик Сережевич
Дожили...
Алик Сережевич
«подскажите как сделать дамп"
Roman
Max
где-то были йобы для монтирования дропбокса в фс
Arcos
rsync?
Спс, сейчас почитаю
Vladimir
Алик Сережевич
Алик Сережевич
но то были времена. А сейчас всем тулзу готову подавай
Алик Сережевич
И чтобы она процесс в инстаграм слала и смузи делала
Arcos
Arcos
rsync?
Не, печаль. Это на обоих машинах он по ходу должен быть
Max
он например есть в дефолтной поставке убунты....
Vladimir
@SaveTheRbtz у нас просто есть одна тулза которую оставил человек после себя, читать ее невозможно, а багов там столько что кажется что оно работает только потому что некоторые взаимокомпенсирубтся. И по стилю оно в общем хороший сишный код, но понять что хотел сказать автор почти нереально
Arcos
Я искал такое примерно решение.
tar cf ftp://login@ft.ftp/dump.tar /var/www
Arcos
Только нет его :(
Arcos
У меня дома виндовая машинка.
Max
забудь про слово фтп пожалуйста в 2016м году
Alexey
Max
а в 2017м не вспоминай
Vladimir
Max
Vladimir
И не создавали бы ощущения что проще выкинуть и написать заново
Arcos
Roki
К слову об ООП, если интересно как решаются РЕАЛЬНЫЕ проблемы с помощью ООП(читай: композиция, абстракция, расширяемость, итд), то лучше не книжку по Java читать, а посмотреть на хорошие C++'ные проекты, например LLVM, вот тут есть довольно сложный, но очень хороший пример, как добавив чутка классов и dependency injection ребята сделали расширяемый и главное очень простой API для JIT компилятора: https://www.youtube.com/watch?v=hILdR8XRvdQ
Спасибо Бро, но я пытался несколько раз в жизни заглядывать в проекты на C++ и от этого у меня развился коплекс объезяны неспособной в программирование.
Max
Arcos
Max
rsync -avz user@host:/path/to/files /path/to/local
Max
man rsync
Max
если не веришь )
Alexey
Ок, сейчас буду курить
если лень думать, есть 3) - https://github.com/andreafabrizi/Dropbox-Uploader но прости господи это же 1.5к строк на баше