@ru_python
Петр27.06.2018
15:57:04
15:57:04
Толькотанализ.
Парсить не нужно. система уже написана - улучшать не нужно - 80000 сайтов за 5-8 минут
привет всем) хотел бы узнать есть ли из 215 мемберс те, кто может поработать на фрилансе?
___
проект - по сути стартап, работы много
Нужны мозговитые комрады
питон 3 / джанго2( это не так много)
Суть работы - нужно улучшать и придумывать новые алгоритмы анализа данных на сайтах, конкретно проект price.smartfetch.io
стоимость средняя по рынку( Москва) - в зависимости от кандидата
Забыл. Сейчас мы используем для анализа lxml. Но все можно обсудить.
Vitaly27.06.2018
15:58:59
15:58:59
анализ изменения цен? прейскуранта? насколько глубокий анализ?
GoogleПетр27.06.2018
16:03:34
16:03:34
Есть страницы - На них нужно находить цену, артикул, наличие, главную картинку.
Все остальное уже написано.
Yurij27.06.2018
16:05:11
16:05:11
Пипл подскажите как css селектор на имя завязать -
Упрощенный пример
<div> мама <div>
<div> папа <div>
Нужно вытащить 'папа' именно по имени
CSS не может. Xpath - легко любой регекс. /Div[contains(text(),"мама")] я вообщем загуглиVitaly27.06.2018
16:06:25
16:06:25
находить это не значит анализировать, я вас сначала не правильно понял, анализировать надо веб-страницу
Antony27.06.2018
16:06:28
16:06:28
CSS не может. Xpath - легко любой регекс. /Div[contains(text(),"мама")] я вообщем загугли
Спасибо большое, хороший совет, я пытался выжать все что можно из CSS - нравится он мне)) - видимо придушил слегка)Yurij27.06.2018
16:07:38
16:07:38
Парсить не нужно. система уже написана - улучшать не нужно - 80000 сайтов за 5-8 минут
Поделить 80000/100 не надо?Antony27.06.2018
16:10:09
16:10:09
Requesrs ом скачал и загнал в файл
Lxml - им пытаюсь распарсить, суп пока не хочу трогать (за двумя зайцами...)
Петр27.06.2018
16:11:14
16:11:14
У меня система распределенная. Около 1000 независимых нодов. Управление через кролика.
находить это не значит анализировать, я вас сначала не правильно понял, анализировать надо веб-страницу
Анализ нужен. Так как одна из идей я собираю часть страниц с ценами на сайте и из этого множества ищу нахождение цены/артикулаVitaly27.06.2018
16:13:28
16:13:28
да но если формат страниц не меняется то не надо каждый раз анализировать
Eldar27.06.2018
16:14:19
16:14:19
Всем привет! :) У нас чудесная стажёрская вакансия:
https://yandex.ru/jobs/vacancies/analytics/intern_an_vert/
Зажигательный коллектив! :) Задачи для роста и развития молодого специалиста! :) И все плюшки в офисе! :)
З/п уровня Junior, в зависимости от кандидата.
#работа
Ну так и скажи что около 40к за 40 часовYurij27.06.2018
16:16:16
16:16:16
Задача в создании программы или в получении таблички?
GoogleПетр27.06.2018
16:16:43
16:16:43
да но если формат страниц не меняется то не надо каждый раз анализировать
Согласен. Но как оказывается на заказчика с 300-400 ценами нужно провести анализ около 9000 доменов.
?27.06.2018
16:24:40
16:24:40
Короч, есть такая строка - $SHA$6c06d9fd9a999d36$970ceedc4dea12166bc83ff638e2519e113a8ffc6f56e8d51f2a5189b17467b9
Это sha256(AuthMe)
Вопрос, как ее декодировать, желательно на питоне, если
salt = 6c06d9fd9a999d36
crypt_sting = 970ceedc4dea12166bc83ff638e2519e113a8ffc6f56e8d51f2a5189b17467b9
Aragaer27.06.2018
16:25:01
16:25:01
а зачем ее декодировать?
Roman27.06.2018
16:26:11
16:26:11
?27.06.2018
16:26:37
16:26:37
Костыль мне нужен, а не паяльник
Tishka17?27.06.2018
16:27:20
16:27:20
Никак? Соль + кодированная строка = декодированная строка, не?
Alex27.06.2018
16:27:55
16:27:55
Никак? Соль + кодированная строка = декодированная строка, не?
нет... иди читай учебник по криптографииможешь начать с Брюса Шнайера
Прикладная криптография
?27.06.2018
16:28:28
16:28:28
кк
Yurij27.06.2018
16:29:32
16:29:32
Короч, есть такая строка - $SHA$6c06d9fd9a999d36$970ceedc4dea12166bc83ff638e2519e113a8ffc6f56e8d51f2a5189b17467b9
Это sha256(AuthMe)
Вопрос, как ее декодировать, желательно на питоне, если
salt = 6c06d9fd9a999d36
crypt_sting = 970ceedc4dea12166bc83ff638e2519e113a8ffc6f56e8d51f2a5189b17467b9
Если декодирует то 5баллов+по математике премию дадут +возьмут на работу в ФСО сразу. Почитай ssh.comПетр27.06.2018
16:30:05
16:30:05
В цикле нужно;))))) точно говорю.
GoogleAntony27.06.2018
16:33:36
16:33:36
В цикле нужно;))))) точно говорю.
Ради интереса пробовал 100 штук sha256, с солью( и перцем))) - за сутки брутфорсить подобрал пароль, но я знал что он 8 символов)))Петр27.06.2018
16:34:01
16:34:01
Во. Главное сыпать солью.
Antony27.06.2018
16:34:11
16:34:11
А тут наверно " копайте отсюда и до завтра"
Ляман27.06.2018
16:34:23
16:34:23
парни пишу парсер, нужна помощь, кто поможет пишите в лс
Alex27.06.2018
16:35:01
16:35:01
Ради интереса пробовал 100 штук sha256, с солью( и перцем))) - за сутки брутфорсить подобрал пароль, но я знал что он 8 символов)))
вот поэтому нормальные люди не пользуются только лишь sha для хеширования паролей.Antony27.06.2018
16:39:51
16:39:51
вот поэтому нормальные люди не пользуются только лишь sha для хеширования паролей.
Нормальные люди услышав sha переспросят - шта?)))Eldar27.06.2018
16:41:15
16:41:15
парни пишу парсер, нужна помощь, кто поможет пишите в лс
Ты забыл указать количество биткоинов, которые готов заплатить за помощьЛяман27.06.2018
16:41:54
16:41:54
а пофксить надо 5-6
Проксимов27.06.2018
17:28:09
17:28:09
Eldar27.06.2018
17:44:14
17:44:14
@Enchantner кинь ссылку на чат датасенсов
Ruslan ?27.06.2018
18:02:34
18:02:34
Привет. Как установить через pip CLI утилиту глобально на винде, чтобы можно было запускать сразу из командной строки?
Митяй27.06.2018
18:06:30
18:06:30
Привет. Как установить через pip CLI утилиту глобально на винде, чтобы можно было запускать сразу из командной строки?
python.exe переименуй в cmd.exe и кинь в c:/windows/system32/?
Denis27.06.2018
18:07:20
18:07:20
Митяй27.06.2018
18:07:30
18:07:30
Привет. Как установить через pip CLI утилиту глобально на винде, чтобы можно было запускать сразу из командной строки?
А так в переменной окружения PATH папку с CLI пропиши, так то папка питона уже там прописана у тебя должна бытьRuslan ?27.06.2018
18:08:39
18:08:39
Прописать в PATH что надо
Я вот делаю pip install brotli, потом пишу сразу brotli... и получаю brotli: command not foundGoogleRuslan ?27.06.2018
18:15:58
18:15:58
Хорошо, я нашёл py файл... получается мне вот эту папку в PATH добавить надо C:\Users\Admin\AppData\Local\Programs\Python\Python36-32\Lib\site-packages?
Петр27.06.2018
18:17:39
18:17:39
Я вот делаю pip install brotli, потом пишу сразу brotli... и получаю brotli: command not found
ты пип запускаешь в окружении ?Ruslan ?27.06.2018
18:19:01
18:19:01
нет, мне нужно без окружения и без py файлов, просто нужно как-то сделать так, чтобы из коммандной строки запускалось
NikolayПетр27.06.2018
18:19:51
18:19:51
нет, мне нужно без окружения и без py файлов, просто нужно как-то сделать так, чтобы из коммандной строки запускалось
сначлаа найди пип - где он находится - он не в site-packages/usr/local/bin/pip например на линуксе
Ruslan ?27.06.2018
18:21:15
18:21:15
тут C:\Users\Admin\AppData\Local\Programs\Python\Python36-32\Scripts\pip
Otorhin27.06.2018
18:21:48
18:21:48
Ребят. Использую Kivy + KivyMD. Как мне переместить текст как на картинке?
Ruslan ?27.06.2018
18:23:24
18:23:24
пихай в пути
так pip у меня глобально доступен и папка его в PATH при установке добавилась, я прогу установил через него, не могу запустить
8777627.06.2018
18:25:00
18:25:00
привет всем) хотел бы узнать есть ли из 215 мемберс те, кто может поработать на фрилансе?
___
проект - по сути стартап, работы много
Нужны мозговитые комрады
питон 3 / джанго2( это не так много)
Суть работы - нужно улучшать и придумывать новые алгоритмы анализа данных на сайтах, конкретно проект price.smartfetch.io
стоимость средняя по рынку( Москва) - в зависимости от кандидата
праздный интерес - у вас там реально команда из четырех человек или не всех на сайт повесили?Петр27.06.2018
18:26:10
18:26:10
Петр27.06.2018
18:28:50
18:28:50
если просто интересно - я могу рассказать - я участвовал и в стартапе из инкубатора( с повевными и отбором) - и так просто - и как здесь - это просто личный проект
Ruslan ?27.06.2018
18:36:43
18:36:43
Я вот делаю pip install brotli, потом пишу сразу brotli... и получаю brotli: command not found
разобрался, всё работает как надо, просто нужно было ещё одну прогу установить и её запускатьGoogleЛяман27.06.2018
18:38:12
18:38:12
Кто с питоном поможет (парсер не робит) в лс
MewПетр27.06.2018
18:43:36
18:43:36
beautifulsoup =)
Old27.06.2018
18:43:55
18:43:55
re
ArtSumin27.06.2018
19:00:38
19:00:38
Плиз помогите, работал сервер nginx + uwsgi и в один прекрасный день, при вызовет uwsgi --ini myconf.ini дает такую инфу
your server socket listen backlog is limited to 100 connections
your mercy for graceful operations on workers is 60 seconds
После чего сервер работает 60 сек и откл
Aleksey27.06.2018
19:14:05
19:14:05
а где он работал? своя машина, арендованый хост, что именно?
Открыть в Telegram