@devops_ru

Страница 2662 из 4568
Владимир Калинин
08.05.2017
06:56:52
О про него я и забыл

А есть вариант увидеть что там заменится, что бы протестить не копируя файл?

взять первые 10к символов например?

Andrey
08.05.2017
06:59:23
Может head поможет?

Google
Владимир Калинин
08.05.2017
07:00:32
не могу глянуть внутрь, нечем открыть но на сколько я понял минимум 10гигов в первой строчке и столько же в последней, head/tail валят очень много

Andrey
08.05.2017
07:01:38
Что значит "валят много"? Там же можно указать сколько байт показать

Владимир Калинин
08.05.2017
07:01:39
cut тоже висит полтора часа

Andrey
08.05.2017
07:02:46
Самому че-нить написать? На любом языке несколько строчек будет

Владимир Калинин
08.05.2017
07:02:50
а... head -c

блин sed на кусочке срабатывает, на основном файле задумывается и выдает пустой результат

Sergey
08.05.2017
07:25:14
dd

Владимир Калинин
08.05.2017
07:27:33
а им можно поиск и замену сделать разве?

Jim
08.05.2017
07:29:27
им порезать можно

Vlad
08.05.2017
07:30:27
cat some.json | python -m json.tool

Владимир Калинин
08.05.2017
07:30:27
А указать ему что резать только по },{"code" можно?

Anton [Mgn, az09@osm]
08.05.2017
07:30:28
вообще сдаётся жсон на таком объеме дает страшный оверхед. csv требуй из первоисточника )

Владимир Калинин
08.05.2017
07:31:08
там иерархия,

Google
Vlad
08.05.2017
07:31:14
cat some.json | jq ''

Владимир Калинин
08.05.2017
07:31:26
3,5М объектов в каждом вложенных 300-500

Jim
08.05.2017
07:31:58
Ужас. зачем такой изврат?

Владимир Калинин
08.05.2017
07:32:02
и все походу в одной строке, так что все построчные дохнут пытаясь все в оперативу загрузить)

Ужас. зачем такой изврат?
какаято гигантская база данных, что тут сказать)

Jim
08.05.2017
07:32:56
дак может в бд и загрузить json обратно и там менять?

Владимир Калинин
08.05.2017
07:33:46
так я для того и хочу побить его=/ сформировали его не из бд и сформировали в одну строчку. Изза этого импорт в базу пытается разом переварить и падает

если разбить на 3,5М строк то должно сработать

а сейчас на нем все утилиты построчные дохнут

Jim
08.05.2017
07:34:26
разбей на куски, отформатируй, слепи обратно

Владимир Калинин
08.05.2017
07:34:50
ну да кстати, спасибо

Jim
08.05.2017
07:35:41
пофиг что иногда порежет криво, мимо. в итоге главное склеить нормально. подправить чуть-чуть не сложно

а кстати ты говоришь что его формировали не из базы, а как тогда? руками кто-то выгружал откуда-то?

пнуть человека чтобы свой дамп сделал по науке с переносами и делу край

Владимир Калинин
08.05.2017
07:40:31
его парсером собирали, причем полтора месяца) Поэтому перезапускать процесс не хотят)

Sergey
08.05.2017
07:43:22
ну, создать себе трудности и героически их решать - это традиция же. я правильно понимаю, что у вас очень большой файл с огромным json-объектом внутри и вы хотите в нем что-то поменять?

Владимир Калинин
08.05.2017
07:44:07
там массив [{},{},....{}] и если его поменять на {} {}

то база пойдет построчно импортироваться и все будет ок

а сейчас он думает что это одной строкой надо схавать

Sergey
08.05.2017
07:44:43
вложенные объекты плоские?

Google
Sergey
08.05.2017
07:44:58
не может ли быть [{}, {}, {[[]]}] ?

Владимир Калинин
08.05.2017
07:45:49
нет 2 уровня {.... ,subitems: [ {},...{}]}

Sergey
08.05.2017
07:46:17
ну я про то, что просто менять },{ на \n возможно нельзя.

и судя по тому что вы пишете - таки нельзя и нужно делать полноценный парсинг.

есть (краем уха слышал, что точно есть) последовательные парсеры. беглый гуглинг показывает https://pypi.python.org/pypi/ijson/ .

https://github.com/danielyule/naya вот с ходу еще, очень похоже на ваш кейс.

Oleg
08.05.2017
10:15:37
кто использует jenkins и docker-compose?

Max
08.05.2017
10:31:31
А зачем в этом всём docker-compose?

Oleg
08.05.2017
10:43:27
даже не так наверное. какая практика использования docker swarm и jenkins для CI/CD?

James
08.05.2017
11:05:02
всем привет. подскажите с сертом от GoDaddy. Килент создал серт, а key файла нету. Где его найти?

есть 2 файла csr - бандл и сам серт, из них я делаю цепочку cat www.example.com.crt bundle.crt > www.example.com.chained.crt

George
08.05.2017
11:05:44
А что он аплоадил в гоудедди?

James
08.05.2017
11:05:50
а где найти кей файл не пойму

George
08.05.2017
11:06:05
Ну, сам клиент его делал

Не?

James
08.05.2017
11:06:08
он купил серт в годедди

возможно

George
08.05.2017
11:06:12
Вместе с цср

James
08.05.2017
11:06:14
но у меня его нет

George
08.05.2017
11:06:20
А в личном кабинете гоудедди нема?

Google
James
08.05.2017
11:06:27
нет

ща покажу



вот там если загрузить я загружаю эти 2 файлика

а кей файла нету

George
08.05.2017
11:09:09
Ну, у клиента значит

James
08.05.2017
11:10:38
вот смотри че нашел там



Admin
ERROR: S client not available

James
08.05.2017
11:10:54
типа можно повторно его запросить



бля не ужели никто не работает с годедди

я так понимаю если ключа нет надо его создать занаво

через csr запрос

George
08.05.2017
11:23:23
Нет

Csr делается из приватной части

И потом отсылается в ЦС

Чтобы получить сертификат

(т.е. публичную часть)

Если key потерян

Google
George
08.05.2017
11:24:11
То нужно самостоятельно его сгенерировать

Сделать csr

И выпустить новый серт

Я помню на стартссл можно было цср сгенерировать, прям на свйте

Но были те же грабли - привки было не скачать

Yuriy
08.05.2017
11:35:28
годэдди ничем от остальных не отличается: ключ генерируешь сам, с ключом делаешь csr и отправляешь регистратору, в ответ получаешь сертификат. Никто не хранит твои приватные ключи, и это не грабли, это безопасность

here1am
08.05.2017
11:41:18
я так понимаю если ключа нет надо его создать занаво
едрить ты лолка, это противоречит всей сути подобной криптографии. а суть в том, что приватный ключ единственный и неповторимый и восстановить его из сертификата или запроса невозможно. соответственно, ты можешь передавать сертифкат и запрос кому попало

Olya
08.05.2017
11:55:05
Привет всем. У меня есть к вам вопрос-опрос - кто использует в работе (именно девопс) продуктами #Atlassian и если да, то какими?

User ?
08.05.2017
11:59:50
Чтобы знать, поднимать ценник в России или нет)

Olya
08.05.2017
11:59:54
Исключительно личные, не более.

Vladimir
08.05.2017
12:00:12
Исключительно личные, не более.
Ну вот интересно какие )

Olya
08.05.2017
12:00:15
Чтобы знать, поднимать ценник в России или нет)
не, вы что, я могу только уронить

Ну вот интересно какие )
сейчас я сформулирую.

User ?
08.05.2017
12:01:34
confluence, jira ~1.5к человек

Arthur
08.05.2017
12:05:48
Но были те же грабли - привки было не скачать
Можно было слить pfx. Но, конечно, это уже не важно, по сути сервис мертв.

Olya
08.05.2017
12:06:05
Мне нужно выбрать тему для мероприятия по атлассиан. Нам иногда приходят такие предложения :) И если я про флагманские продукты говорю сутками (из джиры делаю агрегатор для вакансий с учетом ФТ, картового контента, внутренних служб, CMDB и разве что мертвую шлюху из нее не делала), то тема про девопс сильно обойдена. Я понимаю что цена у продуктов в сравнении с бесплатным софтом влияет, но мне бы хотелось познакомится с людьми кто в своей работе использует тулы атласов для девопса. Сложно? В чем сложно(кроме денег). Я не пишу плагины, я внедряю и обучаю (и верю что это более этично чем плагины писать). Мне хочется сделать атлассиан университет на русском и возможно я смогу под это деньги получить чтобы он был бесплатным. А для этого надо пообщаться с большим количеством пользователей.

Я бы пива выбралась выпить про это.

Я хочу учить так как половина моей работы это откатывание ихменений сделаных неопытными бойцами и это не их вина.

Поэтому, если вы используете не только джиру и конфу, то откликнитесь пожалуйста. Вы мне нужны.

Страница 2662 из 4568