это же разовая операция или файлы периодичемки прибывают откуда-то?

можно прочитать файл и взять байты из буфера пропустив первые 45 потом переконвертить кодировку и анмаршалить

это же разовая операция или файлы периодичемки прибывают откуда-то?

Я загружаю 77 архивов, в каждом по 2 xml файла, парсю по одному архиву (получается что на один архив (2xml файла) нужно будет запускать один раз…

тогда то что дал вполне достаточно и не надо костылять на go

тогда то что дал вполне достаточно и не надо костылять на go

Ок, ок, если до завтра не решу, то так и поступлю

спасибо еще раз

vlad@vlad-pc-home:/tmp$ ls -l *.xml -rw-r--r-- 1 vlad vlad 137 сен 3 12:47 sdsadw.xml -rw-r--r-- 1 vlad vlad 136 сен 3 12:47 sdsad.xml vlad@vlad-pc-home:/tmp$ for OUTPUT in $(ls *.xml); do cat $OUTPUT | sed '0,/encoding="windows-1251"/s/encoding="windows-1251"/encoding="utf-8"/' | iconv -f cp1251 -t utf8 -o $OUTPUT.utf8.xml; done vlad@vlad-pc-home:/tmp$ ls -l *.xml -rw-r--r-- 1 vlad vlad 137 сен 3 12:47 sdsadw.xml -rw-r--r-- 1 vlad vlad 130 сен 3 13:12 sdsadw.xml.utf8.xml -rw-r--r-- 1 vlad vlad 136 сен 3 12:47 sdsad.xml -rw-r--r-- 1 vlad vlad 129 сен 3 13:12 sdsad.xml.utf8.xml

vlad@vlad-pc-home:/tmp$ ls -l *.xml -rw-r--r-- 1 vlad vlad 137 сен 3 12:47 sdsadw.xml -rw-r--r-- 1 vlad vlad 136 сен 3 12:47 sdsad.xml vlad@vlad-pc-home:/tmp$ for OUTPUT in $(ls *.xml); do cat $OUTPUT | sed '0,/encoding="windows-1251"/s/encoding="windows-1251"/encoding="utf-8"/' | iconv -f cp1251 -t utf8 -o $OUTPUT.utf8.xml; done vlad@vlad-pc-home:/tmp$ ls -l *.xml -rw-r--r-- 1 vlad vlad 137 сен 3 12:47 sdsadw.xml -rw-r--r-- 1 vlad vlad 130 сен 3 13:12 sdsadw.xml.utf8.xml -rw-r--r-- 1 vlad vlad 136 сен 3 12:47 sdsad.xml -rw-r--r-- 1 vlad vlad 129 сен 3 13:12 sdsad.xml.utf8.xml

Еще один момент, а как бы не создавать новый .utf8.xml, просто заменить его на новый

И еще один, Go умеет «внутри себя» bash скрипты выполнять, или необходимо создавать прям файл script.sh?

что такое "внутри себя"?

Еще один момент, а как бы не создавать новый .utf8.xml, просто заменить его на новый

как вы это себе представляете технически?

что такое "внутри себя"?

Ну нечто вроде Exec()

как вы это себе представляете технически?

Не знаю, вот и спрашиваю

Ну нечто вроде Exec()

это снаружи

Не знаю, вот и спрашиваю

ну мы же не знаем, что имеенно вам надо

правильно это делается так: новый файл, потом mv на место старого

правильно это делается так: новый файл, потом mv на место старого

ok

И еще один, Go умеет «внутри себя» bash скрипты выполнять, или необходимо создавать прям файл script.sh?

не уверен. а вот lua скрипты «внутри себя» умеет - может тебе подойдет. пакетик качнешь для луа и все

пакетик lua

ору

ору

на кого?

правильно это делается так: новый файл, потом mv на место старого

на всяк случай перед этим старый файл в *.old переименовать

В документации экземп package main import ( "log" "os/exec" ) func main() { cmd := exec.Command("sleep", "1") log.Printf("Running command and waiting for it to finish...") err := cmd.Run() log.Printf("Command finished with error: %v", err) } Но может ли он комбинировать команды

этот - нет

На просторах стековерфлоу нашел package main import ( "os" "os/exec" "fmt" "strings" "path/filepath" ) var ( output_path = filepath.Join("./output") bash_script = filepath.Join( "_script.sh" ) ) func checkError( e error){ if e != nil { panic(e) } } func exe_cmd(cmds []string) { os.RemoveAll(output_path) err := os.MkdirAll( output_path, os.ModePerm|os.ModeDir ) checkError(err) file, err := os.Create( filepath.Join(output_path, bash_script)) checkError(err) defer file.Close() file.WriteString("#!/bin/sh\n") file.WriteString( strings.Join(cmds, "\n")) err = os.Chdir(output_path) checkError(err) out, err := exec.Command("sh", bash_script).Output() checkError(err) fmt.Println(string(out)) } func main() { commands := []string{ "echo newline >> foo.o", "echo newline >> f1.o", "echo newline >> f2.o", } exe_cmd(commands) }

ну - типа того

В общем может)

накой ляд это тянуть в Go? поупражняться в костылестроительстве так хочется чтоль?

накой ляд это тянуть в Go? поупражняться в костылестроительстве так хочется чтоль?

Думаешь более правильно будет создать sh скрипт и только запускать его из Go?

думаю - этого делать не надо вообще

руками запустить и забыть

руками запустить и забыть

В моем случае руками это не вариант

У нас веселые ребята в Терфонде сидят, пишут на сисярп и очень любят cp1251 пихают его везде где только можно

И всей области отчеты шлют в этой кодировке

И всей области отчеты шлют в этой кодировке

Зато экономят по байту на символ!

Зато экономят по байту на символ!

да хз, они ток сначала года на xml перешли до этого в dbf кидали

У кого есть Го на практике книга на русском поделитесь если не жалко

Если есть нормальный перевод, было бы круто

У кого есть Го на практике книга на русском поделитесь если не жалко

Посмотри в документах конференции, вроде там есть

Посмотри в документах конференции, вроде там есть

Я смотрел там на все на English

Я смотрел там на все на English

Можешь скинуть ссылку?)

Можешь скинуть ссылку?)

Зайди на shared media этой группы там в доках она стоит

У нас веселые ребята в Терфонде сидят, пишут на сисярп и очень любят cp1251 пихают его везде где только можно

https://stackoverflow.com/questions/6002619/unmarshal-an-iso-8859-1-xml-input-in-go http://blog.tristanmedia.com/2014/10/using-go-to-parse-non-utf8-xml-feeds/ Не подходит?

У нас тоже были любители и в win1251 слать, и в iso

https://stackoverflow.com/questions/6002619/unmarshal-an-iso-8859-1-xml-input-in-go http://blog.tristanmedia.com/2014/10/using-go-to-parse-non-utf8-xml-feeds/ Не подходит?

Уже видел, не подходит мне мешается именно строка в документе

У нас тоже были любители и в win1251 слать, и в iso

У меня любители CP866 ))

Уже видел, не подходит мне мешается именно строка в документе

может вычитать просто начало и в нём заменить? чтобы не гонять байты туда-сюда

а потом остальное дочитать

и быстро будет

К сожалению я не знаю как это сделать ?

>> byteValue, _ := ioutil.ReadAll(xmlFile) >> var zl_list models.ZL_LIST вот тут ты всё вычитывашь перед этим надо вычитать кусок, байтов 100, может 200 и в нём заменить есть тебе только это мешает

можно даже руками найти по байтовой позиции и заменить там, уже в вчитанном файле

можно даже руками найти по байтовой позиции и заменить там, уже в вчитанном файле

Можно пример реализации если не сложно?

я имею введу, как это в коде выглядит.

дай 1 строчку фалй

xml

byteValue[x:y] = []byte(`utf8" `) ты просто заменяешь кодировку вместе с полесдней кавычкой на то что надо тебе - в данном случае utf8 и пробелы чтобы слайс не пересоздавать по коду неправильно :) там подругому как-т опишется, н оя спал 2 часа и не соображаю там ты берёшь слайс, который ссылается на ту же область памяти и меняешь его

дай 1 строчку фалй

<?xml version="1.0" encoding="windows-1251"?>

https://s.mail.ru/N5EU/FMXjDbcEv

вот типа так :)

это если упарываться по памяти

copy

ERROR: S client not available

тебе нужен copy

тебе нужен copy

Мужик, ты слишком крут, я вообще хз как это сделать)

a := byteValue[31, 44] copy(a, []byte(`utf8" `))

вот так типа

вот так типа

спс, завтра попробую

это если тебе надо в 1 месте поменять кусок :)

Можно тебе в ЛС завтра вопросами подставить пожалуйста?

это если тебе надо в 1 месте поменять кусок :)

Именно это и надо

сюда пиши лучше, будет время - отвечу

или кто быстрей меня что дельнео скажет

ок

copy(byteValue[31, 44], []byte(`utf8" `)) может вот так даже пройдёт

сделай потом println( string( byteValue[:100] ) для просмотра результата

ок

Завтра проверю, сегодня уже голова не соображает

Здравствуйте, ребята! Давно мучает вопрос, а что в Go используют вместо дженериков?

Там, где в других языках используют дженерики, в гошечке в 90% случаев используют интерфейсы или просто обходятся без джененриков, в 10% - копипаста, рефлексия и кодогенерация, именно в таком порядке приоритетов. Смысл в том, что generic’и с template’ами в других языках программирования используют не по назначению в большинстве случаев, что приводит к необоснованному усложнению кода, замедлению скорости компиляции, разрастанию скомпилированных бинарников. И только в паре процентов случаев использование generic’ов дает реальный выигрыш в качестве кода. В 99% случаев это стандартный набор контейнеров и алгоритмов для произвольных типов данных. Разработчики go готовы добавить generic’и, если удастся реализовать их в таком виде, чтобы максимально затруднить их неверное использование, в то же время максимально упростить их корректное использование. Проблема в том, что такие дженерики пока никто не придумал. См. golang.org/doc/faq#generics

ну и ещё есть консорльный iconv если выяснится всё же, чт отебе надо конвертить ВСЁ тем более что до выдова консрольных скриптов тут дело уже дошло

Там, где в других языках используют дженерики, в гошечке в 90% случаев используют интерфейсы или просто обходятся без джененриков, в 10% - копипаста, рефлексия и кодогенерация, именно в таком порядке приоритетов. Смысл в том, что generic’и с template’ами в других языках программирования используют не по назначению в большинстве случаев, что приводит к необоснованному усложнению кода, замедлению скорости компиляции, разрастанию скомпилированных бинарников. И только в паре процентов случаев использование generic’ов дает реальный выигрыш в качестве кода. В 99% случаев это стандартный набор контейнеров и алгоритмов для произвольных типов данных. Разработчики go готовы добавить generic’и, если удастся реализовать их в таком виде, чтобы максимально затруднить их неверное использование, в то же время максимально упростить их корректное использование. Проблема в том, что такие дженерики пока никто не придумал. См. golang.org/doc/faq#generics

Сильное заявление)

ну и ещё есть консорльный iconv если выяснится всё же, чт отебе надо конвертить ВСЁ тем более что до выдова консрольных скриптов тут дело уже дошло

угу, спс

Здравствуйте, ребята! Давно мучает вопрос, а что в Go используют вместо дженериков?

А по поводу обощённых контейнеров - в основном каждый день используют array и hashmap. Эти два контейнера встроены в Go и позволяют работать с произвольными типами. Остальные контейнеры используются настолько редко, что не составляет никакого труда написать их кастомную реализацию под требуемый тип данных.

Сильное заявление)

ни разу не сталкивался с стуацией, где без дженериков никуда. Вот метапрограммирования реально не хватает

ни разу не сталкивался с стуацией, где без дженериков никуда. Вот метапрограммирования реально не хватает

Сталкивался. В append/make.

? Selecting an Event Architecture #AsyncAPI #APIs #microservices #Programming #Tech #java #golang #php #nodejs #code https://www.infoq.com/news/2017/08/selecting-event-architecture?utm_source=infoqWeeklyNewsletter&utm_medium=WeeklyNL_EditorialContent_architecture-design&utm_campaign=08292017news&utm_content=top

charmap.Windows1251.NewDecoder() в charmap.Windows1251 теперь нет функции NewDecoder?

type Response2 struct { Page int `zzz:"page"` Fruits []string `xxx:"fruits"` } Парни, можно както обращаться в структуре к свойствам zzz xxx в примере?

через рефлексию

type Response2 struct { Page int `zzz:"page"` Fruits []string `xxx:"fruits"` } Парни, можно както обращаться в структуре к свойствам zzz xxx в примере?

Try this https://stackoverflow.com/questions/23507033/golang-reflection-get-tag-from-struct-field

?????? спасибо

Сталкивался. В append/make.

ну они в гошечке есть значит всё хорошо