@proGO
Daniel28.08.2016
18:52:42
18:52:42
это время на поиск
Kirill28.08.2016
18:52:42
18:52:42
2+ секунды против 32 мс
Daniel28.08.2016
18:52:47
18:52:47
а
GoogleDaniel28.08.2016
18:52:59
18:52:59
не увидел разные единицы
Nik28.08.2016
18:53:09
18:53:09
открыл и перегнал в []byte
у меня из-за этого парсер люто тупил
Vladislav28.08.2016
18:53:49
18:53:49
В тему выбора IDE ?
Nik28.08.2016
18:54:11
18:54:11
ты сравниваешь поиск по строке и байтам, а со строками включаешь в цикл еще и конвертацию в строку
а в любом случае у меня есть только два метода ползовать регексп. Знаешь третий - подскажиKirill28.08.2016
18:54:38
18:54:38
у тебя есть вариант вынести, наконец, конвертацию за цикл
Nik28.08.2016
18:56:31
18:56:31
это не четсно будет
Kirill28.08.2016
18:56:39
18:56:39
чтоооооо?
Nik28.08.2016
18:56:46
18:56:46
потому что в живой проге data каждый раз новая
и затраты на конвертацию тоже важны
Kirill28.08.2016
18:57:08
18:57:08
ты сравниваешь поиск или конвертацию?
GoogleNik28.08.2016
18:57:44
18:57:44
нет, данные всегда - ответ от http resp
Kirill28.08.2016
18:58:28
18:58:28
то есть ты не можешь regexp'ом искать по чему-либо еще?
что-то у тебя тест для остальных выходит бесполезным просто потому, что ты не хочешь вынести конвертацию за цикл и не видишь, что тут не так.
Nik28.08.2016
18:59:56
18:59:56
так. я сейчас допер, что проиграл с единицами измерения
что-то у тебя тест для остальных выходит бесполезным просто потому, что ты не хочешь вынести конвертацию за цикл и не видишь, что тут не так.
у меня кейс другой, я каждый раз хожу к старинце, получаю ответ в []byte и травлю на него регекспDaniel28.08.2016
19:01:44
19:01:44
за цикл надо и сомпиляцию регекспа
Kirill28.08.2016
19:02:03
19:02:03
вообще да
Daniel28.08.2016
19:02:17
19:02:17
и вот что интересно - после выноса за цикл обеих этих вещей - время перестает зависеть от количества итераций
из чего мы заключаем, что тест все-таки фуфло :)
Kirill28.08.2016
19:02:44
19:02:44
я сейчас не пробовал
Nik28.08.2016
19:02:45
19:02:45
hel
stringSubmatch
49.927151ms
byteSubmatch
29.223972ms
это конвертация наружу
stringSubmatch
29.155639ms
byteSubmatch
27.232028ms
это регекспом снаружи
Daniel28.08.2016
19:03:19
19:03:19
а это компиляция
можешь теперь увеличить число итераций 100 раз
ничего не измениться
Nik28.08.2016
19:03:47
19:03:47
увеличил
изменилось
fmt.Println("stringSubmatch")
start := time.Now()
stringData := string(data)
lol := regexp.MustCompile("action=\"./(.*?)\"")
for i := 0; i < 100000; i++ {
_ = lol.FindStringSubmatch(stringData)[1]
//_ = regexp.MustCompile("action=\"./(.*?)\"").FindStringSubmatch(string(data))[1]
}
fmt.Println(time.Since(start))
fmt.Println("byteSubmatch")
start2 := time.Now()
for i := 0; i < 100000; i++ {
_ = lol.FindSubmatch(data)[1]
}
fmt.Println(time.Since(start2))
GoogleNik28.08.2016
19:04:05
19:04:05
stringSubmatch
1.759711915s
byteSubmatch
2.390604181s
Daniel28.08.2016
19:05:05
19:05:05
"action=\”./(.*?)\””, кстати, лучше писать как \action=”./(.*?)”\
тупой тут md
Nik28.08.2016
19:06:38
19:06:38
1.7
Daniel28.08.2016
19:06:43
19:06:43
просто есть же кавычки “обратный апостроф”
Nik28.08.2016
19:07:06
19:07:06
не пользовал раньше, буду знать
@proDOT28.08.2016
19:07:33
19:07:33
``
Daniel28.08.2016
19:11:23
19:11:23
итого - после выноса конвертации и компиляции оба метода демонстрируют идентичную производительность
Daniel28.08.2016
19:11:28
19:11:28
я не удивлен
Kirill28.08.2016
19:11:31
19:11:31
stringSubmatch, 100000000 iterations
30.759199888s
byteSubmatch, 100000000 iterations
30.537851386s
Kirill28.08.2016
19:12:20
19:12:20
package main
import (
"fmt"
"regexp"
"time"
)
const (
iterations = 100000000
regexpString = `action="./(.*?)"`
)
func main() {
data := []byte(`<!DOCTYPE html><html><form action="/"></form></html>`)
fmt.Printf("stringSubmatch, %d iterations\n", iterations)
start := time.Now()
stringData := string(data)
lol := regexp.MustCompile(regexpString)
for i := 0; i < iterations; i++ {
_ = lol.FindStringSubmatch(stringData)
}
fmt.Println(time.Since(start))
fmt.Printf("byteSubmatch, %d iterations\n", iterations)
start2 := time.Now()
for i := 0; i < iterations; i++ {
_ = lol.FindSubmatch(data)
}
fmt.Println(time.Since(start2))
}
Daniel28.08.2016
19:12:23
19:12:23
единственное, что мы выяснили - FindStringSubmatch читерит, и использует подлежащий массив байт от строки, а не конвертацию
коллеги, а как правильно парсить вот такое время?
2016-08-24 11:46:44 Etc/GMT
[12:47]
я придумал строку
2006-01-02 15:04:05 Etc/MST
[12:47]
но чет не уверен, что она правильная
Nikolay30.08.2016
10:25:08
10:25:08
@onokonem приветствую!
[12:47] - это постоянное значение? Очень интересный формат, откуда?
GoogleVladislav30.08.2016
10:28:11
10:28:11
Nikolay30.08.2016
10:29:44
10:29:44
Хех, с телефона [12:47] показывает в одну строку со временем, а с десктопа виден перевод строки -(
Daniel30.08.2016
10:30:09
10:30:09
@onokonem приветствую!
[12:47] - это постоянное значение? Очень интересный формат, откуда?
apple store при валидации покупок возвращаетNikolay30.08.2016
10:30:20
10:30:20
Прямо через \n ?
Nikolay30.08.2016
10:30:51
10:30:51
ух
AdminERROR: S client not available
Paul30.08.2016
10:32:19
10:32:19
коллеги, а как правильно парсить вот такое время?
2016-08-24 11:46:44 Etc/GMT
[12:47]
я придумал строку
2006-01-02 15:04:05 Etc/MST
[12:47]
но чет не уверен, что она правильная
не то, чтобы я придирался... Но зачем вы придумываете свой формат времени?Daniel30.08.2016
10:32:44
10:32:44
еще раз - мне его вернул таким apple store. выбора нет
Vladislav30.08.2016
10:34:32
10:34:32
Daniel30.08.2016
10:35:46
10:35:46
коллега, а вы уверены, что знаете, как работает форматтер времени в стандартной либе go?
есть вормат таймзоны Etc/GMT
есть плейсхолдер для него - MST
не для этого формата конкретно, а для тектового описания таймзоны вообще
так вот - формат MST не понимает формата Etc/GMT
сейчас я написал костыль Etc/MST
но если вдруг эппл вернет мне таймзону без Etc/ - у меня не распарсится время
а узнать мне об этом будет довольно сложно
потому как, скорее всего, единственным внешним эффектом будет пользовательское “я че это я покупаю, а оно не покупается”
GoogleDaniel30.08.2016
10:39:25
10:39:25
придется, видимо, вкорячить метрику, и на нее повесить алерт
Phil30.08.2016
10:39:44
10:39:44
Я думаю никто не знает что такое Etc/GMT. Например я
Daniel30.08.2016
10:40:07
10:40:07
гугл знает, но от этого не легче
Phil30.08.2016
10:40:35
10:40:35
Ну просто ты бы мог вкратце намекнуть.
Andrew30.08.2016
10:41:23
10:41:23
таймзона нет?
Daniel30.08.2016
10:42:51
10:42:51
да, такая вот странная таймзона
Vladislav30.08.2016
10:45:53
10:45:53
я все таки так и не понял, что прилетает от эппл?
входящие данные в Etc/MST?
просто если я правильно понял, то почему в примере перепутаны между собой зоны?
Denis30.08.2016
12:17:48
12:17:48
Ничего другого не придет
Можно реплейсом заменять etc/GMT на GMT, либо как у вас
* лучше будет отбрасывать непосредственно Etc/ часть
Vladislav30.08.2016
12:36:34
12:36:34
а почитайте, правда, как в го устроен парсинг даты-времени
я то почитаю, но проблему это не решит...
не хотите доступно объяснить - ОКDaniel30.08.2016
12:36:34
12:36:34
ну вот я написал шаблон, который работает
ока пусть будет он
и метрику с алертом тоже впилю, конечно
хотя правильные метрики - это боль
Открыть в Telegram