Cheese
зависит только от TIO. если Text, то сразу, если Text.Lazy, то по кускам, но небезопасно
Зигохистоморфный
Помню когда-то говорили что эффективней юзать какой-то mmap
Maxim
ну у меня файлик небольшой, интерес пока теоретический
Maxim
спасибо
A64m
ио в text тормозноватое
Maxim
а еще интересно, если у меня есть функция с HasCallStack, надо ли вешать этот констрейнт на функции внутри ее where?
Maxim
хочу
Maxim
ладно, еще один вопрос
Cheese
если не повесишь, не появятся
Maxim
HasCallStack поймает ошибку матчинга?
Cheese
только HasCallStack делает функцию не хвостовой
Cheese
HasCallStack поймает ошибку матчинга?
ничего он не ловит, только имя функции дописывает (и позицию вызова в файле)
Maxim
ну он дописывает когда происходит ошибка. только ли для error всяких или для ошибок паттерн матчинга в чистом коде тоже?
Maxim
хм… окей
Maxim
блин, почему в text нету Read a => Text -> a :/
Cheese
а ошибка сопоставления в (<-) вызывает fail, то есть либо error, либо что-то специфическое для монады
Cheese
А в чем заключается небезопасность?
файл остаётся открытым до полного вычитывания и, возможно, дольше
Oleksii
А если через handle и самому закрывать?
Cheese
файл остаётся открытым до полного вычитывания и, возможно, дольше
кто-то может захотеть писать в этот файл, пока ты не всё вычитал
Cheese
А если через handle и самому закрывать?
так будет предсказуемо, но удобнее — через conduit/pipes/streaming
Alexander
конечно же делать
Alexander
и никогда через Text
Alexander
через bytestring и конвертация через Text.decodeUtf8 быстрее на порядок
Oleksii
Блин, ладно
Cheese
и никогда через Text
если маленький отчёт, то почему нет?
Зигохистоморфный
Ну есть же случаи когда надо Text
Oleksii
Мне просто нужно сделать индексацию текстовых файлов, и я написал на Text.Lazy
Alexander
Text.IO не надо, вот вообще никогда
Oleksii
Но видимо придется переписать
Maxim
везде обман (
Alexander
норм, но вычитывай до конца если пишешь в него
Alexander
а разве внутри Text.IO не то же самое?
неа, там через base-ное, которое кодировку понять пытается и вобще тормоз
Alexander
зато ты можешь в "правильной" кодировке из терминала читать
Alexander
вообще мелкое Text.Lazy норм
Alexander
lazy io вообще норм, только надо понимать, что происходит и когда
Alexander
ну и или вычитывать до конца и использовать withFile/bracket или не писать туда
Alexander
во втором случае только опасность утекания fd
Cheese
https://twitter.com/dshevchenko_biz/status/1085876468280897536
Roman
Помню когда-то говорили что эффективней юзать какой-то mmap
Не представляю, как в принципе может работать mmap в Text. Имхо, никак. Да и толку от этого нет никакого. Страсть как хочу задизайнить либу для удобного безопасного ммапа в хаски, но пока не имею времени.
Alexander
а что не хватает в текущих?
Ryner Reinhardt
В хаскеле столько типов текста...
Alexander
2?
Alexander
String и Data.Text, что ещё
Ryner Reinhardt
2?
String, ByteString, Text, LazyText как минимум
Alexander
в списке 2 вещи не являющиеся текстовым типом данных
Roman
Ещё ютф-8 строки есть
Ryner Reinhardt
Немного раздражает туда сюда строки для разных либ гонять
Alexander
вот utf8 строки есть да
Alexander
это правда обётка над bytesting
Alexander
ещё ShortText есть наверное? или нету?
Alexander
3/4 проблем уходит когда люди перестают считать все типы похожие на строки - строками
Roman
При всём моём уважении к салливану, у меня пригорает от дизайна Text.
Alexander
салливан уже велосипед давно
Alexander
это как ленин - гриб
Alexander
ну вообще text был бы норм, если бы работал как ожидается
Roman
Менеджер одним словом
Alexander
вообще тут очень непонятно с fusion
Alexander
т.е. идея то понятна, а давайте сделаем тип, и все магически заработает
Alexander
а вот нифига
Alexander
лучше бы побольше руками поконвертить
A64m
когда уже текст нормальный сделают, а то text тормозной, убогий, неподдерживаемый, как и все осалливановские библиотеки
A64m
все же хаскельная экосистема проделала большой путь, 10 лет назад О'Салливан - это был знак качества, а теперь мрак, ужас, днище
A64m
вообще тут очень непонятно с fusion
судя по исследованиям брейтнера в тексте удивительно много всего фьюзится, я не ожидал, что там и в лучшие годы столько срабатывало, не говоря уж о том, сколько в последующие годы должно было отгнить
Roman
Я не совсем понимаю, для чего нужен отдельный фьюжен для строк. Берёшь ньютайп от байтстрок с умным конструктором, который проверяет, что там UTF-8, делаешь преобразование Utf8String → [Char], а дальше пусть фьюжен списков работает.
Alexander
с text не то чтобы все не так, но вот с text.io все не так
Alexander
не, fusion списков так не взлетит
A64m
Я не совсем понимаю, для чего нужен отдельный фьюжен для строк. Берёшь ньютайп от байтстрок с умным конструктором, который проверяет, что там UTF-8, делаешь преобразование Utf8String → [Char], а дальше пусть фьюжен списков работает.
ну т.е. постоянно везде вставлять конвертирование в список и обратно. это убогость просто, как во всяких фшарпах и окамлах где чтоб конвейер построить вечно надо конвертировать из/в какие-то костыли
Roman
Тут ленивый список — управляющая конструкция, которая мало чем отличается от какого-нибудь for char in string
Alexander
ну и build/foldr все же не эквивалентно stream.unstream
Dmitrii
с text не то чтобы все не так, но вот с text.io все не так
Я тоже заметил в бенчмарках для co-log, что Text как-то очень подозрительно себя ведёт... Не так хорошо, как я изначально ожидал. Странно, ведь текстом довольно много библиотек пользуется. Совет — конвертировать в ByteString для IO выглядит немного неоптимальным, почему бы сразу тогда не работать с ByteString? 🤔
Alexander
чтобы символки утф-ные не корёжить
Alexander
я у вас специально сделал этот бенчмарк, т.к. заранее о проблеме знал
Ryner Reinhardt