kosc
Пробовал перебирать кодировки, на всякий случай.
Maxim
может у тебя терминал криво настроен? а что если в файл записать? там в ByteString где-то есть writeFile
kosc
Да мне на самом деле не надо будет в файл писать.
kosc
Мне надо будет потом это юникодовой строкой по сети передать.
kosc
В терминале все остальные проги под UTF-8 работают отлично.
Ilya
В package.yaml в dependencies добавляю - pcre-heavy из-за чего возникает ошибка: stderr: 'stty' is not recognized as an internal or external command, operable program or batch file. [0mThe following GHC options are incompatible with GHCi and have not been passed to it: -threaded [0m [0mConfiguring GHCi with the following packages: dry [0m <command line>: cannot satisfy -package pcre-heavy-1.0.0.2 (use -v for more information) Подскажите плз, как это чинить? Другие пакеты ставились успешно. Пробую stack build, но тоже фейл pcre-light> configure pcre-light> Configuring pcre-light-0.4.0.4... pcre-light> Cabal-simple_Z6RU0evB_2.4.0.1_ghc-8.6.5.exe: The program 'pkg-config' version pcre-light> >=0.9.0 is required but it could not be found. Пробовал добавлять pcre-light в зависимости, не помогло, ошибка та же
kosc
Нет, из прелюдии.
kosc
А вот unpackChars - из ByteString
Leonid 🦇
Ну вот и ответ
kosc
Нет.
kosc
Мне всего-то надо из байтстринги в 1251 получить обычную хаскель-строку, где русские буквы будут норм показываться.
kosc
Второй день уже бодаюсь.
kosc
Я могу напечатать эту строку нормально. Через putStrLn из байтстринги, да.
kosc
Но мне надо её получить, что бы по сети передать в таком виде.
kosc
И вот это уже проблема.
kosc
А ещё меня дико бесит хаскелёвый iconv. Причём обычных линуховый iconv тут справляется на ура, а хаскелёвые бинды какую-то дичь творят.
kosc
При тех же входных данных.
kosc
Зачем они так?
Leonid 🦇
А вот unpackChars - из ByteString
я не нашел такой функции в ByteString
Leonid 🦇
Data.ByteString.Char8 в самом верху модуля > Manipulate ByteStrings using Char operations. All Chars will be truncated to 8 bits. It can be expected that these functions will run at identical speeds to their Word8 equivalents in Data.ByteString. > More specifically these byte strings are taken to be in the subset of Unicode covered by code points 0-255. This covers Unicode Basic Latin, Latin-1 Supplement and C0+C1 Controls.
Kirill
@ch3rn0v вроде недавно в тикетах стэка этот стти обсуждали, возможно там есть намёк на решение
Ilya
@ch3rn0v вроде недавно в тикетах стэка этот стти обсуждали, возможно там есть намёк на решение
Так вот по моей ссылке есть какой-то план решения, я его сейчас пробую. Если не заведется, спасибо, попробую альтернативу)
Kirill
Ну может оно о том же другими словами, хз
Artyom
И еще тебе надо похендлить JSFunctionExpression, возможно, но это уже сам.
Artyom
universeBi достает все топлевельные стейтменты, universe достает все вложенные стейтменты, паттерн слева — фильтрует.
Ilya
Я думаю, как-то вот так: do s :: JSStatement <- universeBi jsASTs f@JSFunction{} <- universe s pure f
Спасибо. Это надо тогда мапить по [s], плюс какой-то extension ставить, чтобы слева от <- тип прописывать. Я думаю, я лучше наверну регулярку все же, т. к. чтобы function expression хендлить один фиг доставать и парсить набор аргументов, потом еще блок внутри { } в любом случае вручную
Artyom
Не надо мапить по [s], universeBi умный.
Artyom
Экстеншен можешь не ставить и тип убрать, я его просто так написал, для читабельности.
Artyom
Набор аргументов живет в четвертом параметре JSFunction.
Ilya
Экстеншен можешь не ставить и тип убрать, я его просто так написал, для читабельности.
А без типа он может достанет чего лишнее. Почему не надо мапить? Он же принимает не список каокго-то типа, а именно какой-то тип
Artyom
Нет, он принимает что угодно. Из любого типа умеет доставать любой тип.
Ilya
Набор аргументов живет в четвертом параметре JSFunction.
Да, это я видел, но разобрать-то мне его надо будет вручную
A64m
эта вот идея регексы использовать _ОЧЕНЬ_ _ПЛОХАЯ_
Artyom
> А без типа он может достанет чего лишнее. Нет, не достанет. universe и так требует, чтобы входной тип соответствовал выходному.
Artyom
Да и экстеншен включить — одна строчка. Его даже GHC подсказывает.
Ilya
> А без типа он может достанет чего лишнее. Нет, не достанет. universe и так требует, чтобы входной тип соответствовал выходному.
universe :: Uniplate on => on -> [on] Хм, я думал, что он список не разберет. С другой стороны, может он удовлетворяет этому Uniplate on условию..
Artyom
universe не разберет, а universeBi — разберет.
A64m
потому
A64m
что
A64m
_рег_
Artyom
А вот как аргументы достаются: JSFunction _ _ _ params _ _ _ <- ... let paramNames = [name | JSIdentName _ name <- universeBi params]
Ilya
_рег_
Яннп)
Ilya
А вот как аргументы достаются: JSFunction _ _ _ params _ _ _ <- ... let paramNames = [name | JSIdentName _ name <- universeBi params]
Спасибо) Но. Там внутри f expr есть js block или что-то такое. А внутри него еще один тип, атомарные выражения. Так вот их-то мне все равно же надо будет разбирать регулярками? Например, если я хочу выяснить, происходит ли там вызов другой функции
Artyom
Зачем? Тоже посмотри в AST-шку. Вызов функций обозначается как JSCallExpression, наверно.
Artyom
Вообще возьми какую-нибудь функцию, распарсь ее и выведи AST-шку через Show. Тогда на вопросы типа "как достать <что-то> из AST-шки" сможешь сам для себя отвечать, не вслепую.
Ilya
Вообще возьми какую-нибудь функцию, распарсь ее и выведи AST-шку через Show. Тогда на вопросы типа "как достать <что-то> из AST-шки" сможешь сам для себя отвечать, не вслепую.
Я так сначала и сделал на очень простом примере, даже описывал тут свои выводы. Но там именно угадывать приходится, доки-то нет. С регулярками как-то полнее контроль ощущается над происходящим. Только библиотека с ними не завелась, лол
Artyom
$ stack install shower language-javascript $ stack repl > :set -interactive-print=Shower.printer > import Language.JavaScript.Parser > parse "f()" "" Right (JSAstProgram [JSMethodCall (JSIdentifier (JSAnnot (TokenPn 0 1 1) []) "f") (JSAnnot (TokenPn 1 1 2) []) JSLNil (JSAnnot (TokenPn 2 1 3) []) JSSemiAuto] (JSAnnot (TokenPn 0 0 0) []))
Artyom
Хочешь узнать, как какой-то кусок кода парсится — вбиваешь в репл и получаешь тут же, что это JSMethodCall. Дока бы все равно пригодилась, но можно и без нее жить.
Artyom
Я с регекспами тоже обычно ощущаю больше контроля, а потом оказывается, что я последние пять часов потратил на корнеркейсы. А потом еще сидишь и гуглишь, какой бывает именно синтаксис у комментов, какие символы допустимы в именах, какие бывают виды строчек и как их скипать, и так далее.
Artyom
Либу попробуй http://hackage.haskell.org/package/regex-pcre-builtin, авось заведется.
Ilya
Либу попробуй http://hackage.haskell.org/package/regex-pcre-builtin, авось заведется.
Да че-то уже не знаю. Может вариант с lang js стоит добить
Ilya
Не надо мапить по [s], universeBi умный.
Но и возвращает он тоже [s]. Чего-то я ничего не понимаю. По примерам выше запилил так (с учетом минорных правок несошедшихся типов) s :: [JSStatement] = universeBi jsASTs f = concat $ universe [ s | s@JSFunction{} <- s ] Вложенных функций не появилось, но появилась куча повторов (видимо, из-за моего ошибочного list comprehension). И появились вложенные выражения отдельно от функций
Artyom
universeBi :: (Data s, Data a) => s -> [a] Он ищет все a в s, притом s может быть чем угодно: JSAST, [JSAST], JSStatement, неважно.
Artyom
-- Достаем все топлевельные стейтменты. -- 'universeBi :: s -> [a]' не будет ходить внутрь -- 'a', даже если у 'a' где-то внутри есть еще -- 'a'. s :: [JSStatement] = universeBi jsASTs -- Ходим внутрь стейтментов. Собираем все -- стейтменты на любых уровнях вложенности. -- Потом отфильтровываем 'JSFunction'. fs :: [JSStatement] = [ f | f@JSFunction{} <- universe s ]
Artyom
Вот такой код должен работать.
Artyom
Он заглядывает на сколько угодно уровней в s, но когда встречает тип a, внутрь его уже не смотрит. Или смотрит, но не всегда 🤔 Я сейчас со списком проверил и там что-то странное происходит.
Ilya
>Он заглядывает на сколько угодно уровней в s А как тогда указать их количество (т. е. глубину заглядывания)? Или имеется в виду, что рекурсивно, во все (кроме вот случаев, когда a встречается)?
Artyom
Рекурсивно, да.
Artyom
> когда встречает тип a, внутрь его уже не смотрит Это неправда — смотрит. Тогда я не знаю, почему он у тебя вложенные функции не доставал в самый первый раз.
Ilya
> когда встречает тип a, внутрь его уже не смотрит Это неправда — смотрит. Тогда я не знаю, почему он у тебя вложенные функции не доставал в самый первый раз.
Хмм. Странно, ладно, спасибо большое. Буду просто с самого начала по шагам экспериментировать с universe/universeBi и смотреть результаты
Leonid 🦇
чую что зря я взял fastsum, и вообще связался с этими открытыми суммами
Leonid 🦇
с TF выходит такая шляпа, что написать функцию с более конкретным типом нельзя
Leonid 🦇
т.е. так то работает, но для документации некрасиво
Leonid 🦇
наверно стоит newtype везде совать
Leonid 🦇
Если обернуть в newtype, то не написать инжектящую функция
Leonid 🦇
ie :: (Const e :< r) => r ~ Map Const es => e -> RpcErrors es заработало!
Ilya
Там внутри Maybe JSExpression, а в JSExpression уже может быть JSFunctionExpression . Но еще есть JSStatement , в котором могут быть JSFunction
Anonymous
@lisowlis будет жить. Поприветствуем!
Ilya
let jsASTs = map (\(RawSourceFile p sc) -> parseModule sc p) rawSourceFiles jsStatements :: [JSStatement] = universeBi jsASTs jsFunctions = [ jsStatements | jsStatements@JSFunction{} <- jsStatements ] jsExpressions :: [JSExpression] = universeBi jsASTs jsFunctionsInExpr = [ jsStatements | jsStatements@JSFunctionExpression{} <- jsExpressions ] Это на самом деле лучше регулярок? Спасибо, что там только два типа, в которых может быть функция