Маjко
Я вообще хотел просто r.clone() сделать в инициализации, но так нельзя
Loo
https://github.com/rayon-rs/rayon/issues/55#issuecomment-202402159
Loo
вот Матсакис пишет свой взгляд на решение вопроса
Loo
но это 2016
Loo
@inv2004 https://docs.rs/crossbeam-channel/0.3.8/crossbeam_channel/fn.unbounded.html
Loo
он там ниже предлагал чаннелы из кросбима вроде юзать
Alexander
да я изначально их хотел - они самые быстрые говорят
Loo
ну так юзани, они синк+сенд судя по доке
Loo
проблем не должно быть. потому что все эти пляски с трэд локалом, рипит итератором и клоном сендера, а уж тем более мьютекс, выглядят как костыли
Loo
рушащие прекрасную элегантность божественного раст кода
Alexander
идеально: https://play.rust-lang.org/?version=nightly&mode=debug&edition=2018&gist=40f474ce3e30ae0607ef98b1e15936a8
Alexander
так зачем mpsc нужны, если есть хорошее решение? какой там в них косяк зарыт?
Маjко
так зачем mpsc нужны, если есть хорошее решение? какой там в них косяк зарыт?
В mpsc? Зарыт ответ на вопрос “почему у Rust маленькая stdlib”
Loo
так зачем mpsc нужны, если есть хорошее решение? какой там в них косяк зарыт?
там вроде кто то писал что пытались пропихнуть рфц с SharedSender
Loo
или чот такое
Alexander
я видел в std какой-то SyncSender
Маjко
Поясню: потому что даже тот минимум что есть копец инертен, в stdlib API уходят умирать
Loo
идеально: https://play.rust-lang.org/?version=nightly&mode=debug&edition=2018&gist=40f474ce3e30ae0607ef98b1e15936a8
https://play.rust-lang.org/?version=nightly&mode=debug&edition=2018&gist=5a2ce6e4a6c4a7a80842559c9ac26804
Alexander
https://doc.rust-lang.org/std/sync/mpsc/struct.SyncSender.html
Loo
так получше
Loo
👍
Маjко
А что поменялось?
Loo
А что поменялось?
там была аллокация после создания ренджа
Alexander
ааа, ну да
Alexander
смотрите, std тоже умеет: std::sync::mpsc::sync_channel
Alexander
но bounded
Alexander
+ вероятно оно сейчас уберёт все проблемы из которых сегодня @mersinvald помогал выбираться
Loo
Я решил что нужен unbounded именно
Loo
68747470733a2f2f692e696d6775722e636f6d2f4b7732645163792e706e67 (1000×1000) https://camo.githubusercontent.com/424c50d0e756b9ba098ef4cc60c5f348ce08602b/68747470733a2f2f692e696d6775722e636f6d2f4b7732645163792e706e67
Loo
В любом случае, кросбимовские чаннелы побыстрее будут
Alexander
да, вроде это обсуждали в async канале
Alexander
всё же перебор клонов, imho: if self.thread_pool.active_count() == 0 { let private = self.private.clone(); let orders = self.orders.clone(); let report = self.report.clone(); let time = self.time; self.counter = 0; let seq = self.sequence.clone(); let delay = delay.clone(); let timestamp = self.timestamp.clone(); self.thread_pool.execute(move || {
Alexander
Ага, да, это первая мысль. Просто там есть и не асинхронный "калькулятор", а ему это не особо надо.
Αλεχ
https://docs.microsoft.com/en-us/dotnet/api/system.linq.parallelenumerable.aggregate?view=netframework-4.7.2#System_Linq_ParallelEnumerable_Aggregate__3_System_Linq_ParallelQuery___0__System_Func___1__System_Func___1___0___1__System_Func___1___1___1__System_Func___1___2__
Αλεχ
как думаешь откуда такие перегрузки берутся
Αλεχ
это как раз что @mersinvald говорил
Αλεχ
сначала инитим локальный стейт каждого воркера
Αλεχ
потом что-то делаем
Αλεχ
потом комбиним, потом результат достаем
Oleksandr
Порекомендуйте плиз либу для ресайзинга изображений без граблей. Должна принимать png и jpg и отдавать отресайзенное jpg с нужной компрессией и другими пропорциями ширины/высоты.
Oleksandr
https://crates.io/crates/image
спасибо, так и думал
magras
Есть способ получить больше информации от компилятора об этой ошибке? Меня интересует почему компилятор считает, что InSt (параметр дженерика) не равен этому конкретному типу. error[E0308]: mismatched types --> src\streamext\concurrent.rs:26:19 | 26 | let _: InSt = in_rx.then(Result::unwrap); | ^^^^^^^^^^^^^^^^^^^^^^^^^^ expected type parameter, found struct `futures::stream::then::Then` | = note: expected type `InSt` found type `конкретный тип, который, по моим представлениям, и есть InSt`
Loo
.then принимает в себя лямбду которая должна вернуть тип который реализует into future, это либо другая Футурама, либо например result (для которого реализован intofuture уже), после этого ты только можешь запустить все это дело на экзекутора и получить результат выполения, если тебе не Футурама нужна а то что она там внутри навычисляла, больше мне сложно сказать ввиду отсутствия кода
magras
.then принимает в себя лямбду которая должна вернуть тип который реализует into future, это либо другая Футурама, либо например result (для которого реализован intofuture уже), после этого ты только можешь запустить все это дело на экзекутора и получить результат выполения, если тебе не Футурама нужна а то что она там внутри навычисляла, больше мне сложно сказать ввиду отсутствия кода
Код выглядит примерно так: https://play.rust-lang.org/?version=stable&mode=debug&edition=2018&gist=9686166a8ed1b31b08870b1f084f631c То есть я предполагаю, что ошибка компиляции будет в случае если F принимает тип отличный от того, который передается в нее. К сожалению, для стримов нет готового трейта IntoStream, поэтому пока в сильно черновом варианте оставил конкретный тип. В будущем, да, планировал написать аналог IntoFuture для стримов.
Денис
ну у типы не совпадают
Денис
in_rx.then(Result::unwrap) будет иметь тип Then<..., ..., ...>, что совершенно точно не равно InSt
Денис
то, что у них, по всей видимости, совпадают Item и Error, погоды не делает
magras
Кажется начинаю понимать. Работа с плюсовыми шаблонами накладывает свой отпечаток. Тогда буду думать как поправить. Спасибо.
Денис
ты, наверное, хотел бы, чтобы F была "замыкание, которое должно принимать любой тип, который имплементит Stream<Item = ...>? :)
Денис
это так не работает: тип F будет выведен в месте вызова безотносительно того, что происходит в теле функции поэтому тело функции не принимается во внимание при выводе generic-аргументов, точнее, в теле функции можно использовать только явно обозначенные generic constraints
magras
На сколько я понимаю, если я изменю InSt на IntoStream (вероятно тоже самое нужно сделать с OutSt) это должно помочь. Проблема в том, что это не позволит использовать в качестве F методы обычного Stream без обертки.
Денис
1) не поможет 2) ты можешь заимлементить IntoStream для всех Stream
Денис
не поможет — потому что InSt будет вычислен на основании того, какой тип принимает замыкание F, которое передаёт пользователь, а не на основании того, что у тебя в теле фукнции происходит
magras
А то что я хочу можно как то реализовать? Или только с использованием рантайм полиморфизма?
Денис
а можешь словами описать, какой фукнционал ты, в итоге, хочешь получить?
magras
Я хочу сделать функцию, которая разбивает переданный Stream на n стримов, к каждому применяет функцию F: Fn(Stream) -> Stream и собирает результаты опять в один выходной Stream. То есть получить еще более обобщенный вариант for_each_concurrent: https://rust-lang-nursery.github.io/futures-api-docs/0.3.0-alpha.12/futures_util/stream/trait.StreamExt.html#method.for_each_concurrent К примеру, чтобы получить тот самый for_each_concurrent можно было бы написать s.concurrent(n, |s| s.for_each(f)).
Денис
ну так может тебе нужна функция Fn(Stream::Item) -> Stream::Item?
magras
Я немного не прав, поскольку .for_each не возвращает Stream. Корректным примером будет s.concurrent(n, |s| s.then(f)).
magras
ну так может тебе нужна функция Fn(Stream::Item) -> Stream::Item?
В таком случае нельзя будет использовать .filter.
Денис
Fn(Stream::Item) -> Option<Stream::Item> :)
Денис
в общем я боюсь ты хочешь слишком уж обобщённую штуку
Денис
но её можно сделать, введя дополнительный трейт
Денис
trait ProcessStream { type ReturnStream: Stream; fn process<S: Stream>(&self, s: S) -> Self::ReturnStream; } .. но тут возникает проблема, что уже не заюзаешь impl Trait в ретурне
magras
trait ProcessStream { type ReturnStream: Stream; fn process<S: Stream>(&self, s: S) -> Self::ReturnStream; } .. но тут возникает проблема, что уже не заюзаешь impl Trait в ретурне
О, спасибо. Пойду играть с новой игрушкой. =) C impl Trait да у меня уже есть проблемы, поскольку функция concurrent является частью трэйта.
Денис
не за что) но это будет всё совершенно неюзабельно с точки зрения эргономики
Sergey
https://github.com/redux-rs/redux-rs
Filipp
Я щас пользуюсь pipenv и вижу все good practices из карго (не знаю кто у кого позаимствовал, но это круто) и очень крутую фичу в pipenv нашел - в ней можно указать версию питона для проекта. Интересно почему в карго такого не добавили, для пользователей найтли кажется было бы очень удобно, а то я все время со своими .rust-version путаюсь
Filipp
а о https://github.com/rust-lang/rustup.rs/issues/1218
Filipp
круто
Berkus
это где?
In these cases the toolchain can be named in the project's directory in a file called rust-toolchain, the content of which is the name of a single rustup toolchain, and which is suitable to check in to source control. The toolchains named in this file have a more restricted form than rustup toolchains generally, and may only contain the names of the three release channels, 'stable', 'beta', 'nightly', Rust version numbers, like '1.0.0', and optionally an archive date, like 'nightly-2017-01-01'.
Filipp
класс