Маjко
Я вообще хотел просто r.clone() сделать в инициализации, но так нельзя
Loo
https://github.com/rayon-rs/rayon/issues/55#issuecomment-202402159
Loo
вот Матсакис пишет свой взгляд на решение вопроса
Loo
но это 2016
Loo
@inv2004 https://docs.rs/crossbeam-channel/0.3.8/crossbeam_channel/fn.unbounded.html
Loo
он там ниже предлагал чаннелы из кросбима вроде юзать
Alexander
да я изначально их хотел - они самые быстрые говорят
Loo
ну так юзани, они синк+сенд судя по доке
Loo
проблем не должно быть. потому что все эти пляски с трэд локалом, рипит итератором и клоном сендера, а уж тем более мьютекс, выглядят как костыли
Loo
рушащие прекрасную элегантность божественного раст кода
Alexander
идеально: https://play.rust-lang.org/?version=nightly&mode=debug&edition=2018&gist=40f474ce3e30ae0607ef98b1e15936a8
Маjко
Alexander
так зачем mpsc нужны, если есть хорошее решение? какой там в них косяк зарыт?
Маjко
Loo
Loo
или чот такое
Alexander
я видел в std какой-то SyncSender
Маjко
Поясню: потому что даже тот минимум что есть копец инертен, в stdlib API уходят умирать
Loo
Alexander
https://doc.rust-lang.org/std/sync/mpsc/struct.SyncSender.html
Loo
так получше
Loo
👍
Маjко
А что поменялось?
Alexander
ааа, ну да
Alexander
смотрите, std тоже умеет: std::sync::mpsc::sync_channel
Alexander
но bounded
Alexander
+ вероятно оно сейчас уберёт все проблемы из которых сегодня @mersinvald помогал выбираться
Loo
Я решил что нужен unbounded именно
Loo
68747470733a2f2f692e696d6775722e636f6d2f4b7732645163792e706e67 (1000×1000)
https://camo.githubusercontent.com/424c50d0e756b9ba098ef4cc60c5f348ce08602b/68747470733a2f2f692e696d6775722e636f6d2f4b7732645163792e706e67
Loo
В любом случае, кросбимовские чаннелы побыстрее будут
Alexander
да, вроде это обсуждали в async канале
Alexander
всё же перебор клонов, imho:
if self.thread_pool.active_count() == 0 {
let private = self.private.clone();
let orders = self.orders.clone();
let report = self.report.clone();
let time = self.time;
self.counter = 0;
let seq = self.sequence.clone();
let delay = delay.clone();
let timestamp = self.timestamp.clone();
self.thread_pool.execute(move || {
Маjко
Alexander
Ага, да, это первая мысль. Просто там есть и не асинхронный "калькулятор", а ему это не особо надо.
Αλεχ
Αλεχ
https://docs.microsoft.com/en-us/dotnet/api/system.linq.parallelenumerable.aggregate?view=netframework-4.7.2#System_Linq_ParallelEnumerable_Aggregate__3_System_Linq_ParallelQuery___0__System_Func___1__System_Func___1___0___1__System_Func___1___1___1__System_Func___1___2__
Αλεχ
как думаешь откуда такие перегрузки берутся
Αλεχ
это как раз что @mersinvald говорил
Αλεχ
сначала инитим локальный стейт каждого воркера
Αλεχ
потом что-то делаем
Αλεχ
потом комбиним, потом результат достаем
Oleksandr
Порекомендуйте плиз либу для ресайзинга изображений без граблей. Должна принимать png и jpg и отдавать отресайзенное jpg с нужной компрессией и другими пропорциями ширины/высоты.
Cuno
Oleksandr
magras
Есть способ получить больше информации от компилятора об этой ошибке? Меня интересует почему компилятор считает, что InSt (параметр дженерика) не равен этому конкретному типу.
error[E0308]: mismatched types
--> src\streamext\concurrent.rs:26:19
|
26 | let _: InSt = in_rx.then(Result::unwrap);
| ^^^^^^^^^^^^^^^^^^^^^^^^^^ expected type parameter, found struct `futures::stream::then::Then`
|
= note: expected type `InSt`
found type `конкретный тип, который, по моим представлениям, и есть InSt`
Loo
Loo
.then принимает в себя лямбду которая должна вернуть тип который реализует into future, это либо другая Футурама, либо например result (для которого реализован intofuture уже), после этого ты только можешь запустить все это дело на экзекутора и получить результат выполения, если тебе не Футурама нужна а то что она там внутри навычисляла, больше мне сложно сказать ввиду отсутствия кода
magras
.then принимает в себя лямбду которая должна вернуть тип который реализует into future, это либо другая Футурама, либо например result (для которого реализован intofuture уже), после этого ты только можешь запустить все это дело на экзекутора и получить результат выполения, если тебе не Футурама нужна а то что она там внутри навычисляла, больше мне сложно сказать ввиду отсутствия кода
Код выглядит примерно так: https://play.rust-lang.org/?version=stable&mode=debug&edition=2018&gist=9686166a8ed1b31b08870b1f084f631c
То есть я предполагаю, что ошибка компиляции будет в случае если F принимает тип отличный от того, который передается в нее.
К сожалению, для стримов нет готового трейта IntoStream, поэтому пока в сильно черновом варианте оставил конкретный тип. В будущем, да, планировал написать аналог IntoFuture для стримов.
Денис
ну у типы не совпадают
Денис
in_rx.then(Result::unwrap) будет иметь тип Then<..., ..., ...>, что совершенно точно не равно InSt
Денис
то, что у них, по всей видимости, совпадают Item и Error, погоды не делает
magras
Кажется начинаю понимать. Работа с плюсовыми шаблонами накладывает свой отпечаток. Тогда буду думать как поправить. Спасибо.
Денис
ты, наверное, хотел бы, чтобы F была "замыкание, которое должно принимать любой тип, который имплементит Stream<Item = ...>? :)
magras
Денис
это так не работает: тип F будет выведен в месте вызова безотносительно того, что происходит в теле функции
поэтому тело функции не принимается во внимание при выводе generic-аргументов, точнее, в теле функции можно использовать только явно обозначенные generic constraints
magras
На сколько я понимаю, если я изменю InSt на IntoStream (вероятно тоже самое нужно сделать с OutSt) это должно помочь. Проблема в том, что это не позволит использовать в качестве F методы обычного Stream без обертки.
Денис
1) не поможет
2) ты можешь заимлементить IntoStream для всех Stream
Денис
не поможет — потому что InSt будет вычислен на основании того, какой тип принимает замыкание F, которое передаёт пользователь, а не на основании того, что у тебя в теле фукнции происходит
magras
А то что я хочу можно как то реализовать? Или только с использованием рантайм полиморфизма?
Денис
а можешь словами описать, какой фукнционал ты, в итоге, хочешь получить?
magras
Я хочу сделать функцию, которая разбивает переданный Stream на n стримов, к каждому применяет функцию F: Fn(Stream) -> Stream и собирает результаты опять в один выходной Stream.
То есть получить еще более обобщенный вариант for_each_concurrent: https://rust-lang-nursery.github.io/futures-api-docs/0.3.0-alpha.12/futures_util/stream/trait.StreamExt.html#method.for_each_concurrent
К примеру, чтобы получить тот самый for_each_concurrent можно было бы написать s.concurrent(n, |s| s.for_each(f)).
Денис
ну так может тебе нужна функция Fn(Stream::Item) -> Stream::Item?
magras
Я немного не прав, поскольку .for_each не возвращает Stream. Корректным примером будет s.concurrent(n, |s| s.then(f)).
magras
Денис
Fn(Stream::Item) -> Option<Stream::Item> :)
Денис
в общем я боюсь ты хочешь слишком уж обобщённую штуку
Денис
но её можно сделать, введя дополнительный трейт
Денис
trait ProcessStream {
type ReturnStream: Stream;
fn process<S: Stream>(&self, s: S) -> Self::ReturnStream;
}
.. но тут возникает проблема, что уже не заюзаешь impl Trait в ретурне
magras
Денис
не за что) но это будет всё совершенно неюзабельно с точки зрения эргономики
Sergey
https://github.com/redux-rs/redux-rs
Filipp
Я щас пользуюсь pipenv и вижу все good practices из карго (не знаю кто у кого позаимствовал, но это круто) и очень крутую фичу в pipenv нашел - в ней можно указать версию питона для проекта. Интересно почему в карго такого не добавили, для пользователей найтли кажется было бы очень удобно, а то я все время со своими .rust-version путаюсь
Berkus
Антон
Filipp
Filipp
а о
https://github.com/rust-lang/rustup.rs/issues/1218
Filipp
круто
Berkus
это где?
In these cases the toolchain can be named in the project's directory in a file called rust-toolchain, the content of which is the name of a single rustup toolchain, and which is suitable to check in to source control.
The toolchains named in this file have a more restricted form than rustup toolchains generally, and may only contain the names of the three release channels, 'stable', 'beta', 'nightly', Rust version numbers, like '1.0.0', and optionally an archive date, like 'nightly-2017-01-01'.
Filipp
класс