Nikita
Ну я же вопросы сюда не вместо копания накидываю, а в дополнение к нему :)
Andrey
У вас есть протокол, в котором упакован еще протокол, и вам стоит задача без копирования добраться до внутреннего протокола без копирования, и подменить что-нибудь внутри.
Dr. Friedrich
Anonymous
Вот именно этого и не происходит. Там фабрика делает что-то навроде CHttpModule* module = new CMyModule(); *PPModule = module; и привет. Даже если собственно имплементация CMyModule будет правильно освобождать свою память в каком-нибудь Dispose методе, то, где выделен собственно сам module COM понятия не имеет. Это может быть new, это может быть std::allocator, это может быть HeapAlloc, etc.
Andrey
Разобрать большую вложеность протоколов с копированием в отдельную память каждый протокол для дальнейшего разбора, тоже не быстро получится, я так думаю. А при том что еще нужно что-то поменять и обратно собрать!
Andrey
например, уже были написаны парсеры на памяти OS, что бы их не переписывать.
Dr. Friedrich
Dr. Friedrich
(но не факт, что он у тебя будет быстрее стандартного)
Nikita
Andrey
У вас есть парсеры которые разбирают протоколы на линейной памяти, они проверены, написаны тесты, все по правила, представьте себе, что данные приходят кусками, и эти данные копировать в линейную память запрещено. Удобно было бы воспользоваться локальной виртуальной памятью для превращения их в линейную, и использовать уже написанные парсеры для линейной памяти. Надеюсь я объяснил. Конечно, можно переписать парсеры, и все сделать по другому. И я даже не спорю, что возможно будет работать быстрее.
Alexander
так может парсер не только в одну сторону работает, а нужно и вперед и назад
Andrey
Ну вот, сносил мне мозг, задал кучу вопросов, а так и не помог :))
Alexander "SonnySlave"
Alexander "SonnySlave"
Новая версияя шустрее соображает
Alexander "SonnySlave"
я туда только на неделю 😊
Andrey
Я написал реализацию виртуальной памяти, могу поделиться.
Co(n)stantine👨🔬
Andrey
Но не факт что она оптимальная, искал что-то похожее у других, в надежде что будет быстрее, и красивее написано
Alexander "SonnySlave"
Andrey
Alexander "SonnySlave"
без политоты, пожалуйста
Dr. Friedrich
У вас есть парсеры которые разбирают протоколы на линейной памяти, они проверены, написаны тесты, все по правила, представьте себе, что данные приходят кусками, и эти данные копировать в линейную память запрещено. Удобно было бы воспользоваться локальной виртуальной памятью для превращения их в линейную, и использовать уже написанные парсеры для линейной памяти. Надеюсь я объяснил. Конечно, можно переписать парсеры, и все сделать по другому. И я даже не спорю, что возможно будет работать быстрее.
Стековый аллокатор нужен! Аренного типа, например.
Dr. Friedrich
Меня самодельный crc32 там немножко смутил, признаться.
Andrey
Я подозреваю, что вы просто плохо посмотрели :).
Как я уже говорил, что парсеры уже написаны, и они принимают указатель на память ну и размер. Придется менять сигнатуру функций парсера, что собственно не приветствуется, либо порой просто не возможно. У меня не получилась оставить сигнатуру функций парсеров такой, какой они были, при использовании этого класса. Может, у кого-то есть идеи, как сделать, что бы оставить сигнатуру прежней.
Andrey
void parse(uint8_t *p, size_t size); - функция приема очередного куска данных. Это как пример.
Aidar
Ну напиши кастомный random_access_iterator
Andrey
Да, кстати, была дурацкая идея, предложить реализовать такой механизм в стандарте, и как-то это поддержать. :)
Aidar
Действительно дурацкая
Dr. Friedrich
В стандарте есть перегружаемый new.
Aidar
Да не нужно
Aidar
Ему нужен просто iterator
Alex
Привет. Часто вообще используются объединения в коде? Много я потеряю, если пропущу их изучение?
Интроверт 🇺🇦
Onion??
Alex
Union
Andrey
Сегодня Union, а завтра захочешь пропустить struct, ну и так далее :)
Эдвард
Alex
Ok
Roman
Alex
Спасибо
Andrey
Во многих OS используется механизм виртуальной памяти, при отображении фрагментированной физической памяти в линейную (виртуальную). Почему же нет такого механизма в стандарте. Может, конечно, потому что его достаточно просто реализовать, или он заведомо будет медленнее, чем специальная реализация.
Anatoly
Alexander
Alexander
плюс резать виртуальную память это все же дело ядра, из юзерспейса для себя нарезать очень нетипичная задача и не уверен, что так вообще можно
Alexander
ну, линукс без вирт памяти вообще не заведется
Alexey
насколько я слышал, бывает linux на железках без MMU
Andrey
Использование сторонних библиотек, на вашей сколь угодно фрагментированной памяти.
Alexey
но это весьма специфический линух конечно
Alexey
https://en.wikipedia.org/wiki/%CE%9CClinux
Alexander
Konstantin
Всем привет! Меня зовут Костя и я программирую на С++.
Konstantin
Если кто-то активно использует #xcode и #cmake, то я добавил фичу "XCODE_STARTUP_PROJECT", по аналогии с вижлой. Чтобы замержить это в мастер требуют написать юнит-тест. Если кто любит парсить вручную файл xcode и писать на cmake регулярные выражения - готов все передать чтобы вместе мы сделали мир немного лучше.
Alexander "SonnySlave"
Egor
Konstantin
Игорь привет
Konstantin
Konstantin
https://gitlab.kitware.com/cmake/cmake/merge_requests/1399#note_341388
Alexander
а почему ты сам не напишешь?
Konstantin
регулярки на cmake :(((
Konstantin
надо быть специфическим человеком чтобы писать это добровольно
Egor
они сейчас там более менее стали
Konstantin
ну и надо добавить что я смотрел полностью аналогичный юнит-тест для VS, и там неплохо так кодяры
Konstantin
Чекаво
Я таки разобрался с исполнением прог из памяти. Оказалось, что линуксы предоставляют возможность для этого.
int mexecve(const unsigned char* program, size_t size, char** argv, char** envp) {
int fd = syscall(SYS_memfd_create, "virtual executable", MFD_CLOEXEC);
if (fd < 0) {
return fd;
}
size_t written = 0;
for (size_t i = 0; written < size; i++) {
written += write(fd, program+written, size - written);
}
int retCode = fexecve(fd, argv, envp);
if (retCode < 0) {
close(fd);
}
return retCode;
}
Max
линух крут 👍 ну правда с 3.17 начиная ... на виндосе этот код запуска страниц 5-7 кода занимает
Evgenii
омг https://twitter.com/SylvainCorlay/status/1028939731860635649
Чекаво
линух крут 👍 ну правда с 3.17 начиная ... на виндосе этот код запуска страниц 5-7 кода занимает
Во время поисков способа сделать это я наткнулся на статью, где было описано как это сделать на виндузах, не больше 100-150 строк это заняло.
Способ на виндузах мне больше нравится, ибо можно после выполнения загруженного кода можно с ним ещё что-нибудь сделать, например зашифровать обратно.
В линуксах же реализация этого заняла бы как раз дохреналион строк, т.к системный вызов, который выполняет прогу из памяти, "затирает" текущий процесс, как, собственно, и другие вызовы выполнения программ, разве что кроме fork
🦥Alex Fails
🦥Alex Fails
Andrey
Добрый вечер. есть функция, кторая возвращает unqiue_ptr. Eсть ли разница между return {} и return nullptr? https://godbolt.org/g/su1huC
Ignat
https://godbolt.org/g/Zd4m23
🦥Alex Fails
Nikita
🦥Alex Fails
У вас есть парсеры которые разбирают протоколы на линейной памяти, они проверены, написаны тесты, все по правила, представьте себе, что данные приходят кусками, и эти данные копировать в линейную память запрещено. Удобно было бы воспользоваться локальной виртуальной памятью для превращения их в линейную, и использовать уже написанные парсеры для линейной памяти. Надеюсь я объяснил. Конечно, можно переписать парсеры, и все сделать по другому. И я даже не спорю, что возможно будет работать быстрее.
Для решения такой проблемы существует паттерн проектирования Адаптер
Aidar
У вас есть парсеры которые разбирают протоколы на линейной памяти, они проверены, написаны тесты, все по правила, представьте себе, что данные приходят кусками, и эти данные копировать в линейную память запрещено. Удобно было бы воспользоваться локальной виртуальной памятью для превращения их в линейную, и использовать уже написанные парсеры для линейной памяти. Надеюсь я объяснил. Конечно, можно переписать парсеры, и все сделать по другому. И я даже не спорю, что возможно будет работать быстрее.
Удобно было бы не завязываться на указатели
Aidar
Вы сделали ошибку не применив вначале итераторы
🦥Alex Fails
Aidar
А можно замапать кусок памяти в память?