Roman
обе реализуешь
Roman
а не надо говорить не про ссылки!
Roman
в этом случае
Roman
в этом случае
а иного для вас очевидно не существует) ладно бессмысленный спор
Roman
не-ссылками могут быть простые структуры с простым поведением. сложное поведение, да еще и требующее соблюдения требований параллелизма, без указателей никто не делает.
Roman
потому что как раз и возникают вот такие блуждания в трех соснах
Roman
чтобы все было production-ready, у тебя в многофункциональной структуре должны быть такие поля минимум: struct{ mu sync.RWMutex, done chan struct{}; once *sync.Once; wg *sync.WaitGroup}. все это без указателя использовать ты не сможешь. без этих полей нельзя сделать gracefully close.
Roman
это для экспортируемой структуры пакета
Roman
для тех, кто ей будет пользоваться
Roman
если возможность конкурентного доступа из горутин к структуре не реализуется, об этом явно прописывают в godoc
Roman
хотя я возможно не понимаю , где ты такое используешь.
Nikolay Markov
товарищи, очень тупой вопрос - я гоняю тесты по коду, в котором стартует горутина, проверяющая наличие файла и берущая его mtime. Файл создается в тестах ДО старта горутины вот таким образом: newf, _ := os.Create(testNewFeedFile) newf.Sync() newf.Close() time.Sleep(time.Second) Но даже с секундным слипом тест все равно ухитряется периодически падать, потому что горутина не находит файл. Что я делаю не так?
Nikolay Markov
думал замокать файловую систему - но это немного убьет идею того, что я тестирую, да и трудоемко
Alexey
В реальном коде вы проверяете ошибки у всех функций, включая Close()?
Nikolay Markov
В реальном коде вы проверяете ошибки у всех функций, включая Close()?
проверял, ошибок нет. Более того, есть две машины, девелоперская и тестовая, на девелоперской тесты проходят, на тестовой падают рандомно
Alexey
Я имею ввиду, надо в коде всегда проверять, а не один раз руками что всё ок 🙂
Alexey
Если файла нет, то, скорее всего, Close() или Create() возвращает ошибку
Илья
хм, прям не проверяете ошибки ни в Create, ни в Sync, ни в Close? ковбойский тест
Nikolay Markov
хм, прям не проверяете ошибки ни в Create, ни в Sync, ни в Close? ковбойский тест
с одной стороны да, с другой - я генерю три файлика в темпе, если эта процедура в принципе может зафэйлиться - то проблема явно не у меня в коде, а с файловой системой
Roman
они у тебя из темпа когда грохаются?
Nikolay Markov
они у тебя из темпа когда грохаются?
в дефере, причем имя папки, где все это происходит, каждый раз рандомное
Roman
т.е. после ошибки теста файл то есть в темпе?
Roman
я про наличие файла
Nikolay Markov
сейчас с полной проверкой прогоню и посмотрю, спасибо
Roman
проверял, ошибок нет. Более того, есть две машины, девелоперская и тестовая, на девелоперской тесты проходят, на тестовой падают рандомно
если тесты у вас зависят от окружения - то скорее всего у вас с ними что-то не так. я очень сомневаюсь что вам нужно тестировать именно систему (ибо вы именно это и делаете, вы тестируете файловую систему окружения в котором выполняется тест)
Roman
в темпе ошибки вряд ли будут, там все под правами текущего пользователя создается, с максимальными гарантиями от оси
Nikolay Markov
если тесты у вас зависят от окружения - то скорее всего у вас с ними что-то не так. я очень сомневаюсь что вам нужно тестировать именно систему (ибо вы именно это и делаете, вы тестируете файловую систему окружения в котором выполняется тест)
фишка в том, что эта прога должна работать с гластерфс, читая из нее файлы. Но гластер не умеет в find в нашей версии, поэтому логика замешана на комбинацию вызовов ls в подпроцессе (если есть более умные варианты - буду рад послушать)
Roman
может быть ошибка в генерации имени папки
Nikolay Markov
то есть приходится тестить логику работы с файловой системой через вот эти самые ls, к сожалению
Nikolay Markov
вы определитесь, что именно вы тестируете файловую систему, или код который с ней работает?
именно что код. Как ты протестируешь вызов ls на файловой системе с замоканной файловой системой?
Nikolay Markov
беги от гластера.
приходится работать с тем, что есть, что делать
Roman
покажи код проверки наличия файла
Roman
в дефере, причем имя папки, где все это происходит, каждый раз рандомное
а ты дожидаешься проверки наличия файла в горутине? покажи код
Nikolay Markov
покажи код проверки наличия файла
в горутине явной проверки на наличие нет, она просто берет stat и пытается взять из него mtime. Файл в этот момент уже должен существовать. Если даже я добавлю проверку - это ничего не изменит
Roman
у тебя defer на удаление файла как выглядит?
Roman
код хочу посмотреть
Nikolay Markov
по сути, падает вот в этом коде func (gfw *GlusterFileWatcher) GetTimestamp(fpath string) time.Time { fi, err := os.Stat(fpath) if err != nil { // we should never get here! logger.Warning.Printf("WARNING: Failed to check last mtime for '%s': %v!\n", fpath, err) } return fi.ModTime() }
Nikolay Markov
да, обработки ошибки возможной тут нет, вместо нее коммент, но это другая проблема
🦜
Есть у кого критерий джуна на go ?
Roman
у тебя эта горутина может выполняться после того, как дефер удалил файл уже
Roman
поэтому, покажи код запуска горутины и вокруг него, включая дефер на удаление
Nikolay Markov
у тебя эта горутина может выполняться после того, как дефер удалил файл уже
не может, потому что удаляется директория целиком defer'ом в конце теста, а в тесте я слушаю на канале, в который пишет эта горутина
Nikolay Markov
сейчас скопипащу пример
Nikolay Markov
https://pastebin.com/XFVeuNaX
Roman
т.е. я к чему клоню - исключи ситуацию, что "файл уже удалился", а не "еще не создался"
Nikolay Markov
т.е. я к чему клоню - исключи ситуацию, что "файл уже удалился", а не "еще не создался"
ну вот я на 93 строке жду сообщения от горутины, которая смотрит на этот файл, без этого сообщения ничего не удаляется
Nikolay Markov
а сам defer на 16 строке
Roman
именно что код. Как ты протестируешь вызов ls на файловой системе с замоканной файловой системой?
если вы тестируете код, который работает с фс, тогда фс вам нужно обязательно мокать, иначе вы тестируете фс! зачем вам вызывать ls простите? type FileSystem interface { LS() []FileInfo } а реализация уже как вам надо... под тесты мок реализует её в памяти
Roman
я выше написал, зачем мне ls. На нем написана логика, которую я тестирую, потому что фс иначе не умеет
абтрагируйтесь от ls в тестах! я уже второй раз вам повторяю что вы тестируете не код, а файловую систему, которая зависит от среды а это просто неправильно!
Roman
ошибки нет
Alexey
А если вы мокаете, то вы тестируете мок. Я бы не топил так однозначно за моки – работает или нет ФС и окружение тоже важно знать
Alexey
На него можно ответить другим догматизмом: https://rbcs-us.com/documents/Why-Most-Unit-Testing-is-Waste.pdf
Nikolay Markov
абтрагируйтесь от ls в тестах! я уже второй раз вам повторяю что вы тестируете не код, а файловую систему, которая зависит от среды а это просто неправильно!
я тестирую логику, которая написана поверх ls с хитрыми его параметрами. Как мне ее тестировать БЕЗ файловой системы?
Roman
А если вы мокаете, то вы тестируете мок. Я бы не топил так однозначно за моки – работает или нет ФС и окружение тоже важно знать
мок обычно несколько строк реализации.. а иначе вы тестируете системную ФС, со всеми её приблудами и со всеми особенностями системы на которой тесты выполняются!
Alexey
А лучше всего думать в каждом конкретном случае 🙂
Nikolay Markov
делать vfs в памяти полноценную?
Nikolay Markov
это треш же
Roman
попробуй вот что: запиши в файлы пару байт до Sync(). т.к. Sync() скидывает файл-буфер, а не регистрирует файл в каталоге. это первый вариант. второй вариант - создай файл по-другому, через os/exec exec.Command("touch "+fn)
Nikolay Markov
ошибки нет
есть еще идеи?
Roman
Да. И это далеко не всегда плохо
я не говорю что это плохо я человека спросил: что он тестирует, систему, код или всё в целом? он сказал что тестирует код, не систему и не фс, а значит мок обязателен! иначе на другой системе у нас тесты могут повалиться, хотя наш код в этом не виноват...
Alexey
ОБЯЗАТЕЛЕН
Alexey
Нет, не обязателен 🙂
Alexey
Да перестаньте 😄
Nikolay Markov
я тестирую логику, которая написана поверх ls с хитрыми его параметрами. Как мне ее тестировать БЕЗ файловой системы?