не надо -l

А как надо? :D

$ time ls ^C real 6m28.917s user 0m0.008s sys 0m0.172s

Впизду

а где ls запускате-то?

в папке. 😊

xolseg@servlet02:/repo/upload$ time ls

да это понятно, я просто думал есть какая-нибудь директория, в которой много файлов. Но не могу такую найти. Везде порядок

Там тоже порядок, но файлов пиздец как много

это не круто вообще

да это понятно, я просто думал есть какая-нибудь директория, в которой много файлов. Но не могу такую найти. Везде порядок

тюю...

seq 0 `echo 10^7 | bc -l` | xargs -n1024 -P32 touch

seq 0 `echo 10^7 | bc -l` | xargs -n1024 -P32 touch

😆

можно даже так:

seq 0 `echo 10^32 | bc` | xargs -n1024 -P32 touch

Вообщем прошло ещё 30 минут

На ночь в скрин поставлю

А то la растёт до 150-200

где каталог test - это 2.8млн файлов на btrfs :)

я даже могу предположить, каких именно файлов

😂👍

Прод на БТР

А он бы и прод смог

А он бы и прод смог

надеюсь, что не он выбирает решения для прода. А то видел я в качестве прода кастомные сервера на AMD без корпусов и с gentoo внутри

Тонко

Ты ведь шутишь, скажи, что шутишь?

смотря кому ты это говоришь

я не шутил

смотря кому ты это говоришь

Тебе

А не разоришься на электриестве?

это был не оптерон а атлон-fx

нет, это было давно. Там был рейзер

на зен надо смотреть. Его в живую, как я понимаю, никто не видел

но я не CIO AMD. Да и вы, думаю, тоже. Вообще лично я серьезного прогресса в процах последние несколько лет просто не наблюдаю. Я сейчас говорю о десктопных процах, не мобильных.

В бд полный путь и фото тягается нормально, не нужно думать что тупее тебя. Иерархия тоже присутствует, слишком большая вложенность говорит о чем то?

В бд полный путь и фото тягается нормально, не нужно думать что тупее тебя. Иерархия тоже присутствует, слишком большая вложенность говорит о чем то?

я хеши делал и просто резал их балансером

сколько максимум данных было в свифте?

тут обсуждали, что у человека свифт на 50 миллионах тупо сдох

В бд полный путь и фото тягается нормально, не нужно думать что тупее тебя. Иерархия тоже присутствует, слишком большая вложенность говорит о чем то?

не храните полный путь в БД, не познаете альтера таблиц с миллиардами строк

Можно прикрутить костыль с динамическим переписыванием части пути в бизнес логике.

И не надо альтера :D

15Т? сколько было машин, если не секрет?

И не надо альтера :D

знаю Очень Большую ИТ-компнаию в России, в которой в БД хранился, в частности, IPv4-адрес сервера, на котором лежит конкретный файлик. апдейты при переезде серверов были веселейшим занятием.

жиза

Потому что нет аналогов на скайлейке пока. Впрочем вопрос в том как оно реально будет выглядеть

/repo/images/$name/$date/$id/$name_file.jpg /repo/images - сюда норм идёт /$name тут дохуя ( тут ls сделать нереально) /$date - начало от 01112012(тут вообще пиздец) /$name_file.jpg - просто название

этот путь хранится в бд, зачем ещё огород городить. Вопрос не про хеши и прочее..

Вопрос как зайти в какую-то конкретную папку

Ой всё..

Хуёчка отказа

Похуй на бд как таковую

спакойна, Александр

Ниспакойна

тиха тиха )

всё хорошо )

Что за ересь про точку отказа, разговор вообще о другом

я даже могу предположить, каких именно файлов

Например?

у нас кстати тоже пути хранятся в бд

внутри свифта реляционная бд (:

=# select count(*) from media; count —------— 52627351

Сейчас бы повесеть это всё на скрипт..

52 млн записей..

Вопрос в другом, как ходить по этим папкам и как минимизировать время доступа к ним

Внутри ос, а не из базы, сайта и т.п.

По пути ходит хорошо, но пути мне не нужны, мне нужно что б я мог побегать по папкам на сервере.. а не ждать 40+++++++++++++++++++ минут что б ls равзернулся

Вопрос в другом, как ходить по этим папкам и как минимизировать время доступа к ним

чтобы у тебя ls в директории с 2 млн файлов отрабатывал быстрее?

чтобы у тебя ls в директории с 2 млн файлов отрабатывал быстрее?

Ну, там не 2 млн файлов

вложенность же

но да

хочу что б ходило норм

На данный момент это ебаный пиздец, я не представляю что будет потом..

ну как тебе сказать. Ксения-то тебе дело говорит. складывай файлы по-другому, чтобы их было не так много.

тоже неясно

За надо, какая разница зачем?

ну как тебе сказать. Ксения-то тебе дело говорит. складывай файлы по-другому, чтобы их было не так много.

Ещё раз повторю их не много

52млн

это уже много

ахахаха

там свифт?

а

/repo/images/$name/$date/ - тут делаю ls -l real 0m0.044s user 0m0.000s sys 0m0.000s

Опа нихуя, да?