AZbox HD Premium & работа с HDD > 1TB

[Tekc]

Re: AZbox HD Premium & работа с HDD > 1TB

[quote author=Lucker link=topic=3509.msg57456#msg57456 date=1264407404]
[quote author=Tekc link=topic=3509.msg56454#msg56454 date=1264073926]
Приехал мой диск.Воткнул джампер,вставил диск в азер,отформатировал одним разделом,показал 1,4Т,закинул небольшое видео,проиграл....пока все,вечером буду дальше играться...
[/quote]

А что за винт то воткнул, модель марка? И форматил чем? Азером?
[/quote]
Диск в подписи.Сначала форматил азером (ext2),проблем не было,потом решил отформатировать на компе в ext3 ,тоже без проблем.Читает пишет все ОК...
P.S.В последней прошивке размер диска правильно определяется.

[MrJack]

Re: AZbox HD Premium & работа с HDD > 1TB

Заметил следующее. С прошивкой устанавливаются старые утилиты (от 2005 года) по работе с HDD (fdisk, mkfs.ext2, mkfs.ext3 и т.д.). При установке из репы ставятся уже от 2009 года. Они корректно работают с большими дисками, партициями...
Когда первоначально устанавливал и разбивал диск, на это внимания не обратил. В итоге имею две ext3 партиции по 750Г, изначально отформатированные Azer-ом в ext2. Данные пока только на одной из них. Смотрю в сторону изменения размера и количества партиций: 2 в 1 = 1,5Тб. Данная возможность в Linux заявлена... Думаю... Стоит ли рисковать...

[gl009]

Re: AZbox HD Premium & работа с HDD > 1TB

Народ, имхо, если отсеять проблемы с совместимостью HDD и Азера, то останутся штатная работа с поддерживаемыми HDD и работа с ошибками служебных утилит fdisk, sfdisk.
Здесь ребята из Сатдрима и описали это:
http://www.satdream.ru/stati/obzory/...-na-azbox.html

[Lucker]

Re: AZbox HD Premium & работа с HDD > 1TB

В общем всем спасибо!)) Я забил на HDD 1,5 Tb Seagate [ST31500541AS](засунул в комп пускай там посидит) и взял HDD 1Tb WD10EADS, сегодня буду тестить, судя по форуму это ЛУчший вариант для AzBox.

[Alex1808]

Re: AZbox HD Premium & работа с HDD > 1TB

[quote author=Lucker link=topic=3509.msg57737#msg57737 date=1264509268]
и взял HDD 1Tb WD10EADS, сегодня буду тестить, судя по форуму это ЛУчший вариант для AzBox.
[/quote]

Незабудь мостик поставить на 5-6 пинс

[sergik]

Re: AZbox HD Premium & работа с HDD > 1TB

[quote author=Lucker link=topic=3509.msg57737#msg57737 date=1264509268]
HDD 1Tb WD10EADS, сегодня буду тестить, судя по форуму это ЛУчший вариант для AzBox.
[/quote]
У меня не работает корректно.
MDL: WD10EADS-00L5B1.
После выключения в дежутку, не отключается через заданное в меню время.
После просмотра Видео и возвращения в меню САТ ТВ для далнейшего просмотра, HDD продолжает крутится и не отключается. Причём даже если выключть в дежурку. И останавливается крутится в дежурке только часов через 5. Никакие перемычки не меняют ситуацию. Пришлось установиь Сигейт. С ним проблем таких нет.

[MrJack]

Re: AZbox HD Premium & работа с HDD > 1TB

Оптимизация ext3 файловой системы на AzBox HD Premium.
Просматривая информацию о смонтированных файловых системах на AzBox-е обратил внимания на следующее:
MMP[download]$ mount

/proc on /proc type proc (rw,nodiratime)
/dev/mtdblock5 on /DISK1 type jffs2 (ro,noatime)
devpts on /dev/pts type devpts (rw)
tmpfs on /tmp type tmpfs (rw)
sysfs on /sys type sysfs (rw)
/dev/hda1 on /MMP type ext3 (ro,data=ordered)
/dev/hda2 on /PLUGINS type ext3 (rw,data=ordered)
/dev/hda3 on /DISK2 type ext3 (rw,data=ordered)
/dev/hda4 on /Download type ext3 (rw,data=ordered)
/dev/hdb1 on /DATA/hdb1 type ext3 (rw,data=ordered)
/dev/hdb1 on /opt type ext3 (rw,nogrpid)
/dev/hdb2 on /DATA/hdb2 type ext3 (rw,data=ordered)
Озадачился... Что же значит это слово - ordered?
Оказывается: стандартные режимы работы журналируемой файловой системы ext3 "Journal, Ordered". На сайте http://ru.opensuse.org/ нашел соответствующую информацию по оптимизации свойств ext3.
Итак, существует три разных варианта журналирования файловой системы ext3:
Journal Mode (самый медленный, наиболее безопасный)
Ordered Mode (средняя скорость, очень безопасный, опция по умолчанию в OpenSUSE)
Writeback Mode (наиболее быстрый, относительно безопасный)
Если не указывать специальные параметры при "форматировании" партиции, AzBox-й LINUX по умолчанию использует режим Ordered, т. к. он обеспечивает наилучший коэффициент скорости и безопасности.

Однако, наиболее быстрый режим это режим Writeback mode т. к. он осуществляет наименьшее журналирование. В некоторых случаях это может привести к потери данных (например, при сбоях с электропитанием), но большинство людей предпочитает этот режим из-за быстрой скорости работы. Режим Journaled mode это самый медленный режим, потому что он журналирует все дважды... Большинство тех людей, которые хотят увеличить производительность ext3 должны использовать режим Writeback mode...

Короче, решил поменять режим журналирования на более скоростной.
Все операции рекомендовано производить на размонтированных партициях.
Я имею HDD объемом 1.5Тб, разбитый в силу исторических событий, на 2 партиции по 750Гиг.
Для всего задуманного нам потребуются утилиты e2fsck и e2fsck. Убедитесь перед тем, как начнете что-то делать в их наличии. У меня они были поставлены из репозитария посредством ipkg в каталог /opt, который замонтирован на /dev/hdb1.
Начал с той, на которой меньше данных.
MMP[~]$ umount /DATA/hdb2
Меняем режим журналирования:
MMP[~]$ /opt/sbin/tune2fs -O has_journal -o journal_data_writeback /dev/hdb2
Далее умные люди рекомендуют включить индексирование директорий (Enabling Directory Indexing), которое увеличивает скорость чтения и записи в и из директорий вашего жесткого диска:
MMP[~]$ /opt/sbin/tune2fs -O dir_index /dev/hdb2
Включаем индексацию директорий для уже существующих каталогов:
MMP[~]$ /opt/sbin/e2fsck -D /dev/hdb2
Выполнение команды может занять достаточно много времени (в зависимости от размера партиции и количества файлов на ней).
Поскольку наш ресивер это не многопользовательский сервер, то некоторые выполняемые файловой системой функции избыточны. А, именно,

каждый раз, когда осуществляется доступ к файлу, чтение или запись, опция atime записывает маленькое изменение к файлу, в котором указывается когда последний раз осуществлялся доступ к файлу. Однако, в ext3, эта опция может замедлить процесс чтения или записи на диск. Выключение atime отменяет обновление информации об последнем доступе к файлу, обновляя информацию только когда файл модифицируется (осуществляется запись).

Партиция hdb2 у меня монтируется скриптом (ищите в соответствующей ветке форума), который я изменил в соответствии с рекомендациями знатоков:
MMP[~]$ /bin/mount -t ext3 /dev/hdb2 /DATA/hdb2 -o noatime,nodiratime
Монтируем /dev/hdb2:
MMP[~]$ /bin/mount -t ext3 /dev/hdb2 /DATA/hdb2 -o noatime,nodiratime

Теперь все указанные выше операции для первой партиции - /dev/hdb1, но сначала нужно скопировать файловые утилиты на /dev/hdb2, т.к. для проведения работ мы будем размонтировать /dev/hdb1:
MMP[~]$ mkdir /DATA/hdb2/opt
MMP[~]$ cp -a /opt /DATA/hdb2/opt
MMP[~]$ umount /opt - выполняется если у вас замантирована /dev/hdb1 на /opt командой mount -o bind /DATA/hdb1/opt /opt
Монтируем /opt в root:
MMP[~]$ mount -o bind /DATA/hdb2/opt/opt /opt
Размонтировали /dev/hdb1:
MMP[~]$ umount /dev/hdb1

Для того, чтобы партиция /dev/hdb1 монтировалась с нужными параметрами при загрузке делаем следующее:
MMP[~]$ mount -o remount,rw /dev/mtdblock5 /DISK1
Меняем строку /bin/mount /dev/hdb1 /DATA/hdb1 в файле /DISK1/hdd_tools/check_hdb.sh на
mount -t ext3 /dev/hdb1 /DATA/hdb1 -o noatime,nodiratime
На всякие пожарные возвращаем только чтение для диска /DISK1:
MMP[~]$ mount -o remount,ro /dev/mtdblock5 /DISK1

Сначала монтируем ручками:
MMP[~] $mount -t ext3 /dev/hdb1 /DATA/hdb1 -o noatime,nodiratime
MMP[~] $mount -t ext3 /dev/hdb2 /DATA/hdb2 -o noatime,nodiratime
Проверяем, что получилось:
MMP[~]$ mount

/proc on /proc type proc (rw,nodiratime)
/dev/mtdblock5 on /DISK1 type jffs2 (ro,noatime)
devpts on /dev/pts type devpts (rw)
tmpfs on /tmp type tmpfs (rw)
sysfs on /sys type sysfs (rw)
/dev/hda1 on /MMP type ext3 (ro,data=ordered)
/deкv/hda2 on /PLUGINS type ext3 (rw,data=ordered)
/dev/hda3 on /DISK2 type ext3 (rw,data=ordered)
/dev/hda4 on /Download type ext3 (rw,data=ordered)
/dev/hdb2 on /DATA/hdb2 type ext3 (rw,noatime,nodiratime,data=writeback)
/dev/hdb2 on /opt type ext3 (rw,noatime,nodiratime,data=writeback)
/dev/hdb1 on /DATA/hdb1 type ext3 (rw,noatime,nodiratime,data=writeback)

Перегружаемся... Нервно курим и ждем. Подключаемся к AzBox и проверяем сработало ли? ???
У меня да. А у Вас?

[Tekc]

Re: AZbox HD Premium & работа с HDD > 1TB

to MrJack

Нам и так рекомендуют понизить скорость обращения к диску с 3 гб/с до 1,5 гб/с...а тут такие танцы с бубном,да ещё в ущерб безопастности... Практически эта оптимизация на чём сказалась?

[MrJack]

Re: AZbox HD Premium & работа с HDD > 1TB

[quote author=Tekc link=topic=3509.msg59563#msg59563 date=1265287909]
to MrJack

Нам и так рекомендуют понизить скорость обращения к диску с 3 гб/с до 1,5 гб/с...а тут такие танцы с бубном,да ещё в ущерб безопастности... Практически эта оптимизация на чём сказалась?
[/quote]

О какой безопасности идет речь? Вы завели несколько пользовательских аккаунтов на ресивере? У вас поднят syslog сервер на который AzBox шлет логи и вы их ежедневно проверяете?
Про практический эффект оптимизации... Если я чисто субъективно отвечу, что ресивер начал быстрее обрабатывать действия с файловой системой и меньше стал использовать оперативной памяти... Вы мне поверите?
К тому же можно довольствоваться нежурналируемой ext2, в которую ресивер по-умолчанию форматирует партиции. И скорость работы выше, и танцев с бубном нет.
P.S.:

Метод «обратная запись» наиболее быстрый, чем остальные два журналируемых метода, так как хранятся данные только о изменениях мета-данных файловой системы, и нет ожидания изменения ассоциируемых данных файла при записи (перед обновлением таких вещей как размер файла и информация о директории). Так как обновление данных файла производиться асинхронно по отношению к журналируемым изменениям мета-данных файловой системы, файлы в файловой системе могут показывать ошибки в мета-данных, например ошибка в указании владельца блоков данных (обновление которых к моменту перезагрузки системы было не закончено). Это не фатально, но может помешать пользователю.

Для меня возможные ошибки по неправильному указанию владельца блоков данных некритичны.

[Tekc]

Re: AZbox HD Premium & работа с HDD > 1TB

Про безопасность это я у вас вычитал... Я зачем тогда вообще нужна ext3 ,если есть ext2 которая быстрее работает?В чем её преимущество (на азере)?

P.S. Не пробовали изменять размер иноды и журнала в целях высвобождения зарезервированного системой места (если не ошибаюсь с 1,5 ТБ где то 80-90 ГБ )?

[MrJack]

Re: AZbox HD Premium & работа с HDD > 1TB

[quote author=Tekc link=topic=3509.msg59607#msg59607 date=1265299314]
Про безопасность это я у вас вычитал... Я зачем тогда вообще нужна ext3 ,если есть ext2 которая быстрее работает?В чем её преимущество (на азере)?

P.S. Не пробовали изменять размер иноды и журнала в целях высвобождения зарезервированного системой места (если не ошибаюсь с 1,5 ТБ где то 80-90 ГБ )?
[/quote]
Ну скажем все равно минимальное журналирование производится, и это, на мой взгляд, все таки лучше, чем совсем никакого в ext2.
Потом посмотрите на файловые системы, которые смонтированы в AzBox-e...

MMP[download]$ mount

/proc on /proc type proc (rw,nodiratime)
/dev/mtdblock5 on /DISK1 type jffs2 (ro,noatime)
devpts on /dev/pts type devpts (rw)
tmpfs on /tmp type tmpfs (rw)
sysfs on /sys type sysfs (rw)
/dev/hda1 on /MMP type ext3 (ro,data=ordered)
/dev/hda2 on /PLUGINS type ext3 (rw,data=ordered)
/dev/hda3 on /DISK2 type ext3 (rw,data=ordered)
/dev/hda4 on /Download type ext3 (rw,data=ordered)
/dev/hdb1 on /DATA/hdb1 type ext3 (rw,data=ordered)
/dev/hdb1 on /opt type ext3 (rw,nogrpid)
/dev/hdb2 on /DATA/hdb2 type ext3 (rw,data=ordered)
Родные для айзера партиции смонтированы в ext3. Теперь представьте, что вы hdb1 и hdb2 отформатировали в ext2. Следовательно ядром будет задействован драйвер для ext2 (в нашем случае он уже встроен в ядро Linux AzBox), что увеличит расход оперативной памяти - под блоки данных, структуру, кеш и т.д. Поэтому, ИМХО, с точки зрения минимизации использования оперативной памяти лучше использовать что-то одно...
Ответ на P.S. - еще не пробовал. Итак загрузил айзер пополной, да плюс эксперименты почти каждый день... Боюсь я его потеряю раньше окончания гарантийного срока...
P.S.: к тому же включил поддержку swap-файла.
MMP[/]$ cat /proc/swaps
Filename Type Size Used Priority
/DATA/hdb2/azbox_swapfile file 102392 0 -1
ИМХО, его активация на ext3 с "тяжелыми" методами журналирования будут только тормозить систему...
Короче жизнь покажет, "чьи в лесу шишки". Пока юзаю облегченный вариант журналирования второй день. Полет нормальный. Движемся дальше...

[MrJack]

Re: AZbox HD Premium & работа с HDD > 1TB

[quote author=Tekc link=topic=3509.msg59607#msg59607 date=1265299314]
P.S. Не пробовали изменять размер иноды и журнала в целях высвобождения зарезервированного системой места (если не ошибаюсь с 1,5 ТБ где то 80-90 ГБ )?
[/quote]
Похоже ошибаетесь...
MMP[~]$ /opt/sbin/tune2fs -l /dev/hdb2 | grep -i "journal inode"
Journal inode: 8

MMP[~]$ /opt/sbin/debugfs /dev/hdb2 -R "stat <8>" | grep -i user
debugfs 1.41.9 (22-Aug-2009)
User: 0 Group: 0 Size: 134217728
134217728 байт ~ 128 мегабайт
В какую сторону будем менять размер журнала?

[Tekc]

Re: AZbox HD Premium & работа с HDD > 1TB

Да,не правильно посчитал...на ext2 резервируется около 35 гб,а на ext3 около 55 гб.

Вот здесь про размеры: http://www.wizardfox.net/showthread....917&page=8

P.S.Пробовал на азере-не прокатило.

[MrJack]

Re: AZbox HD Premium & работа с HDD > 1TB

[quote author=Tekc link=topic=3509.msg59819#msg59819 date=1265374849]
Да,не правильно посчитал...на ext2 резервируется около 35 гб,а на ext3 около 55 гб.

Вот здесь про размеры: http://www.wizardfox.net/showthread....917&page=8

P.S.Пробовал на азере-не прокатило.
[/quote]
Да... да... да... но это не журнал столько отжирает:

...по умолчанию ext3 (ext2 кстати, тоже) резервирует под свои нужды целых 5% от всего дискового пространства. Эти 5% используются для работы приложений, выполняемых от root и только при нехватке пространства на жестком диске.

Эксперимент по обнулению резервированного пространства:
MMP[~]$ df -k
Filesystem 1k-blocks Used Available Use% Mounted on
/dev/mtdblock5 1024 440 584 43% /DISK1
/dev/hda1 138825 110715 20943 84% /MMP
/dev/hda2 15863 3709 11335 25% /PLUGINS
/dev/hda3 7931 3070 4452 41% /DISK2
/dev/hda4 80313 51408 24758 67% /Download
/dev/hdb1 720935248 225253524 459060356 33% /DATA/hdb1
/dev/hdb1 720935248 225253524 459060356 33% /opt
/dev/hdb2 721210248 8888348 675686472 1% /DATA/hdb2
MMP[~]$ swapoff /DATA/hdb2/azbox_swapfile
MMP[~]$ umount /DATA/hdb2
MMP[~]$ /opt/sbin/tune2fs -r 0 /dev/hdb2
tune2fs 1.41.9 (22-Aug-2009)
Setting reserved blocks count to 0
MMP[~]$ mount -t ext3 /dev/hdb2 /DATA/hdb2 -o noatime,nodiratime
MMP[~]$ swapon /DATA/hdb2/azbox_swapfile
MMP[~]$ df -k
Filesystem 1k-blocks Used Available Use% Mounted on
/dev/mtdblock5 1024 440 584 43% /DISK1
/dev/hda1 138825 110715 20943 84% /MMP
/dev/hda2 15863 3709 11335 25% /PLUGINS
/dev/hda3 7931 3070 4452 41% /DISK2
/dev/hda4 80313 51408 24758 67% /Download
/dev/hdb1 720935248 225253572 459060308 33% /DATA/hdb1
/dev/hdb1 720935248 225253572 459060308 33% /opt
/dev/hdb2 721210248 8888348 712321900 1% /DATA/hdb2

[MrJack]

Re: AZbox HD Premium & работа с HDD > 1TB

Кстати... У меня наконец-то заработала запись каналов после перехода на ext3. Не знаю, связано это с изменением режима журналирования или нет... Но факт остается фактом. После перехода на journal_data_writeback запись каналов наконец-то заработала по полной. Чему рад безмерно...