Video není dostupné.
Omlouváme se.
NAS for 20 HDDs. Part 3. FreeNAS and tests
Vložit
- čas přidán 17. 08. 2024
- Instagram: / electronics_in_focus
All series of the project:
NAS for 20 HDDs. Part 1. Background: • NAS на 20 HDD. Часть 1...
NAS for 20 HDDs. Part 2. Assembly: • NAS на 20 HDD. Часть 2...
NAS for 20 HDDs. Part 3. FreeNAS and tests: • NAS на 20 HDD. Часть 3...
NAS for 20 HDDs. Part 4. Switching to Xeon, increasing volume: • NAS на 20 HDD. Часть 4...
NAS for 20 HDDs. Part 5. Changing mother again, testing 10Gb, Home Assistant on NAS: • NAS на 20 HDD. Часть 5...
Equipment for measuring current (Micsig CP2100A): ali.ski/zjKSq
00:00 - Entry
00:26 - Dashboard overview
01:42 - System settings
04:48 - Storage settings
06:45 - Pool and datasets
13:12 - Setting permissions
14:11 - Snapshots and data import
16:20 - Access to data over the network
17:37 - Services, plugins and containers
22:35 - Charts (reports)
23:53 - NAS speed tests
30:17 - Inspection of the vault inside
32:54 - Current measurement during HDD spinup
34:20 - Weigh-in
34:38 - Energy consumption
35:07 - Thermogram of the insides
35:43 - Addition to the cooling system
37:29 - Conclusion
Один из лучших примеров для домашнего NAS вообще на ютубе.
Очень посредственный. Больше минусов. У меня дома файлопомойка уже лет 7. Начинал с DAS (когда корзина подключалась к компу посредством esata).
@@vasyna007 Не посоветуешь хороших статей на тему? Планирую собирать домашний сервер с NAS, видеонаблюдением и виртуальными машинами, смотрю в сторону freeNAS из-за меньших шансов смертельно выстрелить в ногу, в отличии от самосборных *nix систем. Но и в нём довольно-таки много, даже на мой дилетанский взгляд, нюансов и сыростей вижу.
@@DarkErit не знаю как сейчас, но 5 лет назад FreeNAS и NAS4Free были редкостным отстоем! Всё хорошо и всё прекрасно, за исключением самой малости! В них напрочь отсутствовала возможность человеческой настройки прав доступа на расшаренные папки! Может что-то и поменялось за последние годы, но лично я ушёл на OpenMediaVault и Synology!
@@DarkErit zfs - уже способ выстрелить себе в ногу.
надо очень хорошо понимать, как оно живёт, чтобы с радостью его в хоум сегмент для критичных данных тащить.
на рынке, по факту, 2 варианта основных - freeNAS и openmediavault
фринас выглядит современнее, но на фряхе, медиаваулт - деревяннее и на дебиане.
первый на зфс - второй на ext
в остальном как файлопомойки очень схожи в функционале. (самба, эпл протокол, iscsi)
плагинов больше на фринасе (но не колоссально)
но на дебиане есть докер и всё, что живёт на hub.docker.io (правда гуя красивого нет) но это решаемо...
Эээ... подскажите альтернативную ZFS файловую систему того же уровня допиленности и удобства, которая мониторит контрольными суммами не только метаданные, а и содержимое ВАШИХ ФАЙЛОВ? Уже за одно это я готов многое ей простить. Плюс меньше риск потерять все данные при синхронизации (resilver) сдохшего диска, когда вдруг умирает под лишней нагрузкой ещё один... ибо пустые блоки, в отличие от блочного RAID, ZFS переписывать не будет.
Но я бы взял таки Linux-реализацию. Proxmox + TKL MediaServer, OpenMediaVault или OviOS, в зависимости от требуемых наворотов или наоборот минимализма.
Из проблем с чем столкнется автор:
1. raid5. Не придумали массив хуже. Или зеркало или 10. Для того что можно и потерять, но нужна скорость - stripe. Остальное... Говорю как человек восстановивший не 1ТБ данных с раззных массивов.
1.1 Выше гиговой сети не прыгнешь, посему и смысла от страйпа кроме увеличения объема на поле нет.
2. Операция по замене диска будет не из приятнейших. Надо отключить все винты, выкрутить корзину... Такое себе счастье. Я остановился на просто full-tower. У него 6 дисков влезает в родные салазки и еще 6 через напечатанные на 3д принтере проставки в отсеки 5". Да лезешь туда не часто, но когда залезешь... мне чтобы поменять винт надо открутить один винт (и тот с большим барашком) рукой и отключить 2 провода.
3. Не дай бог, но когда полетит пул ты поймешь что класть все яйца в одну корзину не самая лучшая идея. Зачем все было собирать в один пул и плодить кучу датасетов? К примеру под хранилище твоих исходников видео достаточно зеркала на 2 винта. Закончится место, возьмешь еще 2 винта и сделаешь новый пул и новый датасет. Под к примеру медиатеку считай так же, ну если не помещается, то сделать raid10. Нужно большое хранилище с мелкоблочкой скоростное? stripe. Только таким способом ты по итогу упростишь себе жизнь. Ты только в начале своего пути, а я смотрю с высоты лет использования. Я не раз по итогу копировал данные, перестраивал датасеты... Сейчас 3 пула: 1. зеркало видеонаблюдение; 2. зеркало архив фото-видео + дистрибов мальца; 3. Зеркало медиатеки на случай когда нет инета. Был еще 4 пул страйп из ssd для обработки данных на том же сервере (сейчас какой-то i3, но одно время разогнаный i5 стоял). Там между ними где-то гуляют бэкапы дропбокса, вандрайва и прочего. очень удобно. К примеру не помещаюсь я в медиатеку уже. Я просто беру 2 диска большего объема, собираю новый пул, копирую данные со старого, старый на продажу, ибо там овердофига часов работы ))) Полетел пул с видеонаблюдением. Так же 2 винта новых, так же копирую с уцелевшего, последний на продажу.
4. Избыточный объем. Нет смысла держать к примеру 8ТБ когда надо всего 4. Эту проблему очень сильно решает именно разбиение на отдельные пулы.
5. Большой объем на накопителе. Да сейчас ты заплатишь меньше за 1ГБ, но выйдя из строя все эти гиги улетят. Я для себя остановился на 1ТБ дисках. С тем учетом что мне надо всего 2-3ТБ, то это не так уж и много дисков. А с тем учетом что к моему контроллеру можно подключить 12 дисков и 4 в мамку, то даже сейчас у меня оверсайз. Кста тут же покупка всех этих корзин когда используется только одна. Лично я бы в таком контексте купил бы всего 2.
6. Ни слова о ИБП. Это программный массив и данные до того как попадут на диск лежат в оперативе (то буфер о котором ты говорил). Свет блым и... нет данных. А в особо плохом случае еще и разваленный массив (я так терял данные, после восстановления в срочном порядке побежал втыкать ИБП.)
Полезный коммент, спасибо.
Я так и знал что парень с такой аватаркой, скурил давно все эти ZFSы 😁
Собрал комп тоже в фул тавере Fractal Design Define XL R2, там сразу в комплекте две корзины под 4 диска каждая, плюс 4 отсека 5.25". Пока стоят пару старых HDD дисков (на новые еще не накопил) но рад что взял этот ящик, очень тихий в сравнении со старым пк, на фоне бытового шума днем еле слышно.
Согласен и с тем "что класть все яйца в одну корзину не самая лучшая идея".
Систему бэкаплю в Time Machine, важные файлы на одном диске синхронизируются с гугл диском, второй диск с медиатекой (кино, музыка и немного хлама рабочего который не жалко вдруг чего). С новыми дисками надо будет тоже все грамотно распараллелить.
@@VitaliyBerezaChannel 15 за корпус? Офигеть. У меня старенький инвин доставшийся после обновления парка пк в каком-то клиентском офисе.
vasyna007 12300 примерно, если в рубли перевести с грн. Мой прошлый комп отслужил мне верой и правдой лет 13, наступила пора себя побаловать))) Тем более для меня это рабочий инструмент, так что не скупился😅 Да и ремонт в квартире делается, в старый ящик не хотелось пихать новые железки. Отдал старое барахло племяхе. Сейчас бы если встретил мужика который мне собирал предыдущий, обнял бы от души))) Он когда собирал, говорил: «лет на 5 тебе его точно хватит»🙂
@@VitaliyBerezaChannel У меня текущему домашнему... 7, как не 8 лет. Сразу собрал в старом корпусе, сказать честно не вижу смысла отдавать каждый раз еще и за корпус. На работу (да-да, там мой комп целиком, вот моник взял за 30-ку) вот брал ряженку 2600 пару месяцев назад, так тоже воткнул в старый корпус, которому лет 15 наверное уже. Ни чего, железки залезли как к себе домой. А главное корпус не чета современным, толстый металл, качественная покраска, все зазоры, посадочные... короче сказка. А тратить еще даже 3-5к на корпус... не мое. Лучше в железо вкину.
vasyna007 ну мой подзатаскался во время переездов, и малой комп нужен был, а мне так лень было пересобирать все в ее корпусь, плюнул и отдал весь ящик целиком))) Я моник брал год-полтора назад около 800$ LG 42.5” поначалу 🐸 давила, но сейчас даже не представляю пересесть за меньший дисплей. При возможности стараюсь вкладываться в рабочее место, чтоб потом заниматься любим делом и кайфовать от удобства, комфорта и скорости работы😃
Хорошего вечера, приятно было пообщаться и кое-что полезное для себя вынес из ваших комментов✌🏻
Лучшая аудиокнига сезона.
Автор, пожалуйста, сними продолжение через год. Опиши все, с чем столкнулся при эксплуатации? Какие будут усовершенствования? Сравнение щас и через год.
Я б и через 1-3 месяца посмотрел)
Хорошо
Спасибо за труды, информативно, доступно. Очень хотелось бы увидеть в Вашем исполнении обзоры на плагины, в частности Mosquitto
Спасибо и сразу просьба, снимите ролик спустя 6-12 месяцев эксплуатации, интересен именно опыт эксплуатации, советы по скриптам и плагинам, по температурным режимам летом и где физически расположено хранилище. Я давно уже сам присматриваюсь к домашнему хранилищу (FTP, медиа-центр, бэкапы, виртуальные машины и т.п.) и планирую засунуть его в шкаф, но смущает проблема вентиляции. Так же интересует опыт работы именно с FreeNAS, так как ещё не определился с системой (есть и другие со своими "плюшками" и минусами). Заранее спасибо.
arenda ru засунуть в шкаф? Может сразу выкинуть в мусорный контейнер. Надо кондиционер на лето ставить и себе и железу лишним не будет.
А вот зря про шкаф... его же можно грамотно сделать, чтоб и тихо, и прохладно. Я думал, например, встроить приточный вентилятор на заднюю стенку, и если шкаф не очень плотно к бетонной стене стоит -- офигенная площадь предварительного охлаждения воздуха, но почти не слышно оттуда. Шкаф внутри можно шумоизоляцией обклеить, заодно и от пыли фильтр, ибо габариты позволяют. Некоторый наддув избыточным давлением не даст пыли влезать сквозь щели.
В общем, грамотно оборудованный шкаф под сервер -- это такой себе громадный корпус, каких обычно не делают промышленно, ибо в датацентре нет заморочек на шум и пыль -- там функции такого шкафа само здание выполняет.
У меня на шкафу лежит сверху на 5 дисков фринас, уже два года, проблем ст емпературой винтов нет, процов тоже, ну корпус хорошо продувается. Пыли тоже меньше т.к. высоко находится через год снимал почистить так почти не было внутри пыли.
По фринас, как хранилище отлично, но вот с виртуальными машинами не очень, докера нативного нету, раньше был через ранчер и очень глючил. Поэтому если есть требования активно использовать докер, k8s то лучше посмотреть чтото еще. Если как хранилище и виртуальные машины на основе bhyve то вполне норм.
@@W122ard1 ок, спасибо за ифу учту
@@W122ard1 на шкафу под потолком обычно на несколько градусов теплее, чем у пола, и фильтрами это не решается... но с другой стороны -- количество пыли в воздухе с ростом высоты убывает по экспоненте... так что во всём нужен баланс и учёт конкретных условий -- возможно, практичнее лишний раз продуть.
И ещё с неподходящего шкафа уронить диск -- фатально. А вот "с пола упасть нельзя" ;)
20:55 ответ на вопрос, почему именно такому идентификатору нужно дать доступ. Это особенности FreeBSD и его Jails. Jails это по сути виртуалка, которая имеет своих пользователей и группы и они могут быть отличными от родительской ОС. А софт Transmission при установке создает своего личного пользователя и группу в системе (в самом Jail) под названым в видео идентификатором. Если быть точнее, то создает пользователя transmission и группу transmission . Делается это для безопасности сервера, так как под отдельным пользователем и группой в случае взлома будет меньше возможностей навредить из-за отсутствия прав доступа.
Спасибо
Хотелось-бы увидеть обновление, если будут изменения: исправят добавление жёстких в пул, улучшат настройку плагинов, или ещё вдруг что-то новое интересное появится.
Если будет действительно что-то интересное, то сниму
Спасибо, искал как раз более подробную информацию о работе TrueNAS. Очень полезно..
1. Переключение на старую версию это хорошо. Главное помнить что если проапгрейдить zfs пул новыми фичами (иногда такое бывает) то возможно старая версия может его и не понять. Кроме того конфиг перед апгрейдом лучше бекапить - новая версия может его изменить.
2. Поэтому аналог raid10 в некотором смысле интереснее - пул можно растить. Правда в отличие от настоящего raid10 после добавления дисков он не ребалансируется (долгая и стремная операция) - поэтому производительность может прихрамывать. Видимо из-за сложности или опасности ребалансировки они не дают растить raidZx
3. Дедупликация вроде работает на уровне блоков, а не целых файлов. Некоторые пытаются дедуплицировать образы виртуалок.
4. Плекс действительно очень умный в подтягивании метаинфы. В частности он может использовать moviedb. Также можно погуглить и прикрутить кинопоиск
5. Как по мне очень полезные плагины для синка. Например resilio. Можно издалека перелить/синкать большой объем данных в nas. А можно, к примеру, синкать в nas всю sd карту с андроид телефона (своего рода бекап)
6. По скорости zfs не очень любит кучу мелких файлов. Если гонять 100гигов больших - все у него будет норм.
7. Скорее всего просаживается ssd ноута на запись. Может в нем есть некий slc кеш по заполнении которого приходится двигать данные в большую медленную mlc/tlc/qlc часть
Я для теста скорости чтения обычно использую "copy nul". При этом никакие данные реально не записываются. Сделать можно например в тотал командере.
6 пункт. Если лить мелкие файлы, то этому будет не рад любой массив/любого типа. Но именно у ZFS это лечится легче всего. 1000 рублей optane диск на 16 гигов с алиэкспересса, ставим на кэширование записи и получаем производительность на уровне линейных операций.
@@flysats да, L2ARC кеш поможет, но скорее для чтения. И раньше обычно им для домашнего наса не заморачивались. Как и выделенным ссд под ZIL. Который, кстати как раз по идее поможет на записи.
Но все что помогает на записи как я понимаю желательно ставить зеркальной парой.
@@GuffyYuotube бесплатный хинт: у меня оптаны стоят на обьектах как zil кэши в системах видео наблюдения. Объём записи через них можете прикинуть(стоят уже по 5 лет минимум).Никаких зеркальных пар не использую. Самый не очевидный момент: оптаны без буферные т.е. по питанию безопасные.
p.s. массивы без zil(на оптанах) - нагрузку не вывозят. Потому как видонаблюдение бомбит их мелкими блоками.
@@flysats ну там поди если форсмажор и потеряется последних полчаса может это не смертельно?
Я для домашнего не заморачивался. Работает и ладно
Смотрел множество видео на разных языках, хочу сказать спасибо - подробнее вас эту тему никто не разбирал!
Наткнулся в рекомендациях, половину информации вообще не понял, но очень интересно было слушать: подача приятным монологом и интересные видео-вставки сделали свое дело. Очень захотелось, чтобы вы начали выпускать обучающие-информационные ролики на эту тематику, с удовольствием бы подписался и смотрел все, тк вы можете подать информацию не нудно, как большинство. В любом случае с меня лайк и пожелания успехов)
Сделано с любовью, как чай Липтон)))
Отличная подача и правильная речь. Хоть для меня уже ничего нового, но вот новичкам очень полезно. Спасибо!
Спасибо за такой хороший контент без воды. Очень много работы проделано.
у SSD заполнился slc кэш, обычное дело при записи большего количества данных
Видимо говененький SSD, раз такая сильная просадка. Юзаю самсунги Pro серии, такого сильного снижения не наблюдаю.
Вас же скорость чтения с NAS интересовала? Надо было тупо в /dev/null писать. Но в общем-то понятно, что упираемся в гигабитную сетку и достаточно неплохо догоняем до неё скорость отдельных шпинделей за счёт параллельности. А сжатие, контрольные суммы какие выбраны, lz4 и fletcher4? Оно вообще незаметно на нынешних процессорах, но и жмёт скорее неупакованные данные, на фотках и видео бесполезно.
Контрольные суммы дефолтные, какие не знаю. Сжатие lz4
SSD SANDISK SDSSDA240G
Благодарю, Руслан. Серия про NAS очень вовремя вышла для меня :_эволайк:
Спасибо
Для меня тоже, но я пока на хренолоджи сижу. Как локдальный диск подключил, а вот как подключить его через интернет в виде локального диска, понять не могу. Через IP с интернета заходит, то есть IP белый, порты проброспаны. Но как локальный диск не подключается, а хотелось бы удобства
@@LLlblKAPHO лучше организовать впн во внутрисеть и этого уже будет достатояно для доступа к диску. Как минимум это лучше из соображений безопасности
@@LLlblKAPHO Без учетки официальной ни как. И такое я бы не совал просто так. Либо на хренолоджи подними сервис облака и пользуйся им "локально" или только через vpn. Сунуть в инет шару... smbv1 давно взломан. Чем черт не шутит что и остальные взломаны, но пока полчат.
@@vasyna007 Можно без оф учетки и облака, подключение диска через программу NetDrive. В остальном с вами согласен, рисковое дело открывать шару.
Блииин... Я влюбился в эту систему. Zvol - крутая штука. Кэширование - тоже офигенно. У меня айскази диск на гигабите иногда быстрее работает, чем встроенный жёсткий. Особенно когда кучка маленьких файлов.
Установил плекс с качалками - вообще супер.
Смотреть было конечно интересно, а так же дало пищу для ума, при планировании свого массива дисков. Спасибо.
Благодарим Вас за крайне полезную серию выпусков о построении NAS.
Спасибо за видео.
Вдохновился Вашим видео и решил из старого сервака тоже собрать себе NAS.
Отличная серия видео, спасибо за разъяснение и детальный разбор всех нюансов.
Поройтесь в настройках контроллера, возможно есть опция последовательного запуска винтов, чтобы уменьшить пиковое потребление при включении.
на некоторых винтах для этого даже перемычки есть.
на домашних винтах это не сработает, а на сас- он раззорится
Смотрел, там только какие то низкоуровневые тайминги
Вот это я понимаю обзор! Всё подробно и без воды :) Спасибо!
С тебя то я и начну собирать сервак ;-) спасибо за труд
Спасибо за обзор. Протокол, все-таки, не Samba, а SMB. Plex скачивает данные из интернета, если файл нормально назван. Так же скачивает описания (в том числе серий у сериалов) и много чего ещё. Есть русский вариант. Покопайтесь в настройках. На большинстве телевизоров (современных) есть клиент для Plex. Есть клиент для Apple TV.
Да бы он скачивал нормальное описание к фильмам и сериалам надо поставить плагин, forums.plex.tv/t/release/166475. Kinopoisk 2.0 называется.
Интересно увидим ли когда нибудь "NAS на 20 HDD.Часть 4. Свободного места не осталось, все слоты забиты" ?
Жесткие диски маркируются производителями с противоположного от разъемов торца серийным номером уникальным, довольно удобно для идентификации
Да, знаю. Только мне в моем конструктиве до этой наклейки не добраться (пока не снимешь диск полностью
Интересно было. Спасибо, земляк! Хорошей и бесперебойной работы хранилищу!
Как всегда грамотно и по делу, без лишней воды.👍 От себя могу добавить, что за последние несколько лет собрал 2 nas сервера и перелопатил что freenas, что xigmans вдоль и поперек (сотни страниц форумов и мануалов + официальная документация). Настроить в обоих дистрибутива можно под себя всё но вопрос какими усилиями?! ZFS реализуемая на них очень живучая, работает как часы, мне сломать не удалось.
Сеть только intel, realtak не стабильна и даёт жёсткие посадки по скорости. Standby режим hdd во freenas это трешак который не могут починить сколько бы не умоляли (xigmanas работает из коробки как часы) видимо заточка под корпоративный сегмент где это не востребовано в отличие от дома.
Реализация smb в freenas на высоте, работает без нареканий с разными версиями на стороне клиента.
Плагины из коробки могу подтвердить не работают от слова совсем, с каждым приходится провести час другой чтобы начал хоть как-то работать.
От себя совет - добавь ИБП.
Спасибо
Спасибо! Очень понравилось. Хотелось бы для чайников, про установку системы и первоначальную настроку.
Осталось сделать бондинг из нескольких интерфейсов. Но для этого понадобится серверная сетевая и коммутатор, который это будет поддерживать. Когда забьете все винтами, прийдется включить верхний 20см кулер на выдув. Спасибо, очень толково получилось и видно что руки из правильного места.
Как раз собирался на работе реализовать такое хранилище, и искал вменяемое видео с разбором полетов. Отличное видео!
Есть такая штука - кэширующий SSD. Под цель ZFS лучше и быть не может. Оперативная память будет стоить 7000 рублей 20 Гб, а SSD на 120 Гб - 1500 рублей. А так сборка хороша. В будущем хочется свою серверную так же сделать. Только корпус лучше будет заказывать на ЧПУ по металлу и из прокатного алюминия делать. Так получится дешевле и более точно. И в стойки это всё дело распихать можно будет всё на том же ЧПУ.
Кэширующий VDEV на SSD и ОЗУ для кэширования в ZFS - немного разные вещи, не говоря о том, что ОЗУ намного быстрее любого SSD
Спасибо за обзор и интересные подробности!
Довольно таки обстоятельно. 👍
У меня на сетевухе Realtek постоянно падала скорость обмена. Поставил интеловский адаптер - скорость стала максимальной для гигабита. Realtek как то не всегда нормально работают с FreeBSD в сильно активном режиме загрузки
Вдруг кому будет полезно
Реалтек имеет свойство больше грузить процессор (не только во фряхе), чем Интеловые чипы, так что это могло быть, собстно, причиной...
Спасибо за подробный разбор! Как всегда познавательно, подробно, понятно!
Стоит NAS на базе Proxmox (ubuntu server как файлопомойка с plex + opnsense в качестве роутера). Для организации сетевого накопителя использую Ubuntu server + samba + mhddfs. Особо большой разницы по скорости с автором не вижу (те же 110 мб/с). Думал всё это поднять на FreeNAS, но BSD-системы мне показались сложными в плане простоты установки софта и разных финтифлюшек сторонних производителей
30:24 давайте еще раз заглянем во внутрь сетевого хранилища... понятно что вы все это уже видели (но оно так офигенно собрано, что хочется чтоб вы все оценили еще раз) :)
Я тоже как-то заморачивался с этим делом, мне больше всех понравился тогда (2 года назад) дистр openmediavault, менее требовательный и попроще как-то что ли.
По итогу, попробовал, помучился, и кинул эту затею. Через примерно год пришла мне мысль отказаться от служб гугла и прочего хлама, жрущего озу и отсылающего логи 14тыс раз в сутки.
Мое решение такое. Поставил я чистый сервер, на нем у меня некстклауд, зеркало fdroid. Синхронизация телефонной книги, календаря и прочего у меня теперь собственные. В планах еще как-нибудь сделать opds и автобэкапы с телефонов, возможно, через rsync (но это неточно..))) и свой сайт-визитка. А всякие нежные данные вроде документов решил хранить по старинке, на двух отдельных винтах, этакий офлайн-raid.
Спасибо за обзор, 6:12, можно ссылку на скрипт по переходу дисков в сон
21:28 эта картинка-обложка содержится в самом контейнере фильма. Так же и с музыкой AAC/MP3/OGG. В музыку тоже можно вшить обложку
Неа, судя по нормальному названию, подтянулись метаданные из TMDB.
@@elis33v нормальное название тоже может быть зашито в мета данные фильма
Отличная серия видео. Но поймал себя на мысли, насколько же круче и удобнее реализована система DSM у Synology, нежели FreeNAS/TrueNAS.
vmvare предоставляет продукты для маков под которыми можно виртуально запускать другие операционные системы под названием Fusion (по мне лучше чем Parallels) а также виртуальный ОС для Виндовс, которым я не пользовался. В этой программе можно сделать Snapshots виртуальной ОС и это будет виртуальный компьютер, запуская который вновь и вновь не будет меняться. Данную процедуру можно делать бесконечно. Под MacOS файлы больших размеров не поддерживаются если только не использовать Exfat32. Возможно для подобных вещей с определенными дополнительными функциями и предназначен раздел VMware Snapshots. (там есть полноценная поддержка русского языка vmware com)
Большое спасибо, Руслан! Мне очень понравилось. Успех!
По поводу проблем с увеличением размера pool когда на нем заканчивается свободное место. Чтобы увеличить размер pool необходимо создать новый vdev (простейший способ) либо изменить размер жестких дисков в уже имеющемся vdev (если в нем 3 диска по 3 Tb, к примеру, то пока все 3 диска не заменить на 4Тб рамер этого vdev не увеличится). И затем, когда появится новый vdev, то его можно добавить к pool-у и тогда размер pool увеличится. Другими словами, pool живет на vdev-ах и именно vdev-ами увеличивается его размер. Жесткие диски это то, на чем строятся вируальные устройства vdev.
Спасибо за видео. Интересно наблюдать за развитием альтернативного решения.
Спасибо за труды!
Приятно посмотреть видос. + поставил. Было бы еще интересно посмотреть про функционал с виртуализацией. Как бы даже для дома это уже актуально. Вообще очень понравилось что людям рассказывают о продуктах на FreeBSD.
Это просто тест сетевухи. Я когда поставил фринас, решил посмотреть на скорость изнутри. Фряху я не знаю, но команды можно нагуглить.
dd if=/dev/urandom of=tempfile bs=10M count=1024
dd if=tempfile of=/dev/null bs=10M count=1024
На raid-z записывает 80+ Мб/с. Читает 200+ Мб/с.
Автору спасибо, для себя узнал что-то новое, так бы не заинтересовался скорей всего
С большим интересом я бы посмотрел реализацию управления куллеров каким-нибудь контроллером данного NAS.
Скорость ещё может зависеть от рейда и самих дисков. Мне сказали, что iscsi по факту более затратный, чем smb. на слабом железе smb может быть быстрее. Попробуйте NFS!
ПС - проверьте может включена дедупликация (надо выключить) и чтобы компрессия была lz4 - c нею быстрее, чем вообще без компрессии.
Было очень интересно!
Спасибо, отличная серия роликов про NAS.
Самая большая ошибка делать NAS на не ECC памяти. Надёжность" на уровне дизайна получается условной. При повреждении данных в памяти до чексумминга или во время такового они всё равно благополучно будут записаны на диск уже повреждёнными, и никакие дизайны тут не помогут. Между контроллерами и процом есть чексуминг, память нужна с ECC. Всё. Ещё конечно неплохо иметь диски с расширенной ECC (SAS=SATA+ECC), но это дорого, а вот без ECC ОЗУ - это зря!
Для управления торрентами советую Transmission remote GUI
github.com/transmission-remote-gui/transgui/releases
Еще я выделил отдельную папку где transmission ищет новые torrent файлы и автоматом качает их в папку Downloads
Если на плате NAS есть NVME M.2 разьем - туда можно подоткнуть M.2 SSD и использовать его как кэш диск для всего хранилища. Это серьезно ускорит весь NAS в целом. Напиши, если интересно - я напишу все что нужно сделать, как разбить SSD на разделы и команды ZFS - назначить разделы для ZIL и L2ARC, если, конечно используешь его до сих пор :)
Спасибо за видео )
Приятно смотреть и узнаем многое)
Спасибо за видео, лично пользуюсь Synology DS218+ на 2 диска. Думаю для многих больше подойдёт именно такой вариант. Уж очень synology вылезали софт. Тем не менее приятно смотреть твои видео. Может что-то попробую.
Вся серия получилась отличной! Давно думал обзавестись насом, но не хотел приобретать готовые решения. Эта серия позволит использовать древнее железо для нужных целей ))
Спасибо!
Ждем Опыт использования.
Очень интересно и ждем продолжение.
внезапные обновления - все, что нужно знать о виндоус 10
Так, на 90% восстановил свой сервер, так что по мелочи дополню:
1. Там не hass.io, там hass! Т.е. без магазина дополнений. Его, вроде, доустановить можно, сча вожусь с этим, но не так просто...
2. Знаете, что самое муторное?! 3 контроллера, 10 дисков и проблема в том, что вот видно из 10 только 7 + 2 флешки, а на каких каналах висят те три сбойных диска и в каких они корзинах - ФриНас тебя не уведомит! Ищи как хочешь!
3. Пока не проверял, но т.к. в ФриНасе рейды и пулы создаются не на основе того, на каком шлейфе кто сидит, а по id диска, то потенциально возможно передергивание из корзины в корзину! Увы, не в твоем варианте...
4. Рековые корзины рулят! (Из Новосибирска доносится вопль приятеля, что фуфло эти извращения и лучше купить дисковую полку под sas). Нажал на отключение диска, вынул корзину, заменил диск, воткнул, включил питание. Профит.
5. sas-sata шнурки рулят! У меня пока контроллеры под sata, причем древние на pci, так этот пучок проводов - убивает!
6. Поставь обдув на контроллер!!! Срочно! Сдохнет иначе!!!
7. У Китай.Г попадалась рековая корзина на 4-6 дисков 2.5 формата в 5 дюймов слот. Сюрприз, это для ssd.
15:27
вероятно подразумевается *exFAT*
🛠 🧑🔧 🔬 Интересно, фактически все упирается в сеть. Наступило время 10 гигабитных сетей.
*Мега полезная информация замера пикового потребления питания при старте* 33:44 💻 ✨ 🌻 🌈 🌺 👍
*_Спасибо!_*
Ох не стоит при тестах использовать mc утилиту. так как она медленна. убедился при копировании витруальных машин. было у меня около террабайта. лучше для этого подходит rsync
Где можно взять скрипт HDD standby?
Спасибо, вовремя прямо выпуски попались)
Для плекса есть удобный клиент для малинки Rasplex, весьма удобен.
Все здорового. Хотелось бы еще связку с nextcloud увидеть, но мечтать не вредно)
Яделал nextcloud из поставеи freenas. Не буду писать много деталей и не исключено, что я мог сделать чтото не так (я его впервые тогда увидел и использовал), но у меня возникли проблемы в дальнейших обновлениях nexcloud. Может быть у меня было слишком слабое железо... Суть в том, что ошибки при обновлении доходили до того, что мне приходилось вручную оживлять nexcloud. В итоге я поднял чистый Jail на freenas и накатил вручную вебсервер со всеми настройками и развернул уже nextcloud. Там же развернул Webmin для более примитивного управления jailom. После стало работать лучше и обновления ставятся без проблем.
В целом хорошая штука как замена гугл диска или прочего. Но не лишено своих недостатков. Клиент на винде работает плохо, у меня даже иногда вылетает, и его удобство тоже не очень, когда очень огромная структура файлов. Так же есть нюансы с большимы файлами (свыше 2гб, но я думаю это должно решатся настройкой сервера, что у меня еще не доведено до идеала)
Вобщем это кратко и поверхостно о такой компоновке
Чувак, офигенное видео! 👍🔥😎
Plex вообще крутая штука) Да, он по названию файла определяет что за фильм. Ну и по типу библиотеки (Movie/Series/etc). Умеет на лету пережимать видео для трансляции, к примеру по 4G на телефон - нет смысла пихать 1080p с 5.1 звуком. Мощная штука, лет 5 пользуюсь активно, приобрел пожизненный Premium, когда бакс был дешевле и была скидка 30% на него))
Мне как-то minidlna хватает. Не знаю, долго плевался пытаясь использовать Plex. Тяжелый а толку мало. Интерфейс на конечных интерфейсах ущербен и не функционален. Так и не понял зачем оно нужно
@@StahLHerZRocK @StahLHerZRocK оно нужно скорее чтобы стримить за пределы домашней сети. Minidlna - быстрый, маленький, умеет собственно только dlna. Plex - тяжёлый, жрёт проц, активно юзает аппаратное ускорение на видеокарте. Ведёт статистику по пользователям, подтягивает метаданные... Короче - эта штука ни разу не Unix-way.. Но для меня он удобен. Начал смотреть на перерыве на обед на работе - продолжил в маршрутке с телефона, досмотрел дома с компа, как-то так. Закинул сериал на синхронизацию, чтоб в дороге не зависть от сети... Вокруг minidlna слишком много обвязок руками делать ради подобного. А я - ленив.
Спасибо! Очень доступно и подробно!
Сделайте видео по настройке nextcloud. Именно по https
Очень интересные ролики. Спасибо, большое.
Хорошо бы было объяснить чего freenas, а не omv. В последнем тоже zfs есть через плагин. А функционал расширяется через контейнеры, как по мне плюс, больше гибкости
NAS к сети подключён через 1 порт Ethernet или через 2? Какая стала температура дискового контроллера после установки вентилятора?
через 1, в прошлом видео рассказывалось
А смысл через 2? Тогда и комп должен быть подключен интерфейсом способным прогнать через себя столько.
@@vasyna007 если несколько устройств будут работать с хранилищем, то сеть будет узким местом. плюс RTL сетевая карта дает бОльшую нагрузку на CPU
@@proffust какую большую? У меня реалтек, ни разу не было проблем с тем что дисковая подсистема не на 100% загружена, а проц на 100%. Во вторых это хранилище! Там хранятся файлы. Мне надо на выходных обработать базу. Я беру её у клиента и кидаю на подключённый webdav ресурс расположенный у меня. И еду домой. К этому моменту база уже у меня дома и есть её архив. Дальше я её копирую на рабочий комп и работаю с ней на nvme накопителе с 3.5гигами в секунду скоростью, или в страйпе 2 энтерпрайзовских интела чтобы иопсы зашкаливали. Потом кидаю обратно на файлопомойки в специальную папочку. Там скриптик жмёт с шифрование базу и на почту кидает мне URL для скачивания и пароль. Теперь надо просто отдать клиенту урл и все. Какие проблемы с гиговой сетью и узким местом? Ну мало тебе гига, 10 гиговые сетевухи уже можно купить за не дорого, только свитчи пока за не дорого не купить.
20! ДВАДЦАТЬ ГИГОВ, чувствуется вся мощь(оптимизированость) современного софта, у меня в сервере с SAS SSD 16 штук и двумя 10 Гбитными картами было 8 гигов, потом добавил еще 8.
Отличный Ролик. Лайк. Маленькое исправление,- не МегаБайт в секунду, а МегаБит в секунду. Скорость предачи или приема данных, меряестя в БИТ/Секунду. Но я думаю, вы это знаете, просто случайно оговорились. Удачи с каналом.
Спасибо! Очень было познавательно.
Проблема с простым расширение RAID группы за счет добавления нового диска связана с тем что информация о четности хранится на всех дисках сразу. Это необходимо для того что бы не упираться в скорость одного диска при записи. Если нужна такая возможность, то можно использовать RAID 4, но тогда скорость записи будет существенно ниже чем бы могла бы быть. И на сколько мне известно по этой причине ее не добавляют.
10:00 добавить к существующему пулу объем можно без проблем:
1. Заменить по очереди носители в данном пуле
2. добавить к пулу дополнительный vdev, который можно собрать также в RaidZ. - так обычно ускоряют отдачу данных от пула. Если взять пару десятков дисков можно получить скорость неплохой SSD
при 1гб/с сети как получить скорость "неплохой SSD" ?🤨
Кажется я говорил про добавление объёма дисками по одному. Добавил 1 диск - объем увеличился. Возможно, не понятно выразился.
Добавление VDEV в пул, как я понимаю, снижает надёжность пула в целом. Так делать не хотелось бы
@@rnadyrshin надежность зависит от конфигурации другого VDEV, он ведь тоже может быть raidz
из одного диска конечно тоже можно сделать vdev, но и надежность будет никакой.
Вроде как ни один из существующих контроллеров просто так добавлять диски к подобным RAIDZ не умеет, ну кроме дорогих хранилищ типа Dell или Huawei
@@PbIXTOP Наверное. Я просто сравниваю с прошлым хранилищем (ZyXEL NAS542). Там я добавлял 4-й диск в RAID 5 без переноса данных
Руслан, спасибо за обзор своих заморочек, занимательно вышло. От себя: ставить БП вентилем вверх, такое себе, я ронял винт 😅 обделался лёгким испугом. И не совсем понял, почему нельзя было через какую то переходную рамку поставить вентилятор горизонтально под контроллер. У меня кстати такая заводская где то была.
Спасибо. Рамки у меня просто нет, а быстро её нигде не достать. БП по-другому в этом корпусе без колхоза не поставить.
Горячую замену диска не осуществить. Например, чтобы выдернуть диск из середины придётся выдёргивать питание из соседних дисков, так как провод питания практически внатяг. В идеале, конечно, всё-таки лучше бы это были салазки с доступом извне, но тут кому как и что устраивает.
Ну и можно раздобыть малюсенький вентилятор как на старых видеокарточках и каким-то способом прицепить его прямо сверху на радиатор контроллера на его обдув.
А в целом гравицаппа прикольная, смотреть было интересно, хотя сам пользуюсь простенькой двудисковой Synology. Спасибо.
VMware-Shapshot - позволяет делать снимки виртуальных машин размещенных на хранилище FreeNAS
Огромное спасибо!
На сколько я помню lz4 анализирует данные, и если они плохо-сжимаемые, то он их не сжитмает вообще, поэтому разницы между пулами с сжатием и без не было ни какой.
Необходимо видео как оно через год себя чувствует!
Следующий ролик как раз об этом будет
@@rnadyrshin вот это отличная новость 👍🏻 ждём
Немного не полноценные тесты на скорость передачи данных. Вы использовали только крупные видео файлы, а где же мелкие, которые могут повлиять на скорость передачи очень даже сильно.
Есть такое дело
Скорость передачи 113мб/с упирается в пропускную способность сетевого кабеля - 1 Гб/с.
интересен обзор плагинов для умного дома и как Вы интегрируете уже существующие устройства умного дома в FreeNAS
Ну все, теперь я хочу себе сетевое хранилище, правда не такое большое
:-D
просьба показать процесс установки и первоначальной настройки именно вашего случая, как и куда встраивать скрипт...
Freenas это хорошо, но я для себя выбрал Xpenology. Там и виртуализация и облако и куча других фишек
Получилось круто!
Я тоже почти сразу приклеил на термоклей небольшой радиатор на чип тетырех-портового контроллера SATA от NEC, т.к. он грелся так, что палец обжигало. М.б. потому он отработал более десяти лет. Кстати, тогда же заодно изменил на нём обычные электролитические конденсаторы на танталовые, как раз с расчётом на длительную эксплуатацию. Опытным путём выяснил, что вешать бирки на диски при использовании ZFS уже атавизм. В Windows без этого было никуда при любой профилактике корпуса связанному с выниманием дисков. Теперь диски можно возвращать в корзину в любом порядке - система при запуске сама во всём разберется.
когда выбивает диск из массива, без бирки и корзины с мигалкой - тот ещё секс.
А надо диски в пул вводить не по гнезду подключения, а по UUID, в котором присутствует марка диска и серийник. По ним и искать потом.
@@eananyev женечка вы фринас в глаза то видели?чтобы советы тут людям раздавать?
Хотелось бы уточнить вот такой момент - почему не поставили вентиляторы на заднюю стенку корпуса? (на мой взгляд, это бы создало воздушный поток от корзин, через радиатор процессора и наружу. Также бы воздух не застаивался в районе дискового контроллера). Какие меры вы предпримите, по защите хранилища от пыли, которая обязательно появится?
Вентиляторы не поставил потому что думаю, что вентиляция и так достаточная, а увеличивать шумность системы охлаждения не хочу. А от пыли никак не защищаюсь, только чищу корпус раз в год
Отличная работа и ее презентация.
Два вопроса:
1. Почему в сетапе нет агрегации сетевых интерфейсов? Сейчас производительность системы ограничена сетью.
2. Почему не используется ssd кэш?
1. В планах переход на 10 Гбит интерфейс.
2. Вообще, мне это ничего не даст в моем сценарии применения. Но я попробую добавить кэш в качестве эксперимента
Еще присмотритесь к Unraid (linux) Там сильно больше плагинов от комьюнити. Главный плюс - можно расширять пул без разрушения. Пул не является даже софтовым рейдом, тем не менее избыточность там тоже есть. Минус - он платный (есть пробный период на месяц). Удобно когда есть много дисков разного объема
добрый день Руслан, спасибо за обзор, отличная серия роликов. по своему опыту, температура 38 на дисках немного завышена для такого добротного корпуса/кулеров. Хорошо бы расставить диски на разные корзины (они все равно не заняты), устанавливать диски с пространствами между, чередуя.
Спасибо. Почему вы считаете, что 38 градусов - много?
@@rnadyrshin сравниваю со своим сервером/файло-хранилищем. я понимаю это субъективное мнение и не совсем корректное сравнение - у меня и диски другие и корпус. на своей системе я заметил что расстановка дисков с промежутками позволяет уменьшить нагрев дисков до 3-4 градусов + уменьшает нагрев системы в целом. у меня 2 диска seagate nas серии 5900rpm, при комнатной температуре 25 - диски показывают 29 и 32 градуса. макс. температуру я фиксировал 42 градуса. сервер находится в помещении без кондиционера
Отправление себе автоматических извещений через gmail SMTP не особо надежно. Я одно время имел такую конфигурацию, зачастую, когда система пытается отправить извещение, gmail не дает ей залогиниться в SMTP, и присылает письмо типа "Critical security alert. Sign-in attempt was blocked. Someone just used your password to try to sign in to your account. Google blocked them, but you should check what happened.". Это что-то типа аналога capcha. В конечном счете я перешел на амазоновский Simple Email Service и не знаю бед с тех пор. Он тоже поддерживает SMTP и мое небольшое число извещений вполне укладывается в бесплатную квоту.