NAS: выбор, обсуждение, настройка, эксплуатация

[Smok]

Поговорив на днях з одним спеціалістом, який займається відновлюванням інформації з HDD.
Тепер маю собі додаткову забавку
Почались сумніви, які диски для NAS обрати.
1. Seagate IronWolf Pro 22TB
Або
2. WD Red Pro NAS 22 ТБ.
Може хтось маєє досвід або будь яку додаткову інфу про ці диски, або аналогічні з меншою ємністю.
Бо, як то кажуть, різні чутки ходять

wd hc550
wd hc520
Seagate найгірші
https://www.servethehome.com/backblaze- ... oshiba-wd/

[Oleksanr]

Поговорив на днях з одним спеціалістом, який займається відновлюванням інформації з HDD.
Тепер маю собі додаткову забавку
Почались сумніви, які диски для NAS обрати.
1. Seagate IronWolf Pro 22TB
Або
2. WD Red Pro NAS 22 ТБ.
Може хтось маєє досвід або будь яку додаткову інфу про ці диски, або аналогічні з меншою ємністю.
Бо, як то кажуть, різні чутки ходять

wd hc550
wd hc520
Seagate найгірші
https://www.servethehome.com/backblaze- ... oshiba-wd/

Дякую за пораду.
Почитав про ці диски від WD, мабуть буду брати Western Digital WD Ultrastar HC570 22Tb
Знайшов за адекватною ціною.
Судячи з отриманої інформації, реально надійні диски.

[Alligator]

Почитав про ці диски від WD, мабуть буду брати Western Digital WD Ultrastar HC570 22Tb
Знайшов за адекватною ціною.
Судячи з отриманої інформації, реально надійні диски.

У мене Ultrastar DC HC530 на 14 Тб з січня 2021 чудово себе почуває. В цілому як і інші блек/голд/ультрастар. Єдине. що сильно шумні Ultrastar, але то "на швидкість не впиває"

[Ray2000gt]

Питання до юзерів Nextcloud та MariaDB.
Нещодавно проводив прибирання на свому сервері і звернув увагу на великий розмір дерикторії з контейнером MariaDB. Розмір біля 50 ГБ.
Знайшов декілька великих файлів з розширенням .err. Три великих файла 18, 28 та 6ГБ. Я так розумію, це логи? Поряд також лежать .err файли невеликого розміру, відкрив їх, наче нічого поганого не побачив. Скрін з їх вмістом додаю. Великі відкривати не наважився.
Питань відповідно 2
Чи можна їх видалити без наслідків?
Як відключити це логування?
Не супер спеціаліст у цьому, але мені чомусь здається, що це не нормально. Якщо взяти останній файл, то виходить, що воно згенерувало 6ГБ логів за 4 міс.

спойлер

[Tesseract]

Я взагалі не бачу на ваших скрінах повідомлень про помилки, лише стандартний інформаційний спам. Подивіться дату останньої модифікації цих файлів. Усе старіше за пів року, можна сміливо видаляти.

[Ray2000gt]

Я взагалі не бачу на ваших скрінах повідомлень про помилки, лише стандартний інформаційний спам. Подивіться дату останньої модифікації цих файлів. Усе старіше за пів року, можна сміливо видаляти.

Я теж. Та й працює все нормально. А чому ці логи генеряться у такій кількості? Це ж скільки тексту в цих 50 ГБ логах…
У мене там файлів зовсім мало. По суті я користуюсь ним, коли треба передати/отримати великій файли і ще парочка незначних юзкейсів.

[Tesseract]

Напевне в налаштуваннях мускула увімкнене детальне логування кожного чиху. Подивіться, чи у вас десь заданий параметр log_warnings, і спробуйте зменшити його значення.

[Ray2000gt]

Рішення по NextCloud.
З огляду на те, що я максимально далекий від роботи з базами даних, занурюватись у налаштування MariaDB я не став. Замість цього вирішив переставити наново Nextcloud та БД. Минулий працював з 2019 року. Окрім великих логів, проблем з ним за весь час не було. Почав аналізувати, актуальний .err файл пишеться постійно, коли б я не відкрив файлменеджер, дата та час оновлення файла збігається з поточним часом. Затримка з годинником 2-3 секунди, тобто воно постійно щось пише.
Щоб не ставати на ті ж граблі, на цей раз в якості БД використав PostgreSQL17. Проблем зі встановленням не виникло. Багато читав про способи міграції і люди дійсно мали з цим клопіт. В мене ж NC працював з плагином External Storage, тому переносити не довелось НІЧОГО взагалі. Просто додаю в контейнер два шляхи до папок, в інтерфейсі включаю їх і все. Ці ж папки за сумісництвом є SMB шарами, я з ними активно працюю поза NC (99% працюю через SMB). Схема робоча, перевірена часом. Як виявилось, дуже зручна в плані міграції, яка фактично не потрібна. Функціонал NC в роботі з цими файлами повноцінний, кошик, версії файлів зберігаються в основнії дерикториї NC /data.

[Ray2000gt]

Куточок ServeTheHome на оверах.
Можливо комусь буде цікаво. На eBay продають нові серверні SSD M.2 формату 22110 на 1.92TB по $82.

[Scoffer]

Прикладу заміри цього ссд з інтернетів

спойлер

Рандомне читання дуже тормозне. Навіть не знаю з чим порівняти. Шось типу самс 840 ево.

[Oleksanr]

Доброго часу доби.
Багато часу пройшло з мого останнього посту.
Нарешті зібрав свій NAS.

Був негатив (і досі зе халишився) з приводу корпусу. Замовляв з китаю Jonsbo N3.... до сих пір не прийшов.
До речі ЗАСТЕРЕЖЕННЯ!!!
Aliexpress почало займатись шахрайтсвом. Коротко про ситуацію. Замовлення корпусу було 2 листопада 2024. Крайній строк доставки був 24 грудня. Але зазвичай товари з Китаю приходили в строк від 10 до 16 днів. Але, тут так не сталося. 20 грудня продавець додав новий статус до замовлення. Доставка затримується на 5 - 7 днів. З того часу в мене почалась з ним перепалка в чаті на аліку. Він просив не хвилюватись і запевняв, що якщо товар не прийде до першого січня, то він поверне гроші. Але звісно 1-го нічого не було доставлене. Я відкрив диспут, але відповідь алиекспресс буоа такою, що є новий крайній строк ("під захистом") до 31 січня. Продавець клявся мені що якщо не прийде до цього часу, то гроші повернуть. Від саппорта я отримав теж офіційну відповідь, що якщо до 31 січня не буде товару, гроші повернуть.... і тут... 28 січня продавець знову змінює граничну дату доставки, тепер вже 1-ше березня. Реакція аліекспресс - чекайте до 1-го березня, консультанти в чаті просто вішають локшину, дуже вибачаються і т.д. обіцяють вирішити проблему... але нічого не відбувається, від саппорта просто стандартні відписки - чекайте.

В чому суть, що щось не те, я зрозумів майже одразу, дуже довго посилка доходила до митниці, на митниці "розмитнювалась" більше тижня, а потім посилка відбула з китаю і.... наступний статус - очікує відправлення з аеропорту Китаю... досі, по трек номеру в жодній транспортній компаніі не пробивається.
Сама фігова штука, що ще дві посилки на суттєву сумму так само "очікують відбуття з аеропорту" вже 1,5 місяці.
Як я розумію, це нова шахрайстка схема, яку кришує аліекспресс. Вони просто нескінченно продовжують крайній термін. Вічна доставка. То ж я перестав купляти будь що там, а то дуже дорого виходить якост в результаті.
Будьте обережні

Ок, то лірика. До справи.

Кейс знайшов інший в своєму місті, доставили за день!!!! ))
Зібрав собі сервер:
Case: Jonsbo N4
CPU Intel Core i5-14500
MB Asus ROG STRIX B760-G GAMING WIFI
RAM Goodram DDR5-6000 65536MB PC5-48000 (Kit of 2x32768) (Але є можливість розширити до 192Гб)
NVME Samsung 990 Pro 2TB M.2 PCIe 4.0 x4 NVMe 2.0 V-NAND 3bit MLC (MZ-V9P2T0BW)
NVME SSD WD M.2 1TB PCIe 4.0 Black SN850X - 2шт
HDD WD SATA 24TB 7200RPM 6GB/S 512MB DC HC580 0F62796 - 3 шт
Ethernet 10G Gigabit х 2 Ethernet Converged Network Adapter with Intel X540-T2 Chip

Почав передивлятись купу відео, читати купу статей про налаштування сервера.

Зупинився на системі TrueNAS scale. До того ж великим плюсом нарешті стало те, що тепер вона напряму працбє з Docker та можна розширювати існуючий пул з RAID массивами.

Але окрім NAS є інші задачі, управління розумним будинком, медіатека, транскодінгб робота з бібліотеками для графічних пакетів, та підняття на докері окремих систем (використовую для розробки программного забезпечення), ну плюс можуть появитись додаткові задачі в майбутньому.

Прочитав, шо багато хто використовує зв'язку Proxmox + TrueNAS ну і плюс HomeAssist і т.д.
Але, якшо чесно, я не зовсім зрозумів перерваги такого симбіозу, плюс обзори доволі поверхневі, для тих что вже мав досвід з цим оточенням.

Не зовсім зрозуміло як іде налаштування і створення самого пулу рейду.
Також досі для мене трохи непрозоро питання файлової системи. ZFS або XFS. Хтось хвалить одне хтось інше.
Питань по ідеї має бути меньше але стає чомусь більше )))
Можливо хто підкаже:
1. Чи потрібна таказв'язка - Proxmox, а на неї встановлювати вже всі потрібні віртуальні машини.
2. Можливо порадите літературу або відео.
3. Або ж ваші поради, як краще та гнучкіше, на майбутнє, все це налаштувати.

[Tesseract]

Proxmox потрібен якщо ви плануєте активно використовувати повноцінні віртуалки, наприклад з віндою. Якщо вам достатньо лише докера, то я не бачу в Proxmox сенсу. Якщо потрібна зручна юайка для докера, то можна буде просто поставити Portainer.
Собі я взагалі поставив OMV і користуюся його юайкою для керування докером. До Portainer вона не дотягує, але для моїх потреб її з головою. Але у мене й залізо значно слабше, і використання простіше. Що стосується повноцінних віртуалок, то з багатьох причин мені обов'язково треба запускати їх на моєму основному компі, і NAS для цього не підійде. Власне тому я й зекономив на ньому.

[Smok]

Oleksanr
такий проц краще юзати з proxmox або іншими KVM, бо він спокійно потягне контейнери та VM

переваги симбіозу proxmox + truenas це гарна швидкодія (KVM), майже аналогічно truenas на залізі + всі ніштяки truenas:
- KVM з нормальним інтерфейсом, а не та обгортка portainer що в truenas
- клонування
- бекапи без зупинки VM або CT
- proxmox backup server (pbs) - окремий слабенький ПК (в мене це wyse 3040 на atom z8350) для бекапів VM та CT, в тому числі для переносу на інший ПК з proxmox
- High Availability (розподіл VM між різними пк з proxmox)
- cepf (це вже для enterprise)

для Proxmox користуйтесь списком скриптів для першого налаштування та швидкого встановлення контейнерів та VM
https://community-scripts.github.io/Pro ... id=haos-vm

для zfs краще мати 4 диска = 1 для відновлення + 3 для даних
якщо будь-який 1 диск здохне - дані залишаться живі, але відновлення пула, після додавання нового диска взамін здохшому може зайняти більше 24 години (бо диски по 24 тб)


це все мій досвід, те, чим я користуюсь (користувався), можливо хтось може додати якісь нюанси та зробити акценти на те, чим користується

[Oleksanr]

Дякую усім за те, що поділились вашими знаннями.

Для мене складністю в данному випадку є те, як організувати RAID, та чи потрібно його прокидувати в TrueNAS чм ні... інформації я особисто притомної не знайшов.

З приводу дисків.
На данний момент є 3 диски по 24 Тб, мета створити RAID5, тобто один диск піде під данні бекапа, у випадку якщо якись диск покине чат.
В подальшому планую розширюапти пул RAID5, так, я розумію що часу це буде займати багато, але такі операції будуть проводитись не часто.
Мета, кінцева, саме на цьому сервері зробити два RAID5 по 6 дисків (по одному диску на кожному RAID пулі буде для відновлення данних)
Так що наступне оновленя RAID5 буде трьома дисками.
Також є три NVME диски, один на 2 Тб та два по 1Тб.
На 2 Тб буде як основний під роботу контейнерів, VM і т.д.
А 1Тб-ні я хотів використовувати як кеш для запису/читання з основних HDD. Теж є питання як правильно це налаштувати, якщо використовувати Proxmox з TrueNAS.

З приводу бекапів, є ідея зібрати ще один слабенький сервeр для додаткових бекапів, так я є дуже цінна для мене інформація, і я маю досвід того, як сдох HDD, і більша частина інфи пішла у вічність. То ж не хочу повторювати помилок. Зараз вже буде 2 джелела зберігання інфи. Зовнішній диск на 20Тб та NAS, в планах організувати ще один сервер.

[Smok]

Дякую усім за те, що поділились вашими знаннями.

Для мене складністю в данному випадку є те, як організувати RAID, та чи потрібно його прокидувати в TrueNAS чм ні... інформації я особисто притомної не знайшов.

З приводу дисків.
На данний момент є 3 диски по 24 Тб, мета створити RAID5, тобто один диск піде під данні бекапа, у випадку якщо якись диск покине чат.
В подальшому планую розширюапти пул RAID5, так, я розумію що часу це буде займати багато, але такі операції будуть проводитись не часто.
Мета, кінцева, саме на цьому сервері зробити два RAID5 по 6 дисків (по одному диску на кожному RAID пулі буде для відновлення данних)
Так що наступне оновленя RAID5 буде трьома дисками.
Також є три NVME диски, один на 2 Тб та два по 1Тб.
На 2 Тб буде як основний під роботу контейнерів, VM і т.д.
А 1Тб-ні я хотів використовувати як кеш для запису/читання з основних HDD. Теж є питання як правильно це налаштувати, якщо використовувати Proxmox з TrueNAS.

З приводу бекапів, є ідея зібрати ще один слабенький сервeр для додаткових бекапів, так я є дуже цінна для мене інформація, і я маю досвід того, як сдох HDD, і більша частина інфи пішла у вічність. То ж не хочу повторювати помилок. Зараз вже буде 2 джелела зберігання інфи. Зовнішній диск на 20Тб та NAS, в планах організувати ще один сервер.

а хіба не треба створити новий RAID5, щоб збільшити існуючий RAID5 ?
в zfs можна просто додати новий диск

наскільки я розуммію, навіть після того як здохне 1 диск, з zfs можна дістати інфу, з raid5 такого не вийде поки не відновиться пул, тож доведеться чекати
що те що те софтварне рішення, але на zfs є додаткові плюшки, наприклад історія зміни файлів, типу dropbox/git

не бачу сенсу в софтверному/хардверному RAID5, тимпаче на нормальному залізі де можна додати кешуючий m2

А 1Тб-ні я хотів використовувати як кеш для запису/читання з основних HDD. Теж є питання як правильно це налаштувати, якщо використовувати Proxmox з TrueNAS.

так само, як і без proxmox, proxmox не вносить ніяких змін в роботу VM/CT
https://www.ixsystems.com/documentation ... orage.html

[Ray2000gt]

Для мене складністю в данному випадку є те, як організувати RAID, та чи потрібно його прокидувати в TrueNAS чм ні... інформації я особисто притомної не знайшов.

Є дві схеми. 1. Массивом(и) рулить Proxmox, в Truenas прокидуєте готові вол'юми (LUN). 2. В Truenas прокидуєте накопичувачі, і він працює з ними фізично. Як бути з SSD "для віртуалок"? Можна їх залишити в Proxmox, а можна і в Truenas.

На данний момент є 3 диски по 24 Тб, мета створити RAID5, тобто один диск піде під данні бекапа, у випадку якщо якись диск покине чат.

От дивись. Щоб додати колись диски, RAID треба пересбирати. Так, це не часто. Чи зручно це для дому? Категорично - ні. Чи захочеш ти це робити, проходячи цей процес в перший раз? А якщо накосчиш? Ото ж, воно при такій схемі не буде розширятись умовно ніколи.
Далі. Полетів диск в RAID 5, знов таки, треба все зробити правильно для перезбирання. Якщо ти не адмін, який робить подібні процедури регулярно, це стресс.
Далі. Полетіло два диска. Ну от якось так сталось. Що залишається від RAID5? Гарбуз.
Ці проблеми частково вирішує ZFS. Та повністю вирішує Unraid.
Полетіло два диски при схемі надлишковості N+1 (як RAID5)? Неприємно, але всі данні з остальних дисків на місті. При чому вони доступні без всілких перезбирань. Тут і зараз.
Захотів додати диск в існуючий массив. Для цього достатьно вставити HDD, натиснути три кнопки в менюшці. Все, массив розширено.
Знов таки, Unraid працює нативно з SSD-кешуванням, яке також налаштовується в два кліки.
З приводу Proxmox. Треба розуміти, що самі віртуалки будуть працювати ідентично на Proxmox, TrueNas, Unraid. Швидкість також 1:1. Бо всі працюють на KVM. Зручність Proxmox саме в керуванні, автоматизації, відмовозахищенних кластерах, CEPH (зовніщне сховище) і т.п. Якщо цих VM не десятки - сотні та ти не використовуєш кластер із NAS, то доцільність Proxmox під великим питанням.
Моя порада.
Unraid.
HDD стільки, скільки потрібно по схемі N+1. Але можна всі одразу не брати, пам'ятаючи про легке розширення.
Пул з 2 SSD під кеш + VM. Але насправді можна і один ентерпрайзовий 4 TB. Вони дуже надійні. В Unraid немає потреби розносити віртуалки і кеш по різним пулам.
А ще економите 1 SSD для самого Proxmox. Unraid працює з флешки (і тільки з флешки).
По бекапам. Або, як порадив Smok слабий ПК, або хоч карман до роутера.

[Denvys5]

А ще економите 1 SSD для самого Proxmox. Unraid працює з флешки (і тільки з флешки).

Свої 5 копійок вставлю. Я на цей пункт дивлюсь радше як на мінус. Сам крутив Truenas scale на дві флешки у дзеркалі і ніфіга не було стабільно, постійно приходили повідомлення про відновлення массиву після помилки.
Зараз Proxmox на двох ссд у дзеркалі, надьожно

[Ray2000gt]

А ще економите 1 SSD для самого Proxmox. Unraid працює з флешки (і тільки з флешки).

Свої 5 копійок вставлю. Я на цей пункт дивлюсь радше як на мінус. Сам крутив Truenas scale на дві флешки у дзеркалі і ніфіга не було стабільно, постійно приходили повідомлення про відновлення массиву після помилки.
Зараз Proxmox на двох ссд у дзеркалі, надьожно

Не цікавився, як в цьому плані працює Truenas. Крутив його в віртуалці. В цілому будьякий лінукс можна поставити на флешку. Але Unraid на це розрахований, флешка працює в режимі read only. Воно створює щось типу віртуального диску, і на нього все пише. У мене з 2019 флешка працює.
Для домашнього nas, кожен додатковий накопичувач - зайвий клопіт.