killer feature of IPMI - это возможность подключать образы флоппи-диска или ISO-шки. То есть, система лежит, лезьть на антресоль за домашним серваком неохота, тянуть вниз эту дуру на 15 кг с дисками. (А наверху он потому что там пыли меньше). И вот запускаешь java-клиент, цепляешь ISO-шку через Virtual Storage и грузишься с неё (Live CD). Ну и разбираешься что там случилось с основной ОС. Если на домашнем сервере стоят нормальные фильтры на вдув, то тогда сервер достается только чтобы заменить/почистить фильтры - раз в год. А больше причин его трогать и нет - всё можно делать удаленно.
Шикарно! Любимая рубрика! Надеюсь, будет время подробно рассказать про Home Assistant (подключение разных устройств с разными протоколами). Благодарю за труд!
@Michael, да подтверждаю практикой. С завода нет поддержки ECC. Дано: - Корпус Fractal Design Define R4 - вентиляторы 2 на вдув 700 об/мин, 1 на выдув 700 об/мин. - Xeon E5-2620 v3 @ 2.40GHz - 4 планки Samsung 8Gb ECC - система стоит на зеркале из китайских SATA SSD KLLISRE 60GB Пулы: - Зеркало из 2 x MG08ADA800E , быстрый, ну очень быстрый 😁винт , и холодный - средняя Т~33° + к этому пулу включен кэш SAMSUNG_256EVO970PLUS - Стрип из 2х зеркал: 2 x SeagateEXOS_ST6000NM0115-1YZ110 холодный - средняя Т~36° и 2 х SeagateEnterprise_ST6000NM0024-1HT17Z как и положено=горячущие - средняя Т~39-42° + к этому пулу включен кэш какой-то SSD SATA на 256Gb - ну и для Джейлов и "системной периодики" отдельно отведен = KINGSTON SA400S37240G Мать: Huananzhi X99-ZD4 с завода есть 4х канал но нет поддержки ECC - печалька. TrueNAS так и показывает на заглавной в разделе память. Запросил у производителя прошивку с включенным ECC - прошил. TrueNAS стал уже показывать память с поддержкой ECC. Биос с гитхаба от Кошака пока что не шил. Турбобуст не нужен пока что. Стоит задача как и у всех = УТОПТАТЬ ТИШИНУ И ЭНЕРГОПОТРЕБЛЕНИЕ.
@@МаксимШерягин-ы1ч зачастую наш народ покупает у "перепродаванов", а у них естественно нет ни доков ни поддержки. Поэтому они "включают дурачка", типа не понимающего даже на китайском 🙂. С такими действительно просто бесполезно общаться по тех вопросам и ты остаешься наедине со своими проблемами платы купленной у него. Возможно мне повезло, но скорее я просто предоставил ТехПо продавца "железобетонные" доказательства и мой "китайский язык" был правильно переведен Гугелем с технического русского. + я брал плату у офф_магазина. После непродолжительных, но технически насыщенных переговоров - мне была предоставлена ссылка на Китай\123№;%27№"_ять\ диск 🙂где забрал архив с прошивкой. Вот и всё.
Если используете Plex, советую поставить видеокарту для аппаратного кодирования и декодирования, а так же настроить временные папки в оперативную память. И все таки нужен SSD для кэширования записи
Поддерживаю - кэш очень знатная вещь. По поводу аппаратного декодирования, так вроде там можно его активировать и на проце. Редкий проц не умеет h264/265 и прочие на текущий момент вроде.
@@anti-spy симлинки временных папок (например от того же plex) в разы увеличивают производительность и отзывчивость. А бонусом - уменьшение нагрузки на ссд и hdd
хороший видос, продолжай с NASом!!! коммент - не видел еще хорошо реализованных хранилищ на фринас или трунас. скорость сетевая в 10Гбит это еще не конец проблемы. самое важное заставить работать дисковую подсистему на высокой скорости. а тут уже нужны и диски соответствующие. все это выходит слишком дорого для домашнего использования, а для компании лучше купить готовое решение. оно будет по надежнее. не бывает дешево и сердито. как только надо копировать несколько терабайт на сетевое хранилище - сразу скорость падает сильно. удачи в изысканиях. мы смотрим, интересно и познавательно!
Я изначально поставил Home Assistant на свой самосборный NAS, но быстро отказался от такого решения. Причина в том, что обслуживание NAS по любой причине оставляет тебя без умного дома на это время. Да и смешение функциональности увеличивает риски отказа. Поэтому я применил SRP и HA переехал на выделенный комп, который занимается исключительно умным домом. Плюс в контейнерном варианте супервизор HA вечно негодует, он желает единолично всем править.
Но ведь если придется обслуживать сервер умного дома то вы тоже без него останетесь, да и чего там обслуживать то? Выдуть пыль раз в год? 15 минут максимум
Точно! ) есть линуксовая утилитка - в нее кормишь номер с сервера - получаешь кей ). Так я вначале думал шляпа какая то, но после скармливания ключа в ipmi - был приятно удивлен!
Огромное спасибо за профессионально (во всех отношениях и даже в эстетическом) сделанный материал! Прям вдохновлён и думаю приступить к построению своего хранилища. Скажите, нет ли у вас новостей по данному проекту в связи с прошествии ещё одного года использования? Уверен многом будет интересно увидеть продолжение этой серии, даже еси Вы просто поделитесь новостями и мыслями. Спасибо!
Эх, комп собрал за 2 штуки баксов. Надо дом строить, и мечтаю теперь о большом насе. Сейчас стоит старый пк, и там 15 дисков крутится, хочется норм корпус и мать и ссд 😂
дома собрал себе тоже сервак, накатил CasaOS и Nextcloud, в CasaOS поставил HandBrake приложение, для авто конвертации прокси, заливаю через приложение на IOS nextcloud видосики с айфона в 4к, они автоматом конвертятся в прокси, а по локалки работаю с проксями, потом просто заменяю на оригиналы 4к. Nextcloud использую как хранилище через https с ssl, чтоб клиентам отправлять файлы и видео
@@rnadyrshin это уж точно, сюрприз, так сюрприз, хотелось бы чтобы поскорее затихло, и да, остается снова разгребать и выплывать...хорошая идея в видео, не слышал о ней, по поводу IPMI, всё относительно просто, почему-то раньше не была, нужно поискать реализацию на esp, всё вроде бы на нем решается...
Проблема в низкой скорости копирования в том что используется всего 1 ядро ЦПУ, а тк у Вас ЦПУ слабенький то он является узким местом в данном случае... Тоже сталкивался с такой проблемой, тут важна частота на 1 ядро в выборе ЦПУ! Спасибо за Ваши видео и удачи!
Я не опытный человек но возможно просто скорость HDD максимальная такая, процессор E5-2630LV3 не слабый для передачи данных , подключено все через PCI 3.0 x8 скорость передачи 7,8 гб/с, Легче думаю 10 гб LAN подключить к другому компьютеру с SSD тогда точно будет ясно вытягивает ли LAN потенциал в реальном использовании. Извиняюсь если написал какую то чушь
*Купил новую мать 2011* тут я упал со стула! Крайне рад, что вы решили проблему! Эх, IPMI на китай мамках это анрил. Свой загрузочный ссд можно вернуть в 1й pcie слот, через переходник *pcie to m2*, брал на алике. П.С. Отдельный респект за саунд ;Р
Кстати аналог ip kvm тысячи за 3-4 вполне себе организовать. pikvm на какой-нибудь апельсине. Будет и клава-мышь с видео (hdmi), будет и эмуляция сд привода и даже если за гпио дергать, то кнопки включения/ребута организовать.
Для больших скоростей надо включать Jumbo Frame. Плюс, имеет смысл настроить количество и размер аппаратных очередей для сетевых адаптеров, сделать привязку к конкретным ядрам. Так же, в линуксе есть ещё настройки так называемого бюджета и поллера. Этим можно повлиять, сколько сетевых пакетов будет обработано за один вызов обработчика прерывания.
У меня встал вопрос сбора сетевого хранилища и выбора ОС. Но во FreeNas есть вопрос, можно ли обойтись без форматирования жёстких дисков и рейда? Будет один диск на 2тб и хочу также подключить к этому серверу локальный принтер, который хочу расшарить и чтобы могли печатать и сканировать документы. Также хранить файлы для просмотра тех же фильмов на смарт тв)
На самом деле, просто нужно было более старый биос на китайскую плату зашить. В новых биосах китайских односокетных плат ECC не поддерживается. Дело было не в плате, а в биосе
@@rnadyrshin а какая плата? Я просто отсмотрел, что Атермитер x99.. Факт в том, что между процом и памятью прямая связь, и нет никаких доп контактов. Это просто вопрос инициализации платформы.
Плата Atermiter X99 Вот такая: aliexpress.ru/item/4000809070542.html Это все понятно, но откуда такая уверенность, что в старом биосе инициализация памяти будет сделана иначе?
@@rnadyrshin сужу по биосам от хуананжи. У f8 и t8 именно такая история. Просто потом начали делать биосы на основе какого-то десктопного биоса, и поддержка ecc потерялась.
По поводу отвала веб морды у ipmi я вообще удивился что вы через кабель для сервера смогли на него попасть. 2 интернет разъема 1 это разъем сервера 2 это разъем ipmi. У нас на всех серверах так. У меня к сожалению нет доступа к железу. Но поключать ipmi надо отдельным кабелем, это факт.
Обычно в BIOS есть опция доступа Shared или Dedicated, соответственно отдельным портом или через общий. Для безопасности и отказоустойчивости конечно леучше отдельным и vlan кинуть
результат супер вышел! прям промышленное решение для малого бизнеса. доработать бы связку диски - проц -сеть. иопсы поднять. чтобы можно было с виртуализацией юзать. а то системы хранения ну оч дорогие.
А ты не смотрел в сторону виртулизации и контейнеров. У бесплатного проекта Proxmox есть поддержка контейнеров LXC. Каждый контейнер может решать свою задачу. Посмотри может тебе интересно будет и найдешь реализацию в своих проектах. У меня Proxmox как гипервизор, в нем контейнеры NAS, Wireguard, БД, Windows для разных целей и умный дом с управлением через свисток
посмотрев все ваши 5 роликов понял что это слишком и просто напихал в старый комп 4 жёстких дисков и включаю только когда нужно скинуть файлы или забрать что не будь.
Я тоже только собрал себе новый домашний сервер. Раньше был xpenology 6 с home assistant контейнером но там есть ряд ограничений и обновление странное. Перешёл на proxmox с отдельной виртуалкой на SSD для home assistant и отдельной виртуалкой для мультимедиа и файлов xpenology 7. Пробовал truenas но он больше для офиса подходит из-за усиленной безопасности и довольно мудрёной настройки. В офисе пару серверов хранения бэкапов на нём по NFS с дедуплекацией. Jail проброс портов связь хранения, ну не для дома это
Веб-нтерфейс во время перезагрузки отваливается из-за того, что используете порт в режиме разделения. Чтобы в таком режиме попасть в БИОС, можночерез консольный клиент сказать IPMIке, чтобы при следующей перезагрузке зашла в БИОС. Интерфейс всё равно отвалится, но когда связь восстановится, можно будет отредактировать настройки БИОС. Что касается хрома, то последняя версия хрома какая-то кривая, она почему-то использует TLSv1, который много где уже отключён. Возможно, дело в этом.
думаю сликом жирно для TrueNas, такая конфигурация и режим использования. Как вариант - поставил виртуалку -ProxMox. там создал машину с TrueNas, HomeAssistant, и т.д. И в Proxmox сформировал storage ZFS 30TB и отдал TrueNas. В случае обслуживания hassio не падает. Raid под контролем у ProxMox. Также остальнве виртуалки под контроллем, и удаленным обслуживанием. вся система сидит на отдельном SSD 256.
Привет. иногда просматриваю ваш канал... , Для нормального управления IPMI BMi - установите java, IPMI v2.0, пропишите все данные для управления, SUPERMICRO серверные платы - использую с 2003 года - (стабильные, надежные, не глюковые) правда покупаю лицензии к платам(важно обновлять вовремя). Удачи!!!
А ну и отсутствие M2 на плате давно не проблема. 5-10 баксов и pci-e переходник на базе. При чем есть и под 1 и под 2 и вроде под 4 накопителя сразу. Единственное не у всех хорошо разведены дифпары и очень много ошибок на линиях (железо само это разруливает) и может проседать скорость, а то и вообще не достигаться заявленных. Тут надо гуглить. Но я 3 штуки разных пробовал и ни на одном не достиг заявленных скоростей. Сую в порт на плате и скорости тут же становятся заявленными.
Руслан, тебе поможет или iscsi (как ты сказал) или SMD Direct, но дома его сложно реализовать, нужны коммутаторы с поддержкой RDMA, если это ROCE v2, а IWARP сетевушки шиш найдешь куда пропал? где наш умный дом?
Я для дома склоняюсь больше в сторону ARM архитектуры в виду ее низкого энергопотребления или x86 процессоров с TDP 10-12 Ватт. С количеством диском и их типом (HDD/SSD) в этом плане тоже вопрос актуальный
с ARM вы не получите скоростей. 1гбит/с на CIFS - да, можно, но 2.5/5гбит - уже будет вопрос. А ведь кроме шары захочется чего-то еще, запустить - виртуалки, и т.д. Насчет потребления - основное будут потреблять диски, а не процессор. У меня на x86 при постоянной отдаче 100мбит/с в p2p сам процессор находится почти все время на самых низких частотах и потребляет 4-5Вт(диски по 4-8Вт каждый в зависмости от RPM). Терять потенциальную хорошую производительность ради того чтобы сэкономить 2-3вт - крайне сомнительно.
Для хостинга можно пристроить что угодно хоть селерон с 2 гигами, вопрос в потребностях. NAS же обычно это именно хранилище, обеспечивает доступ к файлам и их сохранность, остальное вторично и скорее ради экономии.
Спасибо большое за труд! Не могли бы Вы подсказать ссылку на скрипт и описание к скрипту который позволяет смотреть температуру и останавливать диски. Или видео может снимите я думаю много кому было бы интересно!
А какие задачи у этого наса? Зачем такая монструозность и такое количество дисков? Не рассматривали нас на n100? Для торрентокачалки, сервера умного дома, плекса, более чем.
Долго объяснять, но это всё было в сериях про NAS. Нужно хранилище, которое вмещает видео-архив 20+ ТБ, обеспечивает высокую скорость последовательного чтения, легко и дешево расширяется добавлением дисков, модульно ремонтируется, поддерживает RAID-5, RAID-6, периодически проверяет данные на целостность и восстанавливает их
Сразу напишу, ваши ролики про сервер пересматривал раз по 50, вам респект. Здравствуйте Руслан. Прекрасно понимаю что из за сложившихся обстоятельств вы сейчас не уделяете время YouTobe, но если есть возможность, не могли бы мне подсказать, конфигурация вашего сервера осталась та же?, я уже давно собрал себе сервер на системе TrueNAS Core но длительное время так и не могу рационально распределить все диски и флешки (то бишь: Что пустить под Cache, что пустить под Logs и т.д. ), прекрасно понимаю, что для дома наверное половины и не надо, но это вот мой личный как-бы так сказать заскок, хочется из мелочи выжать максимум. В наличии имею: HDD 3,5 - 3Tb x1 шт. (Используется как MEDIA для хранения фильмов и музыки) Model - ST3000DM001-1ER166 HDD 3,5 - 1Tb x2 шт. (RAID - Mirror) - Model - GB1000EAMYC (Использую для важных файлов) HDD 2,5 - 1Tb x2 шт. (RAID - Mirror) - Model - ST1000LM049-2GH172 (Использую под облако NextCloud и виртуальные машины) SSD 2.5 - 60Gb x1 шт. - Model - KINGSTON_SV300S37A60G (Не могу определится, под какие нужды его можно использовать) SSD 2.5 - 120Gb x1 шт. (Используется для установки приложений Jails) - Model - PNY_CS900_120GB_SSD USB SSD - 32Gb x1 шт. (Пока что используется как загрузочный носитель) USB SSD - 60Gb x1 шт. (Использую так же как и вы, для хранения всех настроек) В перспективе есть план доукомплектовать еще 4-мя SSD или HDD но не знаю пот какие нужды, возможно вы что посоветуете, куда-то добавить или в качестве чего-то установить (Log, Cache или что-то в этом роде) Буду очень благодарен за любую подскажу, даже если будет информация не от автора видео.
@@ЕвгенийЧередов-у9м тогда зачем SSH? :) Лучше уж тогда NFS поднять. Ну, либо вообще через netcat (nc) копировать. Вообще, на самом деле, 10Г довольно сложно загрузить передачей одного файла. Там надо серьёзно тюнить сетевую подсистему.
спасибо за интересный материал! себе собрал попроще уже более 10 лет назад. сейчас ищу замену материнки, поэтому штудирую материалы, где только найду :) подскажите, пожалуйста, что за вентилятор установлен на raid-контроллер ? у меня вот такой LSI 9265-8i, греется до 60-62 градусов. хочется охладить еще сильнее.
Доброго дня вам. Я не нашел видео у вас, в котором вы перешли с можордомо на Хоум ассистент. Ранее вы говорили что Хоум ассистент убивает карты памяти, соответственно и SSD тоже умрёт быстро. Какие основные причины были перейти на другую платформу умного дома? Каковы результаты? И можно ли использовать телеграмм бот на Хоум ассистенте?
Я перешел на Home Assistant потому что он шустрее, современнее и главное - надежнее, чем majordomo, который частенько ломался после очередного обновления. В Home Assistant еще не до конца разобрался со сложными сценариями автоматизации, всё простое более менее хорошо работает. Про использование телеграм-бота не знаю, наверняка можно. Убивает карты любая система умного дома, которая часто пишет на карту. SSD намного надежнее при частой записи, потому что у SSD есть умный контроллер, который реализует алгоритмы выравнивания износа.
Ну и дополним слова выше, что в ссд и ram используются кристаллы прошедшие отбор и полностью исправны (или с малым коэффициентом бракованных банок) во флешки же и прочие вещи уходят кристаллы брака. Полную инфу об этом можно посмотреть на канале PRO Hi-Tech.
17:30 IPMI не реализует видеоадаптер, а берет уже обработанный сигнал с видеочипа. И не понятно почему тест проходил на SMB, ведь TrueNAS поддерживает родной маковский протокол шаринга. Если уж тестировать Microsoft протоколы, то хотя бы с одной стороны был Windows
10:03 обратите внимание на Нижний синий правый порт его через переходник вроде можно до тайп си подтянуть (кстати переходники дешёвые в три ёмкости две массы) на 10 гб тоже.
Подскажите пожалуйста, у вас с Мака по протоколу самба хождение по папкам быстрое идет ? И поиск файлов к примеру? У меня с винды все летает, а с мак ужасно тупит. Поиском вообще пользоваться не вариант.
А как там с ребилдом массива? Сколько это времени может занять? Я в прошлых роликах писал, что ceph будет более лучшим выбором, так как там в целом система строить хранилище по каждому диску. И система может работать и при сбойных дисках. А в raid5 проблема с ребилдом, время много проходит пока массив соберётся. Все это время у тебя нет возможности использовать систему.
Занять может много. Зависит от скорости, типа и объема дисков. В моем случае примерно будет меньше суток если мертвый диск буду менять на CMR диск и дня 3-4 если на SMR диск. Не знаю как в RAID5, но в ZFS в конфигурациях RAID-Z при сбое диска и во время ребилда (resilver) пула данные доступны. Просто скорость доступа снижается из-за занятости дисков, но в truenas можно настроить приоритет и расписание ребилда
такой ты рукастый и продуманный!!! но как ты наносишь термопасту - руки оторвать. столько пузырьков!!! такая похабщина)))) в центр проца делаешь аккуратный холмик, прижимаешь кулером и эта шляпа без полостей начинает выдавливаться по всей соприкасающейся поверхности. что сложного?
Звездец конечно, как даже под вентилятором чипы контроллера греются. И это при софтовом рейде. Думалось, что можно прилепить радиатор побольше и пассивом обойтись. Также, если возможно, просветите с следующем ролике остановку шпинеделй. При активной самбе, там постоянно какая-то сетевая активность будет от бродкастов клиентов. Интересно, насколько это работает. Если захочется делать бэкапы с нескольких домашних машин ночью. (ps: количество раскруток шпинделя за день можно увидеть в смарте).
Я отрубаю шары после того, как закончил ими пользоваться, поэтому активность по SMB останавливается и диски засыпают. Про радиатор на контроллере уже говорил, что родной радиатор крепко приклеен, отрывать - слишком большой риск
@@rnadyrshin кстати об этом (чот не подумал в прошлом ролике), термоклей, которым приклеены эти радики, на то и термоклей. При нагревании размечается и можно оторвать Радик, почти безболезненно. Главное не торопиться и постепенно. Я бы сделал себе так, будь у меня такая ситуация. Хотя, вообще у меня иной и более геморный принцип. Я в таких случаях перепиливаю охлад. Типо кастом делаю с прямым отводом за пределы корпуса. Эффективность крайне высокая, но не для каждого. Просто рассчитать нужный Радик, выпилить на фрезерном, палирнуть, все в корпус и выдув наружу. Благо сейчас масса разновыдных и по размеру и по толщине кулеров и тубинок от ноутов. (Которые так же можно кастомизировать 😅😅😅)
@@rnadyrshin Коррекция ошибок должна быть на всех этапах от локальной сети до записи на пластины диска, если грубо то их 3 этапа, 1. сетевая карта 2. Процессор-ОЗУ-контроллер дисков. 3. интерфейс диска - сам диск. Если накопителей более 5-ти и они объединяются в массивы нужен SAS. И вот почему: 1. Управление питанием, диски SAS стартуют поочерёдно и не создают огромных пусковых токов. 2. Есть коррекция ошибок, что гарантирует исключение записи битых данных на диск. 3. Если один из дисков начал умирать, то он не будет тормозить весь массив. 4. При перестроении массива, SATA не корректирует ошибки из -за чего массив RAID5 может умереть не успев перестроится(это частая причина потери данных на таких типах RAID). И ещё много чего. Так же ZFS проводит переодически SCRUB дисков, для этой операции очень желательна ECC в ОЗУ и на уровне интерфейса дисков, что бы со временем не получить битые данные на исправных дисках. Почитайте спецификацию SAS и SATA, это поможет разобраться в вопросе. Удачи.
Plex периодически сканирует библиотеки так, что расмещение его на отдельном ssd не решает проблему пробуждения дисков, если библиотеки находятся на этих дисках
У TrueNas усть версия Scale, со встроенным kubernetes (кажется k3s а не k8s). Если не хочется возиться с kubernetes, можно одним скриптом в автозагрузке, превратить kubernetes в Docker Compouse. После чего, разворачивать там чего угодно. К слову, TrueNas Scale не на FreeBsd, а на Debian.
@@rnadyrshin Если бы можно было без гемороя свои контейнеры деплоить, я не стал бы извращаться. Среди имеющихся у truenas контейнеров, нет тех что мне нужны. а с докером, можно использовать разнообразные сервисы, и без необходимости в дополнительных мощностях.
16:40 перепрошить BIOS бесплатно из под IPMI не получится Supermicro преусмотрела и продает ключ для вашего MAC/SN платы, но можно в интернетах найти скрипт который генерирует этот ключ и вроде бы до сих пор актуален
Ну наконец-то на супермикру перешли. Купите intel s3700 или s3500.на 128-256гб бу под систему и прочее, абсолютно неубиваемые серверные ссд, хватит на всю жизнь. Vga из-за kvm, он простой как сапог
Вряд ли скорость СМБ влияет. Да, она жрет конечно, но не настолько. На скоростях гигабита - 100% никак, причем я тоже с мака на домашний сервер постоянно копирую. У меня не ТруНАС, сервер на аппаратном RAID-5 8 дисков, WinSrv 2012. Чтение с массива - под 600 гбайт в сек на сервере (и то упор был в ССД наверное, массив может больше), запись поменьше. Т.е. была бы у меня сеть 10гбит - проверил бы, но думаю упор идет в скорость массива. Пора мне тоже покупать сетевухи на 10гбит....
Здравствуйте, а зачем Вы переходите на macOS? Чисто из-за софта или есть какие-то специфические причины? Спасибо, смотрю каждый ваш ролик, прекрасный монтаж, полезная инфа)
плата проработала более полугода прекрасно, и решил поменять ее потому что кто то что то написал на форуме. а если бы не прочитал и не узнал бы, то сто процентов пользовался бы платой и дальше без проблем
1) Меня одного смущает просажанная линия 12v при таком низком энергопотреблении (видно в мониторинге через IPMI) ? 2.1) Понять что является слабым местом - SMB или массив очень просто! Заходишь в web gui -> Командный интерпретатор -> копируешь с одного массива на другой данные, а скорость смотришь через Отчёты (в соседнем окне) 2.2) Чисто для справки у меня в пике при копировании с забитого массива на пустой было 1 с хвостиком Гигабайт в секунду оба массивы это шесть 10 tb дисков в RAID-Z (он же по сути RAID 5) 2.3) Так же ты забыл что ZFS ЛЮБЫЕ операции с данными проводит через оперативную паять и далеко не сразу ее очищает, так что данные нужны разные для копирования с сервера и загрузки на сервер 3) на iSCSI никакой оперативной памяти не напасёшься этот протокол ест ее как не в себя !!! 3.1) и да, данные которые лежат на сервере в iSCSI LUN доступны только через этот протокол и не как иначе, что добавляет лишнюю головную боль при определенных сценариях!
Интересно, есть ли поддержка Intel Optane на такой материнке? Можно удобно сделать с ним кэш и не бояться внезапных выключений сервера во время его работы
@@Svejiy_Tihiy_Veter если про функцию кэширования hdd с помощью ssd в потребительских чипсетах и драйверах под них то надо смотреть конкретные чипсеты и драйверы. Вообще подобное можно реализовать разными способами, но редко когда в этом есть смысл.
Хотел было спросить "зачем память с ЕСС". Ниже в комментариях прочитал, что это полезно для софтового RAID. У меня есть домашний QNAP на 6 дисков. В нем память - обычный SODIMM. NAS раз в неделю запускает скраббинг. Ошибок не находит. Вот теперь думаю, переживать по поводу "исправности данных" или нет.
@@leatherandsilver350 скорее жадность и производителей и покупателей. Там все таки требуется доп чип на памяти и доп линии на плате, так что поддержка ЕСС обходится чуть дороже обычной, в итоге потребители не горят желанием переплачивать пару процентов за то чего они не понимают, а производителям проще продать её бизнесу за овер 200% чем пытаться объяснять обычным людям зачем им платить больше за ту же память что у соседа но без ECC. По хорошему ECC есть смысл использовать везде.
@@rnadyrshin блин .. это изначально серверная платформа. Так что ecc reg память поддерживается 100%. И функция эта на данной плате работает. У меня есть и f8d, и t8d. А на односокетных бывают варианты, где биос собран на базе десктопного биоса, там может не работать. По факту, в более свежих биосах китайских односокетных плат нет поддержки ecc именно по этой причине, стоит подбирать старые биосы.
А как проверить, работает ли четность? С другой стороны уже два года на фрилансе сижу. Ошибок, связанных с памятью не было. Только была проблема с глючным диском(
@@aciddic79 wmic memphysical get memoryerrorcorrection если 3, значит нет, на сервере с ECC у меня возвращает 6 четыре раза (2 проца, в каждом два контроллера). Либо в аида64 посмотреть.
IPMI реализован на Java. а с Java браузеры работают плохо. надо и в браузере добавлять узлы в надежные и в самой джаве разрешать узлы. плюс хром вообще по умолчанию не поддерживает уже Java. IE или Edge рулит. тоже постоянно испытываю проблемы с доступом к вебке админки серверов.
killer feature of IPMI - это возможность подключать образы флоппи-диска или ISO-шки. То есть, система лежит, лезьть на антресоль за домашним серваком неохота, тянуть вниз эту дуру на 15 кг с дисками. (А наверху он потому что там пыли меньше). И вот запускаешь java-клиент, цепляешь ISO-шку через Virtual Storage и грузишься с неё (Live CD). Ну и разбираешься что там случилось с основной ОС. Если на домашнем сервере стоят нормальные фильтры на вдув, то тогда сервер достается только чтобы заменить/почистить фильтры - раз в год. А больше причин его трогать и нет - всё можно делать удаленно.
Шикарно! Любимая рубрика! Надеюсь, будет время подробно рассказать про Home Assistant (подключение разных устройств с разными протоколами). Благодарю за труд!
Спасибо за обзор. Качественный монтаж, не скучно, и в целом есть что на ус мотать)
@Michael, да подтверждаю практикой. С завода нет поддержки ECC.
Дано:
- Корпус Fractal Design Define R4 - вентиляторы 2 на вдув 700 об/мин, 1 на выдув 700 об/мин.
- Xeon E5-2620 v3 @ 2.40GHz
- 4 планки Samsung 8Gb ECC
- система стоит на зеркале из китайских SATA SSD KLLISRE 60GB
Пулы:
- Зеркало из 2 x MG08ADA800E , быстрый, ну очень быстрый 😁винт , и холодный - средняя Т~33° + к этому пулу включен кэш SAMSUNG_256EVO970PLUS
- Стрип из 2х зеркал: 2 x SeagateEXOS_ST6000NM0115-1YZ110 холодный - средняя Т~36° и 2 х SeagateEnterprise_ST6000NM0024-1HT17Z как и положено=горячущие - средняя Т~39-42° + к этому пулу включен кэш какой-то SSD SATA на 256Gb
- ну и для Джейлов и "системной периодики" отдельно отведен = KINGSTON SA400S37240G
Мать:
Huananzhi X99-ZD4 с завода есть 4х канал но нет поддержки ECC - печалька. TrueNAS так и показывает на заглавной в разделе память.
Запросил у производителя прошивку с включенным ECC - прошил. TrueNAS стал уже показывать память с поддержкой ECC.
Биос с гитхаба от Кошака пока что не шил. Турбобуст не нужен пока что.
Стоит задача как и у всех = УТОПТАТЬ ТИШИНУ И ЭНЕРГОПОТРЕБЛЕНИЕ.
Можете как-то скинуть биос для zd4 с поддержкой ecc?
@@МаксимШерягин-ы1ч drive.google.com/file/d/14XbkpG-rvXDDxRUzLaqJ9m-gYDjUaQDs/view?usp=sharing
@@AlexeyPiligrim Спасибо огромное!
@@AlexeyPiligrim А можешь ещё рассказать, куда именно ты за этим обращался? Я просто пробовал на алике писать, меня там не поняли)
@@МаксимШерягин-ы1ч зачастую наш народ покупает у "перепродаванов", а у них естественно нет ни доков ни поддержки. Поэтому они "включают дурачка", типа не понимающего даже на китайском 🙂. С такими действительно просто бесполезно общаться по тех вопросам и ты остаешься наедине со своими проблемами платы купленной у него.
Возможно мне повезло, но скорее я просто предоставил ТехПо продавца "железобетонные" доказательства и мой "китайский язык" был правильно переведен Гугелем с технического русского. + я брал плату у офф_магазина.
После непродолжительных, но технически насыщенных переговоров - мне была предоставлена ссылка на Китай\123№;%27№"_ять\ диск 🙂где забрал архив с прошивкой.
Вот и всё.
Если используете Plex, советую поставить видеокарту для аппаратного кодирования и декодирования, а так же настроить временные папки в оперативную память. И все таки нужен SSD для кэширования записи
Поддерживаю - кэш очень знатная вещь. По поводу аппаратного декодирования, так вроде там можно его активировать и на проце. Редкий проц не умеет h264/265 и прочие на текущий момент вроде.
Для чего временные папки в памяти?
@@vasyna007 Ксеоны не имеют встроенного видеоядра. Не все конечно, но эти нет
@@anti-spy симлинки временных папок (например от того же plex) в разы увеличивают производительность и отзывчивость. А бонусом - уменьшение нагрузки на ссд и hdd
Можно поподробнее, пожалуйста, про временные папки в оперативу?
Очень интересно и полезно. Большое спасибо, Руслан 🙂!
Другой вопрос зачем все эти светопирделки
охуенный сериал про домашний сервак
ждем новых эпизодов!
хороший видос, продолжай с NASом!!! коммент - не видел еще хорошо реализованных хранилищ на фринас или трунас. скорость сетевая в 10Гбит это еще не конец проблемы. самое важное заставить работать дисковую подсистему на высокой скорости. а тут уже нужны и диски соответствующие. все это выходит слишком дорого для домашнего использования, а для компании лучше купить готовое решение. оно будет по надежнее. не бывает дешево и сердито. как только надо копировать несколько терабайт на сетевое хранилище - сразу скорость падает сильно. удачи в изысканиях. мы смотрим, интересно и познавательно!
Я изначально поставил Home Assistant на свой самосборный NAS, но быстро отказался от такого решения. Причина в том, что обслуживание NAS по любой причине оставляет тебя без умного дома на это время. Да и смешение функциональности увеличивает риски отказа. Поэтому я применил SRP и HA переехал на выделенный комп, который занимается исключительно умным домом. Плюс в контейнерном варианте супервизор HA вечно негодует, он желает единолично всем править.
поддерживаю. тоже отказался. nas к тому же иногда просто надо выключить.
соглашусь, лучше пусть несколько машин стоят и отлично выполняют одну функцию - это куда надежнее
Но ведь если придется обслуживать сервер умного дома то вы тоже без него останетесь, да и чего там обслуживать то? Выдуть пыль раз в год? 15 минут максимум
@@badkun6819 я имел ввиду софтовое обслуживание. Обновления, настройку. Чем больше сервисов, тем больше проблем.
По поводу лицензии на ipmi, умельцы уже провели реверсинжениринг и в инете можно найти генератор ключей
Точно! ) есть линуксовая утилитка - в нее кормишь номер с сервера - получаешь кей ). Так я вначале думал шляпа какая то, но после скармливания ключа в ipmi - был приятно удивлен!
Огромное спасибо за профессионально (во всех отношениях и даже в эстетическом) сделанный материал! Прям вдохновлён и думаю приступить к построению своего хранилища. Скажите, нет ли у вас новостей по данному проекту в связи с прошествии ещё одного года использования? Уверен многом будет интересно увидеть продолжение этой серии, даже еси Вы просто поделитесь новостями и мыслями. Спасибо!
Эх, комп собрал за 2 штуки баксов. Надо дом строить, и мечтаю теперь о большом насе. Сейчас стоит старый пк, и там 15 дисков крутится, хочется норм корпус и мать и ссд 😂
Спасибо, всегда с большим интересом смотрю ваши ролики.
дома собрал себе тоже сервак, накатил CasaOS и Nextcloud, в CasaOS поставил HandBrake приложение, для авто конвертации прокси, заливаю через приложение на IOS nextcloud видосики с айфона в 4к, они автоматом конвертятся в прокси, а по локалки работаю с проксями, потом просто заменяю на оригиналы 4к. Nextcloud использую как хранилище через https с ssl, чтоб клиентам отправлять файлы и видео
Как всегда здравствуй, смотрим ,лайкаем)))
Благодарю! Очень интересно.
спасибо, интересно было
Спасибо огромное за интересный контент! Всегда с удовольствием смотрю Ваш канал! Спасибо!!
35:12 - Так начинается прощание с миникомпьютерами и клубками проводов))
"меняю мать".. родителей не выбирают) вспомнился ролик из прошлой жизни и фраза, что выбираю мебель из икеи, т.к. всегда можно докупить и заменить...
Такого развития событий всё равно тогда никто не мог предположить. Будем действовать исходя из сложившейся обстановки
@@rnadyrshin это уж точно, сюрприз, так сюрприз, хотелось бы чтобы поскорее затихло, и да, остается снова разгребать и выплывать...хорошая идея в видео, не слышал о ней, по поводу IPMI, всё относительно просто, почему-то раньше не была, нужно поискать реализацию на esp, всё вроде бы на нем решается...
Проблема в низкой скорости копирования в том что используется всего 1 ядро ЦПУ, а тк у Вас ЦПУ слабенький то он является узким местом в данном случае... Тоже сталкивался с такой проблемой, тут важна частота на 1 ядро в выборе ЦПУ! Спасибо за Ваши видео и удачи!
Какой бы проц Вы посоветовали для подобного проекта с учетом низкого нагрева?
Я не опытный человек но возможно просто скорость HDD максимальная такая, процессор E5-2630LV3 не слабый для передачи данных , подключено все через PCI 3.0 x8 скорость передачи 7,8 гб/с, Легче думаю 10 гб LAN подключить к другому компьютеру с SSD тогда точно будет ясно вытягивает ли LAN потенциал в реальном использовании. Извиняюсь если написал какую то чушь
*Купил новую мать 2011* тут я упал со стула! Крайне рад, что вы решили проблему! Эх, IPMI на китай мамках это анрил. Свой загрузочный ссд можно вернуть в 1й pcie слот, через переходник *pcie to m2*, брал на алике.
П.С. Отдельный респект за саунд ;Р
БлЯстнул умишком или пернул в лужу?
Кстати аналог ip kvm тысячи за 3-4 вполне себе организовать. pikvm на какой-нибудь апельсине. Будет и клава-мышь с видео (hdmi), будет и эмуляция сд привода и даже если за гпио дергать, то кнопки включения/ребута организовать.
Для больших скоростей надо включать Jumbo Frame.
Плюс, имеет смысл настроить количество и размер аппаратных очередей для сетевых адаптеров, сделать привязку к конкретным ядрам. Так же, в линуксе есть ещё настройки так называемого бюджета и поллера. Этим можно повлиять, сколько сетевых пакетов будет обработано за один вызов обработчика прерывания.
И самба - это плохой вариант, т.к. сервер работает в юзерспейсе. NFS мог бы дать получше результат.
Ну, либо действительно iSCSI
@@Igor-rg8xv Для FreeBSD userspace/kernelspace особого значения не имеет, скажем спасибо netgraph. Не надо сюда тащить Linux проблемы.
У меня встал вопрос сбора сетевого хранилища и выбора ОС. Но во FreeNas есть вопрос, можно ли обойтись без форматирования жёстких дисков и рейда? Будет один диск на 2тб и хочу также подключить к этому серверу локальный принтер, который хочу расшарить и чтобы могли печатать и сканировать документы.
Также хранить файлы для просмотра тех же фильмов на смарт тв)
Просьба еще глянуть NFS. Интересно как там со скоростями. Спасибо
На самом деле, просто нужно было более старый биос на китайскую плату зашить. В новых биосах китайских односокетных плат ECC не поддерживается. Дело было не в плате, а в биосе
Да? А есть подтверждения этих слов для моей платы?
@@rnadyrshin а какая плата? Я просто отсмотрел, что Атермитер x99.. Факт в том, что между процом и памятью прямая связь, и нет никаких доп контактов. Это просто вопрос инициализации платформы.
@@rnadyrshin на гитхабе Кошака посмотрите для своей платы.
Плата Atermiter X99
Вот такая: aliexpress.ru/item/4000809070542.html
Это все понятно, но откуда такая уверенность, что в старом биосе инициализация памяти будет сделана иначе?
@@rnadyrshin сужу по биосам от хуананжи. У f8 и t8 именно такая история. Просто потом начали делать биосы на основе какого-то десктопного биоса, и поддержка ecc потерялась.
По поводу отвала веб морды у ipmi я вообще удивился что вы через кабель для сервера смогли на него попасть. 2 интернет разъема 1 это разъем сервера 2 это разъем ipmi.
У нас на всех серверах так.
У меня к сожалению нет доступа к железу. Но поключать ipmi надо отдельным кабелем, это факт.
Обычно в BIOS есть опция доступа Shared или Dedicated, соответственно отдельным портом или через общий. Для безопасности и отказоустойчивости конечно леучше отдельным и vlan кинуть
Ну, наконец-то купил х10 от супермикро. Для ссд можно купить переходник м2 в pci-e слот.
Чувак, возвращайся с видосиками, очень скучаем😢
результат супер вышел! прям промышленное решение для малого бизнеса. доработать бы связку диски - проц -сеть. иопсы поднять. чтобы можно было с виртуализацией юзать. а то системы хранения ну оч дорогие.
Привет! Дружище скорость измеряется в битах (ботах), а объем(размер файла) в Байтах. 60,5ГБ * 1024 = 61952МБ * 8(размер байта в битовом представлении) = 495616Мб / 145сек ~ 3418Мб/с ~ 3,3(4) Гб/с
А ты не смотрел в сторону виртулизации и контейнеров. У бесплатного проекта Proxmox есть поддержка контейнеров LXC. Каждый контейнер может решать свою задачу. Посмотри может тебе интересно будет и найдешь реализацию в своих проектах. У меня Proxmox как гипервизор, в нем контейнеры NAS, Wireguard, БД, Windows для разных целей и умный дом с управлением через свисток
посмотрев все ваши 5 роликов понял что это слишком и просто напихал в старый комп 4 жёстких дисков и включаю только когда нужно скинуть файлы или забрать что не будь.
Я тоже только собрал себе новый домашний сервер. Раньше был xpenology 6 с home assistant контейнером но там есть ряд ограничений и обновление странное.
Перешёл на proxmox с отдельной виртуалкой на SSD для home assistant и отдельной виртуалкой для мультимедиа и файлов xpenology 7. Пробовал truenas но он больше для офиса подходит из-за усиленной безопасности и довольно мудрёной настройки. В офисе пару серверов хранения бэкапов на нём по NFS с дедуплекацией.
Jail проброс портов связь хранения, ну не для дома это
Красота какая
расскажите пожалуйста, зачем такие мощности? и очень интересны сценарии применения умного дома.
Да просто в розовых очках наверное
Веб-нтерфейс во время перезагрузки отваливается из-за того, что используете порт в режиме разделения. Чтобы в таком режиме попасть в БИОС, можночерез консольный клиент сказать IPMIке, чтобы при следующей перезагрузке зашла в БИОС. Интерфейс всё равно отвалится, но когда связь восстановится, можно будет отредактировать настройки БИОС.
Что касается хрома, то последняя версия хрома какая-то кривая, она почему-то использует TLSv1, который много где уже отключён. Возможно, дело в этом.
Понял, спасибо!
На таком процесоре (2630lv3) кто пытался ставить XPENOLOGY? что получилось если да? какой загрузчик?
Тоже интересно
думаю сликом жирно для TrueNas, такая конфигурация и режим использования. Как вариант - поставил виртуалку -ProxMox. там создал машину с TrueNas, HomeAssistant, и т.д. И в Proxmox сформировал storage ZFS 30TB и отдал TrueNas. В случае обслуживания hassio не падает. Raid под контролем у ProxMox. Также остальнве виртуалки под контроллем, и удаленным обслуживанием. вся система сидит на отдельном SSD 256.
Самый рабочий вариант 👍🏻
Реле скорей всего сщелкает не на материнке, а в БП. У меня БП корсар тоже щелкает (именно как элетромеханическое реле) при включении/выключении ПК
на алике есть платы переходники с nvme на ssd (для себя взял, так как на старой матери нет m2 разьема, а в будущем планирую менять мать)
Привет! Спасибо за видео, как обычно на высоте.
А будет ли на канала обзор Mac OS? Фишки, опыт, эмоции, полезные советы?
hp обычно всегда делали что бы можно только их продукции подключать на плату
Привет. иногда просматриваю ваш канал... , Для нормального управления IPMI BMi - установите java, IPMI v2.0, пропишите все данные для управления, SUPERMICRO серверные платы - использую с 2003 года - (стабильные, надежные, не глюковые) правда покупаю лицензии к платам(важно обновлять вовремя). Удачи!!!
А ну и отсутствие M2 на плате давно не проблема. 5-10 баксов и pci-e переходник на базе. При чем есть и под 1 и под 2 и вроде под 4 накопителя сразу. Единственное не у всех хорошо разведены дифпары и очень много ошибок на линиях (железо само это разруливает) и может проседать скорость, а то и вообще не достигаться заявленных. Тут надо гуглить. Но я 3 штуки разных пробовал и ни на одном не достиг заявленных скоростей. Сую в порт на плате и скорости тут же становятся заявленными.
Спасибо за ролик)
Шикарно
давай 6 часть, с файбер ченел и афа-хранилкой)
А как на момент записи ролика обстояли дела с уходом дисков в спящий режим штатными средствами? Без скрипта...
для NVMe дисков есть на али дешевые адаптеры - PCI-E => 2xNVMe. И скорее всего даже загрузка будет работать с него.
привет, у вас случайно нет видео, как вы разварачивали TrueNAS с настройками и установкой. ? очень интересно.
В 3 части было кратко
Руслан, тебе поможет или iscsi (как ты сказал) или SMD Direct, но дома его сложно реализовать, нужны коммутаторы с поддержкой RDMA, если это ROCE v2, а IWARP сетевушки шиш найдешь
куда пропал? где наш умный дом?
Осталось собрать кластер из трех нод на ceph )
Почему был выбран именно Home Assistant, а не MajorDoMo? например?
Я для дома склоняюсь больше в сторону ARM архитектуры в виду ее низкого энергопотребления или x86 процессоров с TDP 10-12 Ватт. С количеством диском и их типом (HDD/SSD) в этом плане тоже вопрос актуальный
с ARM вы не получите скоростей. 1гбит/с на CIFS - да, можно, но 2.5/5гбит - уже будет вопрос. А ведь кроме шары захочется чего-то еще, запустить - виртуалки, и т.д.
Насчет потребления - основное будут потреблять диски, а не процессор. У меня на x86 при постоянной отдаче 100мбит/с в p2p сам процессор находится почти все время на самых низких частотах и потребляет 4-5Вт(диски по 4-8Вт каждый в зависмости от RPM). Терять потенциальную хорошую производительность ради того чтобы сэкономить 2-3вт - крайне сомнительно.
С армом есть небольшая проблема - не весь софт на него портирован.
@@vasyna007 непонятно что такого x86-специфичного может понадобиться на NAS
@@АдамСмит-ы7р Сервер 1с в докере )))
@@vasyna007 для дома 1с? :)
Я в компьютерах особо не понимаю но, я как понимаю такое хранилище можно пристроить для хостинга чего нибудь, например сайты, игровые сервера и т.п?
Для хостинга можно пристроить что угодно хоть селерон с 2 гигами, вопрос в потребностях. NAS же обычно это именно хранилище, обеспечивает доступ к файлам и их сохранность, остальное вторично и скорее ради экономии.
Спасибо большое за труд!
Не могли бы Вы подсказать ссылку на скрипт и описание к скрипту который позволяет смотреть температуру и останавливать диски.
Или видео может снимите я думаю много кому было бы интересно!
Скоро пентиум 1_ будет в дефецыте , спасибо великому пучхе
с одной стороны конечно круто, а с другой вот мы уже и превысили стоимость готовых решений)
Превысили стоимость готовых решений на 20 дисков? Вы серьезно?
@@vanes3225 а зачем он домой нужен то на 20 дисков? купи просто диски повместительней
Фантастический клёвый перфекционизм! Аж голова "кругом".
И сколько же навскидку по деньгам такое чудо выходит? (не считая затрат своего времени).
Я не пробовал считать, но думаю, что примерно тысяч 80
2:35 Ну капец - тот случай, когда сначала надо было делать правильно (по инструкции к серверам).
У меня на X10DRi в супер доктор не показывает информацию по винчестерам в рейде, особо не разбирался пока.
А какие задачи у этого наса? Зачем такая монструозность и такое количество дисков? Не рассматривали нас на n100? Для торрентокачалки, сервера умного дома, плекса, более чем.
Долго объяснять, но это всё было в сериях про NAS.
Нужно хранилище, которое вмещает видео-архив 20+ ТБ, обеспечивает высокую скорость последовательного чтения, легко и дешево расширяется добавлением дисков, модульно ремонтируется, поддерживает RAID-5, RAID-6, периодически проверяет данные на целостность и восстанавливает их
Сразу напишу, ваши ролики про сервер пересматривал раз по 50, вам респект.
Здравствуйте Руслан. Прекрасно понимаю что из за сложившихся обстоятельств вы сейчас не уделяете время YouTobe, но если есть возможность, не могли бы мне подсказать, конфигурация вашего сервера осталась та же?, я уже давно собрал себе сервер на системе TrueNAS Core но длительное время так и не могу рационально распределить все диски и флешки (то бишь: Что пустить под Cache, что пустить под Logs и т.д. ), прекрасно понимаю, что для дома наверное половины и не надо, но это вот мой личный как-бы так сказать заскок, хочется из мелочи выжать максимум.
В наличии имею:
HDD 3,5 - 3Tb x1 шт. (Используется как MEDIA для хранения фильмов и музыки) Model - ST3000DM001-1ER166
HDD 3,5 - 1Tb x2 шт. (RAID - Mirror) - Model - GB1000EAMYC (Использую для важных файлов)
HDD 2,5 - 1Tb x2 шт. (RAID - Mirror) - Model - ST1000LM049-2GH172 (Использую под облако NextCloud и виртуальные машины)
SSD 2.5 - 60Gb x1 шт. - Model - KINGSTON_SV300S37A60G (Не могу определится, под какие нужды его можно использовать)
SSD 2.5 - 120Gb x1 шт. (Используется для установки приложений Jails) - Model - PNY_CS900_120GB_SSD
USB SSD - 32Gb x1 шт. (Пока что используется как загрузочный носитель)
USB SSD - 60Gb x1 шт. (Использую так же как и вы, для хранения всех настроек)
В перспективе есть план доукомплектовать еще 4-мя SSD или HDD но не знаю пот какие нужды, возможно вы что посоветуете, куда-то добавить или в качестве чего-то установить (Log, Cache или что-то в этом роде)
Буду очень благодарен за любую подскажу, даже если будет информация не от автора видео.
А почему smb? На Unix нормально работает NFS. Интересно было посмотреть на скорости при копировании по SSH.
По SSH будет довольно грустно: один поток, шифрование софтовое, работа в юзерспейсе.
@@Igor-rg8xv шифрование SSH можно отключить для теста.
@@ЕвгенийЧередов-у9м тогда зачем SSH? :) Лучше уж тогда NFS поднять. Ну, либо вообще через netcat (nc) копировать. Вообще, на самом деле, 10Г довольно сложно загрузить передачей одного файла. Там надо серьёзно тюнить сетевую подсистему.
спасибо за интересный материал! себе собрал попроще уже более 10 лет назад. сейчас ищу замену материнки, поэтому штудирую материалы, где только найду :)
подскажите, пожалуйста, что за вентилятор установлен на raid-контроллер ?
у меня вот такой LSI 9265-8i, греется до 60-62 градусов. хочется охладить еще сильнее.
Это Noctua 40x40 мм
@@rnadyrshin а как он закреплен на радиаторе контроллера?
@@rnadyrshin нашел комплект, а там целый набор для монтажа. еще раз спасибо!
Доброго дня вам. Я не нашел видео у вас, в котором вы перешли с можордомо на Хоум ассистент. Ранее вы говорили что Хоум ассистент убивает карты памяти, соответственно и SSD тоже умрёт быстро. Какие основные причины были перейти на другую платформу умного дома? Каковы результаты? И можно ли использовать телеграмм бот на Хоум ассистенте?
Я перешел на Home Assistant потому что он шустрее, современнее и главное - надежнее, чем majordomo, который частенько ломался после очередного обновления. В Home Assistant еще не до конца разобрался со сложными сценариями автоматизации, всё простое более менее хорошо работает. Про использование телеграм-бота не знаю, наверняка можно.
Убивает карты любая система умного дома, которая часто пишет на карту. SSD намного надежнее при частой записи, потому что у SSD есть умный контроллер, который реализует алгоритмы выравнивания износа.
@@rnadyrshin спасибо вам за ответ. Можете ли снять обзор на вашу нынешнюю систему умного дома? Стабильно ли работал Хоум ассистент на raspberry?
Ну и дополним слова выше, что в ссд и ram используются кристаллы прошедшие отбор и полностью исправны (или с малым коэффициентом бракованных банок) во флешки же и прочие вещи уходят кристаллы брака. Полную инфу об этом можно посмотреть на канале PRO Hi-Tech.
В 2022 уже есть смысл PiKVM городить вместо BMC.
В сети опубликован однострочник генерирующий халявные ключи Supermicro из мака BMC.
Для портов на передней панели есть переходничек с USB 3.0 на USB 2.0, на том же ebay
Есть, но внутренние порты USB 3.0 уже заняты
17:30 IPMI не реализует видеоадаптер, а берет уже обработанный сигнал с видеочипа.
И не понятно почему тест проходил на SMB, ведь TrueNAS поддерживает родной маковский протокол шаринга. Если уж тестировать Microsoft протоколы, то хотя бы с одной стороны был Windows
Разве мак не перешёл на самбу? Давно же уже они отказались от проприетарщины
TrueNAS то поддерживает, а вот Apple от него отказался в пользу SMB
10:03 обратите внимание на Нижний синий правый порт его через переходник вроде можно до тайп си подтянуть (кстати переходники дешёвые в три ёмкости две массы) на 10 гб тоже.
На 10 гб тоже есть переходники и на них по солиднее обвязка
Этот разъем же уже задействован для флешки и SSD
Подскажите пожалуйста, у вас с Мака по протоколу самба хождение по папкам быстрое идет ? И поиск файлов к примеру? У меня с винды все летает, а с мак ужасно тупит. Поиском вообще пользоваться не вариант.
А как там с ребилдом массива?
Сколько это времени может занять?
Я в прошлых роликах писал, что ceph будет более лучшим выбором, так как там в целом система строить хранилище по каждому диску.
И система может работать и при сбойных дисках.
А в raid5 проблема с ребилдом, время много проходит пока массив соберётся. Все это время у тебя нет возможности использовать систему.
Занять может много. Зависит от скорости, типа и объема дисков. В моем случае примерно будет меньше суток если мертвый диск буду менять на CMR диск и дня 3-4 если на SMR диск.
Не знаю как в RAID5, но в ZFS в конфигурациях RAID-Z при сбое диска и во время ребилда (resilver) пула данные доступны. Просто скорость доступа снижается из-за занятости дисков, но в truenas можно настроить приоритет и расписание ребилда
Да что вы говорите? Каким таким образом данные в raid 5 недоступны при ребилде?
такой ты рукастый и продуманный!!! но как ты наносишь термопасту - руки оторвать. столько пузырьков!!! такая похабщина)))) в центр проца делаешь аккуратный холмик, прижимаешь кулером и эта шляпа без полостей начинает выдавливаться по всей соприкасающейся поверхности. что сложного?
Надо было вас звать.
Звездец конечно, как даже под вентилятором чипы контроллера греются. И это при софтовом рейде. Думалось, что можно прилепить радиатор побольше и пассивом обойтись.
Также, если возможно, просветите с следующем ролике остановку шпинеделй. При активной самбе, там постоянно какая-то сетевая активность будет от бродкастов клиентов. Интересно, насколько это работает. Если захочется делать бэкапы с нескольких домашних машин ночью. (ps: количество раскруток шпинделя за день можно увидеть в смарте).
Я отрубаю шары после того, как закончил ими пользоваться, поэтому активность по SMB останавливается и диски засыпают.
Про радиатор на контроллере уже говорил, что родной радиатор крепко приклеен, отрывать - слишком большой риск
@@rnadyrshin кстати об этом (чот не подумал в прошлом ролике), термоклей, которым приклеены эти радики, на то и термоклей. При нагревании размечается и можно оторвать Радик, почти безболезненно. Главное не торопиться и постепенно. Я бы сделал себе так, будь у меня такая ситуация. Хотя, вообще у меня иной и более геморный принцип. Я в таких случаях перепиливаю охлад. Типо кастом делаю с прямым отводом за пределы корпуса. Эффективность крайне высокая, но не для каждого. Просто рассчитать нужный Радик, выпилить на фрезерном, палирнуть, все в корпус и выдув наружу. Благо сейчас масса разновыдных и по размеру и по толщине кулеров и тубинок от ноутов. (Которые так же можно кастомизировать 😅😅😅)
Греть я пробовал, но всё безуспешно
@@rnadyrshin а как сильно? Там 100+ градусов можно спокойно греть.
Автор, если для вас так важна коррекция ошибок и сохранность данных, диски должны быть с интерфейсом SAS. SAS - имеет коррекцию ошибок.
Да. Коррекцию ошибок при передаче по SAS. Как это должно помочь?
@@rnadyrshin Коррекция ошибок должна быть на всех этапах от локальной сети до записи на пластины диска, если грубо то их 3 этапа, 1. сетевая карта 2. Процессор-ОЗУ-контроллер дисков. 3. интерфейс диска - сам диск. Если накопителей более 5-ти и они объединяются в массивы нужен SAS. И вот почему: 1. Управление питанием, диски SAS стартуют поочерёдно и не создают огромных пусковых токов. 2. Есть коррекция ошибок, что гарантирует исключение записи битых данных на диск. 3. Если один из дисков начал умирать, то он не будет тормозить весь массив. 4. При перестроении массива, SATA не корректирует ошибки из -за чего массив RAID5 может умереть не успев перестроится(это частая причина потери данных на таких типах RAID). И ещё много чего. Так же ZFS проводит переодически SCRUB дисков, для этой операции очень желательна ECC в ОЗУ и на уровне интерфейса дисков, что бы со временем не получить битые данные на исправных дисках. Почитайте спецификацию SAS и SATA, это поможет разобраться в вопросе. Удачи.
Plex периодически сканирует библиотеки так, что расмещение его на отдельном ssd не решает проблему пробуждения дисков, если библиотеки находятся на этих дисках
Да, сканирует, если это включено в настройках. А по умолчанию выключено
Видео интерестное спасибо за контент, но как же все это дорого для того кто чисто для себя использует сервак по типу Sinology
У TrueNas усть версия Scale, со встроенным kubernetes (кажется k3s а не k8s). Если не хочется возиться с kubernetes, можно одним скриптом в автозагрузке, превратить kubernetes в Docker Compouse. После чего, разворачивать там чего угодно. К слову, TrueNas Scale не на FreeBsd, а на Debian.
Круто конечно, но меня в принципе устраивает текущая реализация джейлов в TrueNAS Core
@@rnadyrshin Если бы можно было без гемороя свои контейнеры деплоить, я не стал бы извращаться. Среди имеющихся у truenas контейнеров, нет тех что мне нужны. а с докером, можно использовать разнообразные сервисы, и без необходимости в дополнительных мощностях.
Скорость 400мбайт на 10 дисках это что-то запредельное. Может просто купи hp smart array p420+ ты удивишься на сколько он быстрее
16:40 перепрошить BIOS бесплатно из под IPMI не получится Supermicro преусмотрела и продает ключ для вашего MAC/SN платы, но можно в интернетах найти скрипт который генерирует этот ключ и вроде бы до сих пор актуален
50:02 или NFS?
Вообще эта плата под рабочим станции, а не серверная. Звук - отличительный признак.
Загрузочные флешки для FreeNas деградируют быстро (как расходник), может рассмотрите ещё один usb ssd под систему?
Пока не планирую. По идее для частой записи я использую системный датасет на SSD и флешка не должна страдать. Но если умрет - поменяю, это не долго
Сколько оперативки сейчас используете и какое общее дисковое пространство сейчас у вас?
ОЗУ 32 Гб, хранилище - 1 пул в режиме RAIDZ2 полезным объемом 32 Тб
@@rnadyrshin получается на 1Тб пространства hhd требуется 1Гб ОЗУ?
Ну наконец-то на супермикру перешли. Купите intel s3700 или s3500.на 128-256гб бу под систему и прочее, абсолютно неубиваемые серверные ссд, хватит на всю жизнь.
Vga из-за kvm, он простой как сапог
Вряд ли скорость СМБ влияет. Да, она жрет конечно, но не настолько. На скоростях гигабита - 100% никак, причем я тоже с мака на домашний сервер постоянно копирую. У меня не ТруНАС, сервер на аппаратном RAID-5 8 дисков, WinSrv 2012. Чтение с массива - под 600 гбайт в сек на сервере (и то упор был в ССД наверное, массив может больше), запись поменьше. Т.е. была бы у меня сеть 10гбит - проверил бы, но думаю упор идет в скорость массива. Пора мне тоже покупать сетевухи на 10гбит....
интересно как себя покажет на wifi. с ноутом быть привязанным к проводному адаптеру как-то не айс
Здравствуйте, а зачем Вы переходите на macOS? Чисто из-за софта или есть какие-то специфические причины? Спасибо, смотрю каждый ваш ролик, прекрасный монтаж, полезная инфа)
Нравится видеомонтажный софт Final Cut Pro, ну и в целом стабильность и красота ОС
плата проработала более полугода прекрасно, и решил поменять ее потому что кто то что то написал на форуме. а если бы не прочитал и не узнал бы, то сто процентов пользовался бы платой и дальше без проблем
С платой бы проблем не было, а с архивными данными - были бы
@@rnadyrshin понял, зря быканул.🥺
1) Меня одного смущает просажанная линия 12v при таком низком энергопотреблении (видно в мониторинге через IPMI) ?
2.1) Понять что является слабым местом - SMB или массив очень просто! Заходишь в web gui -> Командный интерпретатор -> копируешь с одного массива на другой данные, а скорость смотришь через Отчёты (в соседнем окне)
2.2) Чисто для справки у меня в пике при копировании с забитого массива на пустой было 1 с хвостиком Гигабайт в секунду оба массивы это шесть 10 tb дисков в RAID-Z (он же по сути RAID 5)
2.3) Так же ты забыл что ZFS ЛЮБЫЕ операции с данными проводит через оперативную паять и далеко не сразу ее очищает, так что данные нужны разные для копирования с сервера и загрузки на сервер
3) на iSCSI никакой оперативной памяти не напасёшься этот протокол ест ее как не в себя !!!
3.1) и да, данные которые лежат на сервере в iSCSI LUN доступны только через этот протокол и не как иначе, что добавляет лишнюю головную боль при определенных сценариях!
Где купить расширить в корпус для жёстких или где купить такой корпус?
Во второй части я решал эту задачу
Прошу подсказать, как настроить HA для работы на TrueNas с USB стиком. Ничего не получается, а Вы говорите, что гуглится за 3 минуты...
Интересно, есть ли поддержка Intel Optane на такой материнке? Можно удобно сделать с ним кэш и не бояться внезапных выключений сервера во время его работы
Оптан работает по протоколу нвме как обычный жёсткий диск, "поддержка" нужна только при использовании его в роли умного кэша.
@@imperse, а возможно этой технологией "Intel Optane" задействовать обычный SSD малого объема под кэш или ресурса надолго не хватит?
@@Svejiy_Tihiy_Veter если про функцию кэширования hdd с помощью ssd в потребительских чипсетах и драйверах под них то надо смотреть конкретные чипсеты и драйверы. Вообще подобное можно реализовать разными способами, но редко когда в этом есть смысл.
Хотел было спросить "зачем память с ЕСС". Ниже в комментариях прочитал, что это полезно для софтового RAID. У меня есть домашний QNAP на 6 дисков. В нем память - обычный SODIMM. NAS раз в неделю запускает скраббинг. Ошибок не находит. Вот теперь думаю, переживать по поводу "исправности данных" или нет.
В данном случае тут связка с ZFS. Память с ECC повышает надёжность.
Да есс память в любом повышает надёжность. Не просто так же этого нет в десктопах..... Спец сегмент, все дела...
@@leatherandsilver350 скорее жадность и производителей и покупателей. Там все таки требуется доп чип на памяти и доп линии на плате, так что поддержка ЕСС обходится чуть дороже обычной, в итоге потребители не горят желанием переплачивать пару процентов за то чего они не понимают, а производителям проще продать её бизнесу за овер 200% чем пытаться объяснять обычным людям зачем им платить больше за ту же память что у соседа но без ECC. По хорошему ECC есть смысл использовать везде.
Жаль конечно что все с thunderbolt до сих пор очень дорогое. Такая цена за сетвуху дичь
Не заметил в видео RAID был?
Во второй серии про него
трэк Janic - Let You Go?
Что за корпус?
Блин, заказал себе HUANANZHI X99 F8D, в описании написано что поддерживает ECC REG оперативку, теперь интересно работает или эта функция вообще
Работает. А на его плату нужно было просто более старый биос зашить, в новых биосах поддержка ECC отсутствует.
Китайцы пишут ECC REG, чтобы обозначить тип памяти, с которым плата будет работать. Так что 50 на 50
@@rnadyrshin блин .. это изначально серверная платформа. Так что ecc reg память поддерживается 100%. И функция эта на данной плате работает. У меня есть и f8d, и t8d. А на односокетных бывают варианты, где биос собран на базе десктопного биоса, там может не работать. По факту, в более свежих биосах китайских односокетных плат нет поддержки ecc именно по этой причине, стоит подбирать старые биосы.
А как проверить, работает ли четность?
С другой стороны уже два года на фрилансе сижу. Ошибок, связанных с памятью не было. Только была проблема с глючным диском(
@@aciddic79 wmic memphysical get memoryerrorcorrection если 3, значит нет, на сервере с ECC у меня возвращает 6 четыре раза (2 проца, в каждом два контроллера). Либо в аида64 посмотреть.
IPMI реализован на Java. а с Java браузеры работают плохо. надо и в браузере добавлять узлы в надежные и в самой джаве разрешать узлы. плюс хром вообще по умолчанию не поддерживает уже Java. IE или Edge рулит. тоже постоянно испытываю проблемы с доступом к вебке админки серверов.
Привет! Подскажи, пожалуйста, а что это за скрипт на остановку HDD в бездействии? Как он называется, где его можно найти? Спасибо.
Вот он: github.com/ngandrass/truenas-spindown-timer
@@rnadyrshin Спасибо!