19:45 Неверное суждение мы можем зайти на DataNode и посмотреть на блок в котором хранится часть файла и посмотреть содержимое, если это текстовый файл
Насчет скорости чтения не верно: скорость чтения SSD намного больше чем HDD, вне зависимости от расположения блоков. Если рассматривать накопитель M2, то там вообще скорости чтения ГБ. Сейчас уже нет практически проблемы перезаписей блоков у SSD Если упадёт стойка, то вероятнее всего HDD уже выйдут из строя, SSD же более устойчив к физическим повреждениям. Самая главная разница - это внушительная цена SSD, поэтому и используют до сих пор HDD P.S. Сейчас уже есть статьи, где рассказываются, что использование HDD обходятся дороже чем SSD
19:45 Неверное суждение мы можем зайти на DataNode и посмотреть на блок в котором хранится часть файла и посмотреть содержимое, если это текстовый файл
Ну мы говорим про parquet и аналогичные форматы. В текстовом формате скорее всего да. Но это странно держать в хадупе данные в таком виде
Спасибо за прекрасный видос
благодарю!
Подскажите, пожалуйста, где почитать информацию про hdfs блок, что он может хранить чуть больше (до 1%) чем задан настройками. На 8:30 видео.
@@piranevskiy это в документашке было.. Там не подскажу точную страницу.
Спасибо
Насчет скорости чтения не верно: скорость чтения SSD намного больше чем HDD, вне зависимости от расположения блоков. Если рассматривать накопитель M2, то там вообще скорости чтения ГБ. Сейчас уже нет практически проблемы перезаписей блоков у SSD
Если упадёт стойка, то вероятнее всего HDD уже выйдут из строя, SSD же более устойчив к физическим повреждениям.
Самая главная разница - это внушительная цена SSD, поэтому и используют до сих пор HDD
P.S. Сейчас уже есть статьи, где рассказываются, что использование HDD обходятся дороже чем SSD
хз, все, что я читал про HDD - это то, что данные с них как раз легче восстановить, чем на SSD. Ну а то, что HDD дешевле это сто процентов