下面哪個程序負責hdfs數據存儲？負責“HDFS”和“數據存儲”的程序是HDFS。Hadoop分布式文件系統(tǒng)（HDFS）是一種適合在普通硬件上運行的分布式文件系統(tǒng)。它與現有的分布式文件系統(tǒng)有很多共同點

下面哪個程序負責hdfs數據存儲？

負責“HDFS”和“數據存儲”的程序是HDFS。Hadoop分布式文件系統(tǒng)（HDFS）是一種適合在普通硬件上運行的分布式文件系統(tǒng)。它與現有的分布式文件系統(tǒng)有很多共同點。但同時，它又不同于其他分布式文件系統(tǒng)。HDFS是一個高度容錯的系統(tǒng)，適合部署在廉價機器上。在HDFS上運行的程序有很多數據集。典型的HDFS文件大小是GB到TB。因此，HDFS被調整為支持大文件。它還應該以高帶寬支持集群中的數億個節(jié)點。大多數HDFS程序需要寫一次，讀很多次。一旦創(chuàng)建、寫入和關閉了文件，就不需要對其進行修改。這種假設簡化了數據一致性問題，使高吞吐量數據訪問成為可能。一個map-reduce程序或一個web爬蟲程序可以很好地適應這個模型。

HDFS能夠存儲哪幾種文件格式？

看你保存什么視頻，超過100兆的大文件可以考慮HDFS。對于大量100KB或幾MB的小文件，例如，如果您保存原始HLS格式，元數據壓力太大，HDFS不適合，TFs不支持指定文件名（保存時它會為您分配一個），您可能需要自己維護文件命名空間。另一個選項是一致散列、CEPH或swift。CEPH是用C語言開發(fā)的，很難維護。Swift是用Python編寫的，openstack的Python代碼也非常風騷。一般來說，小文件的開源解決方案對于基于TFs的二次開發(fā)是比較可靠的。此外，如果要構建流媒體服務，還需要考慮流媒體服務器和存儲之間的連接。當然，HLS是最方便的。對于MP4，一些服務器軟件或nginx插件只支持訪問本地文件。是否可以優(yōu)雅地裝載到本地文件系統(tǒng)也是一個考慮因素。