更進一步
VMware 提供培訓和認證,以加速您的進步。
瞭解更多我們很高興地宣佈 Spring for Apache Hadoop 2.0 M5 里程碑版本釋出。 我們正在接近候選版本,因此現在是強調此 2.0 版本中的新增功能以及它與 1.0 版本的比較的好時機。
Spring for Apache Hadoop 1.0 主要針對將 HDFS 和 MapReduce 與 MapReduce v1 或 MapReduce v2 (YARN) 一起使用。 預設發行版是 Apache Hadoop 1.2.1,併為其他發行版提供額外的“風格”:Hadoop 2.2.0、Pivotal HD 1.1、Cloudera CDH4 MR1 或 MR2 YARN 和 Hortonworks HDP 1.3。
Spring for Apache Hadoop 2.0 的主要重點是在 HDFS 和 MapReduce 支援方面繼續提供改進之外,新增 YARN 應用程式開發支援。 未來 2.0 版本的預設發行版是 Apache Hadoop 2.2.0。
我們將繼續在 Spring IO 里程碑倉庫中提供具有各自傳遞依賴項的版本特定工件
Spring for Apache Hadoop 2.0 版本中最重要的增強功能
您可以在YARN 示例中看到許多這些新的 YARN 功能的使用
我們還添加了一個 spring-data-hadoop-store 子專案,以提供更好的支援,使用 DataWriter 和 DataReader 實現將資料寫入 HDFS,支援文字檔案和 SequenceFiles 等格式,無論是否壓縮。 這個新的子專案還與Kite SDK的 Dataset 支援整合。
有關更多專案特定資訊,請參見專案頁面。