Spring for Apache Hadoop 2.0 M5 釋出

釋出 | Thomas Risberg | 2014 年 2 月 6 日 | ...

我們很高興地宣佈 Spring for Apache Hadoop 2.0 M5 里程碑版本釋出。 我們正在接近候選版本,因此現在是強調此 2.0 版本中的新增功能以及它與 1.0 版本的比較的好時機。

Spring for Apache Hadoop 1.0 主要針對將 HDFS 和 MapReduce 與 MapReduce v1 或 MapReduce v2 (YARN) 一起使用。 預設發行版是 Apache Hadoop 1.2.1,併為其他發行版提供額外的“風格”:Hadoop 2.2.0、Pivotal HD 1.1、Cloudera CDH4 MR1 或 MR2 YARN 和 Hortonworks HDP 1.3。

Spring for Apache Hadoop 2.0 的主要重點是在 HDFS 和 MapReduce 支援方面繼續提供改進之外,新增 YARN 應用程式開發支援。 未來 2.0 版本的預設發行版是 Apache Hadoop 2.2.0。

我們將繼續在 Spring IO 里程碑倉庫中提供具有各自傳遞依賴項的版本特定工件

  • 2.0.0.M5(預設 - Apache Hadoop 穩定版 2.2.0)
  • 2.0.0.M5-hadoop12 (Apache Hadoop 穩定版 1.2.1)
  • 2.0.0.M5-phd1 (Pivotal HD 1.1)
  • 2.0.0.M5-cdh4 (Cloudera CDH4 MR1)
  • 2.0.0.M5-cdh5 (Cloudera CDH5 YARN beta)
  • 2.0.0.M5-hdp20 (Hortonworks HDP 2.0)

Spring for Apache Hadoop 2.0 版本中最重要的增強功能

  • YARN 功能的支援在新 spring-yarn 子專案中提供。 spring-yarn 框架使您可以更輕鬆地開發可以部署到 Hadoop v2 上使用 YARN 執行的基於 Spring 的應用程式。
  • 我們還將 YARN 支援與 Spring Boot 整合,以便您可以在 YARN 上部署 Spring Boot 應用程式。 我們將透過一篇部落格文章來更詳細地解釋此功能。
  • Spring Boot 推廣基於註釋的程式設計模型,並且我們為 Hadoop YARN 功能添加了基於註釋的配置。

您可以在YARN 示例中看到許多這些新的 YARN 功能的使用

我們還添加了一個 spring-data-hadoop-store 子專案,以提供更好的支援,使用 DataWriter 和 DataReader 實現將資料寫入 HDFS,支援文字檔案和 SequenceFiles 等格式,無論是否壓縮。 這個新的子專案還與Kite SDK的 Dataset 支援整合。

有關更多專案特定資訊,請參見專案頁面

獲取 Spring 新聞通訊

透過 Spring 新聞通訊保持聯絡

訂閱

更進一步

VMware 提供培訓和認證,以加速您的進步。

瞭解更多

獲得支援

Tanzu Spring 在一個簡單的訂閱中提供對 OpenJDK™、Spring 和 Apache Tomcat® 的支援和二進位制檔案。

瞭解更多

即將舉行的活動

檢視 Spring 社群中所有即將舉行的活動。

檢視全部