一般首發Hadoop / Spark fiware-cosmos問題

Question

我有一些關於軟件宇宙的一般性問題，如果它們是基本的道歉但我試圖理解宇宙的架構和使用。

我看到你打算將Apache Spark集成到Cosmos中？ 你有路線圖或日期嗎？ 如果我現在想要使用Spark會發生什么？

可以使用哪些Hadoop服務來源？ 我想我讀過Cosmos支持Cloudera CDH服務和原始Hadoop服務器服務？ 那么HortonWorks或MapR呢？

我知道非標准文件系統可以與Hadoop一起使用，例如MapR-FS，這樣的選項可以與Cosmos一起使用嗎？

我還讀到Cosmos“坐在”軟件之上，因此可以使用Hadoop作為服務（HaaS），並使用開放堆棧生成Hadoop集群？ 但是，我看到人們指的是共享的軟件雲？ fiware是否作為遠程雲運行？ 可以在客戶站點上使用本地雲嗎？

宇宙是fiware.org上唯一的Apache Hadoop / Spark解決方案嗎？

最后，如果Cloudera CDH可以與Cosmos一起使用，那么Cloudera集群管理器如何適應混合？ 還能用嗎？

對不起，所有的問題:)

Answer 1

Cosmos是FIWARE實驗室中GE數據全球實例的名稱。 它是已部署在雲中的共享Hadoop實例，可供FIWARE用戶使用。

實際上，有兩個實例：“舊”實例，服務於Hadoop堆棧的舊版本，並且是cosmos.lab.fiware.org的入口點。 而“新”的是一對Hadoop集群，一個用於數據存儲，另一個用於數據分析; 入口點是storing.cosmos.lab.fiware.org和computing.cosmos.lab.fiware.org 。

當然，您可以在FIWARE雲（或任何其他雲，例如Amazon）中自行部署任何其他Hadoop（甚至Spark）實例。

關於Spark，因為我們最初計划在FIWARE Lab中部署它（這就是它出現在路線圖中的原因），現在還不清楚它是否會被部署。