堆棧內存溢出
cost 292 ms
如何從Spark 1.6連接到BigSQL

[英]How to connect from spark 1.6 to bigsql

我是Big Insights的新手。 我正在研究Cloud 4.1，Ambari 2.2.0和Spark 1.6.1上的BigInsigths，無論連接是在scala還是python中都沒有關系，但是我需要使用spark進行數據處理，然后將其持久保存在BigSql中。 這可能嗎？ 提前致謝 ...

使用水槽的Bigdata Live數據流

[英]Bigdata Live data streaming using flume

我正在嘗試使用水槽分析Twitter數據，我在BigInsights中使用水槽從Twitter獲取了文件，但我收到的數據是壓縮的Avro模式，無法讀取，任何人都可以告訴我一種方法，以便將該文件轉換為JSON（可讀）為了對此做一些分析。 還是有什么辦法使我收到的數據已經是JSON（可讀）格式 ...

如何將數據幀中的數據寫入 HDFS 中的單個 .parquet 文件（單個文件中的數據和元數據）？

[英]How to write data in the dataframe into single .parquet file(both data & metadata in single file) in HDFS?

如何將數據幀中的數據寫入 HDFS 中的單個 .parquet 文件（單個文件中的數據和元數據）？ df.rdd.getNumPartitions() - 它有 1 個分區 1 如果我使用上述命令在 HDFS 中創建 parquet 文件，它會在HDFS中創建目錄"payloads. ...

測試 BigInsights + Cloud Storage（如何在這兩個組件上使用 nodejs）

[英]Testing BigInsights + Cloud Storage (How to use nodejs over this two components)

嗨，自過去 2 天以來，我一直在嘗試在 bluemix 上測試這兩個組件，如果這兩個組件在 NodeJs 上都有一些健壯的庫，我現在需要測試，因為我一直在嘗試我在 npm 上找到的那些，並在 Bluemix 上發布了一個功能Cloud Storage 作為 Nodejs SDK，我什至連接到 Clo ...

打開基於REST的Ambari Services之后，以重新放置方式顯示的所有屬性的描述

[英]Description of all the attributes that are displayed in respose after opening REST based Ambari Services

是否有任何鏈接或參考資料提供了有關Ambari Services所有屬性的描述？ 當我檢查來自http://.....:8080/api/v1/clusters/....../hosts/...../host_components/HIVE_SERVER的響應時，會看到許多屬性，例如“ c ...

安裝BigInsights 4.2

[英]Installation BigInsights 4.2

我想問你關於在centos 7上安裝BigInsights 4.2的問題。據我所知，現在只能通過kitematic或dockerhub進行安裝，但kitematic只適用於widnows或mac。 如果我想通過dockerhub安裝，我必須下載kitematic，它是nto avaliable ...

Spark Hive報告ClassNotFoundException：com.ibm.biginsights.bigsql.sync.BIEventListener

[英]Spark Hive reporting ClassNotFoundException: com.ibm.biginsights.bigsql.sync.BIEventListener

我試圖在訪問Hive表的Cloud 4.2 Enterprise的BigInsights上運行pyspark腳本。 首先，我創建配置單元表： 然后創建一個簡單的pyspark腳本： 我嘗試執行： 但是，我遇到了錯誤： 另請參閱與該問題有關的先前錯誤： ...

Spark Hive 報告 pyspark.sql.utils.AnalysisException: u'Table not found: XXX' 在紗線集群上運行時

[英]Spark Hive reporting pyspark.sql.utils.AnalysisException: u'Table not found: XXX' when run on yarn cluster

我正在嘗試在訪問 Hive 表的 Cloud 4.2 Enterprise 上的 BigInsights 上運行 pyspark 腳本。 首先我創建蜂巢表： 然后我創建了一個簡單的 pyspark 腳本： 我嘗試執行： 但是，我遇到了錯誤： 如果我獨立運行 spark-submit ...

如何在Cloud Enterprise的BigInsights上安裝用於Spark的python模塊

[英]How can I install python modules for spark on BigInsights on cloud enterprise

我需要安裝python模塊（例如nltk），以便可以在BigInsights 4.2 Enterprise上在紗線上產生火花。 如何安裝python模塊，例如使用pip？ 請注意，當前的python版本是2.6.6，並且無法在雲上的BigInsights上使用root訪問。 ...

在IBM BigInsights中重新啟動Namenode的過程（已啟用GPFS-HDFS的透明層）

[英]Process to restart Namenode in IBM BigInsights (enabled GPFS - a transparency layer of HDFS)

我正在使用Apache Ambari安裝IBM Hadoop發行版（BigInsights），目前已將GPFS（通用並行文件系統）啟用為HDFS的透明層。 在Ambari上，我們已在HDFS上啟用了維護模式，並且無法通過Ambari控制台對core / hdfs-site.xml進行任何更改。 ...

如何在IBM Bluemix BigInsights Apache Hadoop中安裝Apache Drill和Apache Hue之類的組件

[英]How do I install components such as Apache Drill and Apache Hue in IBM Bluemix BigInsights Apache Hadoop

我是IBM Bluemix平台的新手，正在探索其BigInsights服務。 我可以看到預先配置的組件，例如Pig Hive Hbase和其他組件。 但是我想知道如何安裝Drill之類的服務或說默認情況下未配置的Hue。 ssh對集群節點的訪問允許在沒有sudo權限的情況下進行受限訪問，以 ...

您如何在BlueMix上修改IOP群集上“ BigInsights基本服務計划”的配置？

[英]How do you modify configurations on IOP cluster for “BigInsights basic service plan” on BlueMix?

我已經在Bluemix上應用了“ BigInsights基本服務計划”，並創建了一個集群。 我想為HBase添加一個自定義協處理器。 但是，我發現無法修改Ambari Admin UI中的配置，因此無法添加協處理器。 所以我的問題是如何修改配置並為HBase添加自定義協處理器？ ...

如何在BlueMix上為“ BigInsights基本服務計划”向IOP集群添加定制服務？

[英]How to add a custom service into IOP cluster for “BigInsights basic service plan” on BlueMix?

我已經在Bluemix上應用了“ BigInsights基本服務計划”，並創建了一個集群。 我想將自定義服務添加到群集中。 但是，我發現Linux節點上沒有root或sudo權限，無法將我的服務映像放置到Ambari資源堆棧。 另外，Ambari管理界面中沒有“操作-> +添加服務” ...


排序:
質量:
 
粵ICP備18138465號  © 2020-2024 STACKOOM.COM