標簽[hadoopy] - 堆棧內存溢出

[英]Install hadoopy in google composer

我正在使用google composer 。我們如何在google composer environment Composer google composer environment安裝hadoopy 。此頁面包含在Linux機器上安裝 hadoopy的步驟 Github克 ...

[英]hadoopy.launch_frozen Cannot execute script

我正在運行hadoopy.launch_frozen命令。當我運行腳本時，出現此錯誤： ...

[英]Hadoopy won't get past mkdir

我目前正在開發一個使用hadoop（2.7.0）的項目，我已配置了兩個節點的集群並可以正常工作（大部分情況下）。我可以手動運行mapper / reduce作業，而不會遇到任何問題。但是，當我嘗試使用hadoopy開始工作時，出現錯誤。調試錯誤后，我看到它是由hadoopy執行的以下 ...

[英]Mapreduce failures log Hadoop

我在哪里可以找到包含有關mapreduce作業失敗信息的日志？如果出了問題，我將收到狀態為1的錯誤出口。我正在運行Hadoop 2.4.1，並將Hadoopy用於mapreduce作業。 ...

[英]How to save file in hadoop with python

我正在嘗試使用python 2.7將文件保存在Hadoop中。我在互聯網上搜索。我有一些代碼可以將文件保存在Hadoop中，但是在保存時會占用整個文件夾（文件夾中的所有文件都保存在Hadoop中）。但是我需要保存一個特定的文件。以下是在Hadoop中保存文件夾的鏈接： htt ...

[英]Data Node not started

我在我的盒子中配置了hadoop設置並使用示例程序一切正常並且運行良好所有守護進程也處於運行狀態。第二天早上Data節點沒有運行。 ...

[英]How are keys, values, and records delimited in Hadoop streaming, typedbytes, and/or rawbytes

據我所知，Hadoop流中的文本記錄由換行符分隔，並且鍵和值之間存在可配置的分隔符（默認為tab）。 1）rawbytes格式的結構表明不需要記錄或鍵/值分隔符，但有人可以確認是這種情況嗎？ 2）在typedbytes格式中，鍵和值是如何分隔的，以及記錄是如何分隔的？ 3）另外 ...

[英]apache Hadoop-2.0.0 aplha version installation in full cluster using fedration

我已經成功安裝了hadoop穩定版。但是在安裝hadoop -2.0.0版本時感到困惑。我想在兩個節點上都使用聯邦在兩個計算機上安裝hadoop-2.0.0-alpha。 rsi-1，rsi-2是主機名。為實施聯盟，以下屬性的值應該是什么。這兩台機器也都用於數據節點。 ...

[英]how to access and manipulate pdf file's datas in Hadoop?

我想使用hadoop閱讀PDF文件，怎么可能？我只知道hadoop只能處理txt文件，因此無論如何都可以將PDF文件解析為txt。給我一些建議。 ...

[英]Cython & Hadoopy compiling error.. any ideas on a fix?

我正在嘗試運行Hadoopy ，但在OS X上遇到編譯錯誤：我的$PATH有/Developer/usr/bin ，我在OS X Lion 10.7上運行最新版本的XCode。 Cython是通過easy_install安裝的。全輸出： ...