cost 430 ms
Google Colab 上的 HBase、HappyBase - 讀取作品,插入失敗

[英]HBase, HappyBase on Google Colab - Read works, Insert fails

我已經在 Google Colab 中安裝了 Hadoop、Hbase 並嘗試創建表,然后在那里讀取並插入記錄。 HBase shell 命令正在工作並使用它我創建了一個名為“cars2”的小表,可以在那里讀取數據。 但是我想從 Python 訪問 HBase 並安裝了 HappyBase 然后我 ...

如何使用單個 API 調用掃描 HappyBase 中的行集?

[英]How can I scan over sets of rows in HappyBase with a single API call?

我想掃描一個大表以獲取 ID 列表(或 ID 前綴)(使用 Python HappyBase)。 有沒有辦法在服務器端做到這一點? 也就是說,我想在一個 API 調用中發送要掃描的開始/停止行列表,而不是執行一長串 API 調用。 這是一個例子。 對於 my_big_tables 鍵: 在一個查詢 ...

將數據上傳到Apache Hbase時出現管道破裂錯誤

[英]Broken Pipe error when uploading data to Apache Hbase

我目前正在嘗試將大型CSV加載到Apache hbase中。 CSV為50,000列寬和15,000行。 CSV的值只是整數。 Hbase集群在AWS EMR上運行,具有足夠的內存(244GB)和計算能力(每個32核,4個節點)。 我正在嘗試使用以下python腳本將數據加載到數 ...

無法在Python中使用Happybase創建簡單表

[英]Cannot create simple table using Happybase in Python

我正在嘗試使用Happybase創建表。 首先,我輸入以下命令以運行Hbase和Thrift: 運行該命令后,我將打開Python的命令提示符並鍵入以下內容: 但是,當我嘗試創建表時: 我收到以下我不明白的錯誤。 ...

無法通過 python happybase - HDP 3 在 Hbase 中上傳大小超過 10MB 的 pdf 文件

[英]unable to upload pdf files of size more than 10MB in Hbase via python happybase - HDP 3

我們正在使用 HDP 3。我們試圖在 Hbase 表中特定列族的列之一中插入 PDF 文件。 開發環境為python 3.6,hbase連接器為happybase 1.1.0。 我們無法在 hbase 中上傳任何大於 10 MB 的 PDF 文件。 在hbase中我們設置了如下參數: 我 ...

Cloudera/CDH v6.1.x + Python HappyBase v1.1.0: TTransportException(type=4, message='TSocket read 0 bytes')

[英]Cloudera/CDH v6.1.x + Python HappyBase v1.1.0: TTransportException(type=4, message='TSocket read 0 bytes')

編輯:此問題和答案適用於遇到主題行中所述異常的任何人: TTransportException(type=4, message='TSocket read 0 bytes') ; 無論是否涉及 Cloudera 和/或 HappyBase。 根的問題(因為它變成了)從失配莖protocol和 ...

使用 Happybase 掃描遠程 hbase 表時,發生“Tsocket read 0 bytes Error”

[英]When scan remote hbase table using Happybase, 'Tsocket read 0 bytes Error' happens

我正在嘗試掃描具有超過 1,000,000,000 行的遠程 HBASE 表。 掃描后,使用掃描的行,嘗試使用 hdfs 制作 csv 文件。 我嘗試了近 3 周來解決它,但我不能。 這樣我掃描數據並制作csv文件 錯誤信息 /host/anaconda3/lib/python3.6/site ...

TSocket讀取0字節-happybase版本0.8

[英]TSocket read 0 bytes - happybase version 0.8

我正在嘗試通過happybase框架版本0.8連接hbase。 我已經啟動了daemon /usr/hdp/current/hbase-master/bin/hbase-daemon.sh start thrift -p 9090 - /usr/hdp/current/hbase-mast ...

嘗試連接到用於Hbase的Thrift服務器。 出現以下錯誤

[英]Trying to connect to Thrift server for Hbase. Getting the following error

要使用Happybase-Python,我們需要按照Happybase文檔中所述為Hbase啟動Thrift服務器並運行它。 在啟動Happybase Thrift服務器時,我收到以下Java運行時異常。 線程“主”中的異常java.lang.AbstractMethodErro ...

協議錯誤:沒有協議版本頭

[英]ProtocolError: No protocol version header

我有以下版本的 hortonworks 集群: hbase = 1.1.2 快樂基地=1.1.0 hortonworks hadoop 集群 = HDP-2.6.2.0 當我嘗試運行簡單示例時: 我得到了這個例外: ...

如何在Python中的塊中循環遍歷Hbase表

[英]How to loop over an Hbase table in chuncks in Python

我目前正在編寫一個Python腳本,該腳本使用“ happybase”將HBase表轉換為csv。 我遇到的問題是,如果表太大,則達到200萬行后會出現以下錯誤: 我的意思是將for循環分成子循環(即打開Hbase連接->獲取前100,000行的數據->關閉連接->重 ...

如何在python中解碼hbase時間戳值?

[英]how to decode hbase timestamp value in python?

我是hbase的新手,目前正在使用hbase-1.2.6。 我通過使用happybase包使用python腳本完成了與hbase的連接。 我的問題是:有人可以讓我知道如何解碼在我們將任何記錄放入表中時自動插入的時間戳值嗎? ...

無法使用python的happybase軟件包操作HBase-thriftpy.transport.TTransportException

[英]Unable to manipulate HBase using happybase package of python - thriftpy.transport.TTransportException

我嘗試連接到HBase並通過python的happybase包對其進行操作這是我用於連接到HBase的代碼:(“打印”行幫助我找到程序停止的位置) 但是當執行代碼時,我得到了一個異常(thriftpy.transport.TTransportException): 我不知道問題出 ...

在HappyBase HBase客戶端中設置Zookeeper節點(znode)設置

[英]Set Zookeeper Node (znode) setting in HappyBase HBase client

我想通過HappyBase(python)連接到受Kerberos 保護的 HBase數據庫。 使用以下設置,該連接可用於另一個不安全的群集: 現在,我想通過Zookeeper仲裁(例如host2.domain.de )和端口2181連接到我的安全數據庫。 zookeper節點受 ...

使用HappyBase更新HBase數據

[英]Updating HBase data with HappyBase

我正在嘗試編寫一個函數來更新保存在HBase中的表中的數據。 我有一個函數將被調用來更新它,我有一個非常好的開始,但我有點迷失在完成它的結束。 我可以根據一個字符串更新單行到另一個字符串,但是在比較日志時間時,我似乎無法弄清楚如何做到這一點,因為沒有設置日志時間。 我將表中的所有值存儲到字 ...

嘗試執行`counter_inc`時,Bigtable Google Happybase Python KeyError

[英]Bigtable Google Happybase Python KeyError when trying to do `counter_inc`

我不確定為什么,但是counter_inc方法不起作用,沒有仿真器,指向開發的實際實例。 片段: 如果我這樣做table.counter_inc(b'row1', 'counters:qual1')完全一樣。 當作為腳本執行時: 是一個錯誤還是此代碼段有問題? ...


 
粵ICP備18138465號  © 2020-2024 STACKOOM.COM