繁体 English 中英

如何在MapReduce Job中通过python扫描HBase？

[英]How to scan HBase by python in MapReduce Job?

原文 2013-04-03 14:59:32 3 1 python/ mapreduce/ hbase

我的mapreduce作业程序是由python编写的，我想从HBase获取数据作为输入。 有什么方法可以通过MapReduce方式扫描HBase表中的数据，例如本机Java实现中的TableMapper / Reducer。 我了解到HappyBase可以提供一种与HBase进行交互的简便方法，但它仅在客户端有效。

1 个解决方案

您可以编写一个从HBase获取数据的Pig脚本，然后通过流或（如果使用jython则）通过UDF集成python

如何使用python thrift客户端使用maxversions扫描hbase表？

[英]How to use python thrift client to scan hbase table with maxversions?

python mapreduce作业返回错误

[英]python mapreduce job returning error

如何从 GAE Python 上的 cron 启动 mapreduce 作业

[英]How to start mapreduce job from cron on GAE Python

如何在python中为warc文件编写流式mapreduce作业

[英]how to write a streaming mapreduce job for warc files in python

MapReduce Job（用python编写）在EMR上运行缓慢

[英]MapReduce Job (written in python) run slow on EMR

Hadoop：无法运行 MapReduce 作业（python）

[英]Hadoop: Unable to run MapReduce job (python)

如何在MapReduce作业中导入自定义模块？

[英]How to import a custom module in a MapReduce job?

如何从Python流MapReduce作业中省略空的part-000x文件

[英]How to omit empty part-000x files from Python streaming MapReduce job

Java和Python中对HBase的并行扫描请求具有不同的性能

[英]Parallel scan requests to HBase in Java and Python have different performance

如何通过 Hbase 中的行键和单元格扫描特定列值？

[英]How to scan for a particular column value by rowkey and cell in Hbase?

暂无

暂无

声明:本站的技术帖子网页，遵循CC BY-SA 4.0协议，如果您需要转载，请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.

相关问题 如何使用python thrift客户端使用maxversions扫描hbase表？ python mapreduce作业返回错误如何从 GAE Python 上的 cron 启动 mapreduce 作业如何在python中为warc文件编写流式mapreduce作业 MapReduce Job（用python编写）在EMR上运行缓慢 Hadoop：无法运行 MapReduce 作业（python）如何在MapReduce作业中导入自定义模块？如何从Python流MapReduce作业中省略空的part-000x文件 Java和Python中对HBase的并行扫描请求具有不同的性能如何通过 Hbase 中的行键和单元格扫描特定列值？

相关标签

粤ICP备18138465号 © 2020-2024 STACKOOM.COM