从hadoop HDFS数据中搜索
[英]Search from hadoop hdfs data
问题描述
我从JSON格式的在线源中提取数据，并通过Apache Flume将其存储到Hdfs中。 现在，它像Hadoop一样创建多个文件。 现在，我想从此数据（从所有这些文件）中搜索内容，并获取与之相关的完整信息。 解决办法是什么？
1 个解决方案
解决方案1
0 2017-10-06 14:24:44
您可以开发自己的脚本以使用MapReduce或Spark在hdfs中进行搜索。 您还有另一个解决方案，可以使用蜂巢和或Pig。 Pigg指南： http : //archive.cloudera.com/cdh/3/pig/tutorial.html蜂巢指南： https : //cwiki.apache.org/confluence/display/Hive/LanguageManual
如何使用Hadoop MapReduce将数据从AWS S3导入HDFS
[英]How to import data from aws s3 to HDFS with Hadoop MapReduce
如何使用水槽将数据从大型机文件提取到hadoop HDFS
[英]How to pull the data from mainframe files to hadoop HDFS using flume
如何将数据从mysql导入Apache Hadoop HDFS安装。
[英]how to import data from mysql to Apache Hadoop HDFS installation.
声明:本站的技术帖子网页，遵循CC BY-SA 4.0协议，如果您需要转载，请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.