如何在 HDFS 文件中搜索

oortcloud_home

我希望能够在 HDFS 特定目录中的所有文件夹和文件中搜索字符串模式。不知道该怎么做。下面不起作用。

hadoop fs -ls -R /folder_path/ |grep -i "pattern"

我如何搜索?。

贾格鲁特·夏尔马

对于单个 HDFS 文件夹中的文件,您可以使用该hadoop fs -cat命令。但这不会在子文件夹中搜索。

举例说明,如果文件位于名为 的 HDFS 文件夹中/hive-data,则可以使用以下命令在目录中的文件中搜索模式:

hadoop fs -cat /hive-data/* | grep -i pattern

本文收集自互联网,转载请注明来源。

如有侵权,请联系[email protected] 删除。

编辑于
0

我来说两句

0条评论
登录后参与评论

相关文章

来自分类Dev

如何在HDFS中检索已永久删除的文件

来自分类Dev

如何在Spark中读取HDFS序列文件

来自分类Dev

如何在 HDFS 中查找访问频率较低的文件

来自分类Dev

如何从HDFS删除文件?

来自分类Dev

如何在 spark 中解析 json 文件?以及如何在 spark 或 hdfs 中插入 dynamo DB?

来自分类Dev

gzip文件如何存储在HDFS中

来自分类Dev

小文件如何存储在HDFS中

来自分类Dev

如何修复损坏的HDFS文件

来自分类Dev

如何在Hadoop HDFS目录中移动文件?

来自分类Dev

如何在Ubuntu中将文件上传到HDFS

来自分类Dev

如何在Ubuntu中将文件上传到HDFS

来自分类Dev

如何在Hadoop HDFS中删除多级分区

来自分类Dev

如何在生产环境中在 Mesos 上运行 HDFS?

来自分类Dev

如何在以XML为一列的hdfs中查询文件

来自分类Dev

Pyspark:如何在 HDFS 中并行化多 gz 文件处理

来自分类Dev

如何使用Spark快速从map()中的HDFS中读取文件

来自分类Dev

如何使用Spark快速从map()中的HDFS中读取文件

来自分类Dev

如何在多个jar中搜索文件

来自分类Dev

如何在lubuntu中搜索vim文件?

来自分类Dev

如何在文件中搜索后缀?

来自分类Dev

如何在apk包中搜索文件

来自分类Dev

如何在存档中搜索文件?

来自分类Dev

如何在文件中搜索号码?

来自分类Dev

如何在python的记录中搜索文件?

来自分类Dev

如何在网站中搜索文件?

来自分类Dev

如何仅列出HDFS中的文件名

来自分类Dev

HDFS中的文件如何处理Spark分区?

来自分类Dev

如何使用Java在HDFS中创建和填充Parquet文件?

来自分类Dev

如何从hdfs上的文件加载typesafe configFactory?