hive 查询是否包含字符串_使用Hadoop查找包含特定字符串的文件

你可以尝试这样的事情，虽然我不知道这是否是一种有效的方式去了解它。让我知道它是否有效 - 我没有测试它或任何东西。

你可以使用它是这样的：的Java SearchFiles /技术/ DPS /实际你好确保你当然从相应的目录中运行它。

import java.io.BufferedReader;

import java.io.FileReader;

import java.io.File;

import java.io.IOException;

import java.util.ArrayList;

import java.util.Scanner;

public class SearchFiles {

public static void main(String[] args) throws IOException {

if (args.length < 2) {

System.err.println("Usage: [search-dir] [search-string]");

return;

}

File searchDir = new File(args[0]);

String searchString = args[1];

ArrayList matches = checkFiles(searchDir.listFiles(), searchString, new ArrayList());

System.out.println("These files contain '" + searchString + "':");

for (File file : matches) {

System.out.println(file.getPath());

}

}

private static ArrayList checkFiles(File[] files, String search, ArrayList acc) throws IOException {

for (File file : files) {

if (file.isDirectory()) {

checkFiles(file.listFiles(), search, acc);

} else {

if (fileContainsString(file, search)) {

acc.add(file);

}

}

}

return acc;

}

private static boolean fileContainsString(File file, String search) throws IOException {

BufferedReader in = new BufferedReader(new FileReader(file));

String line;

while ((line = in.readLine()) != null) {

if (line.contains(search)) {

in.close();

return true;

}

}

in.close();

return false;

}

}