Как удалить разрывы строк и пустые строки из строки

Я пытаюсь запустить задание mapreduce на hadoop, которое считывает пятую запись файла с разделителями табуляции (пятая запись — отзывы пользователей), а затем выполняет некоторый анализ настроений и подсчитывает количество слов в них.

Однако, как вы знаете из отзывов пользователей, они обычно содержат разрывы строк и пустые строки. Мой код повторяет слова каждого отзыва, чтобы найти ключевые слова и проверить настроение, если ключевое слово найдено.

Проблема в том, что когда код повторяет обзор, он выдает мне ошибку ArrayIndexOutofBoundsException из-за этих разрывов строк и пустых строк в одном обзоре.

Я пытался использовать replaceAll("\r", " ") и replaceAll("\n", " ") безрезультатно.

Я также пробовал if (tokenizer.countTokens() == 2){ word.set(tokenizer.nextToken());} else { }

тоже безрезультатно. Ниже мой код:

public class KWSentiment_Mapper extends Mapper<LongWritable, Text, Text, IntWritable> {
ArrayList<String> keywordsList = new ArrayList<String>();
ArrayList<String> posWordsList = new ArrayList<String>();
ArrayList<String> tokensList = new ArrayList<String>();
int e;

@Override
public void map(LongWritable key, Text value, Context context) throws IOException, InterruptedException {

    String[] line = value.toString().split("\t");
    String Review = line[4].replaceAll("[\\-\\+\\\\)\\.\\(\"\\{\\$\\^:,]", "").toLowerCase();

    StringTokenizer tokenizer = new StringTokenizer(Review);

    while (tokenizer.hasMoreTokens()) {
        // 1- first read the review line and store the tokens in an arraylist, 2-
        // iterate through review to check for KW if found
        // 3-check if there's PosWord near (upto +3 and -2)
        // 4- setWord & context.write 5- null the review line arraylist
        String CompareString = tokenizer.nextToken();

        tokensList.add(CompareString);
    }
    {
    for (int i = 0; i < tokensList.size(); i++)

    {

        for (int j = 0; j < keywordsList.size(); j++) {
            boolean flag = false;

            if (tokensList.get(i).startsWith(keywordsList.get(j)) == true) {

                for (int e = Math.max(0, i - 2); e < Math.min(tokensList.size(), i + 4); e++) {

                    if (posWordsList.contains(tokensList.get(e))) {

                        word.set(keywordsList.get(j));
                        context.write(word, one);
                        flag = true;

                        break; // breaks out of e loop }}
                    }
                }
            }
            if (flag)
                break;
        }
    }
    tokensList.clear();
}

}

Ожидаемые результаты таковы, что: Возьмем эти два случая отзывов, в которых возникает ошибка:

Кейс 1: "Красиво и просторно!
Я очень рекомендую это место и отличного хозяина.»

Случай 2: «Место в целом было очень тихим, но мы не чувствовали себя засидевшимися.

Помимо этого, ванная комната большая, а душ действительно хороший, но есть проблема. "

Система должна читать весь обзор как одну строку и перебирать слова в ней. Однако он просто останавливается, когда находит разрыв строки или пустую строку, как в случае 2.
. Случай 1 следует читать так: «Красиво и просторно! Я очень рекомендую это место и отличного хозяина».

Случай 2 должен быть таким: «Место в целом было очень тихим, но мы не чувствовали себя засидевшимися. Помимо этого, ванная большая, а душ действительно хороший, но есть проблема».

У меня мало времени, и я был бы очень признателен за помощь здесь.

Спасибо!