Streams API を使用した Java 8 での単語の出現頻度のカウント

Java 8 Streams API を使用して単語の出現頻度を効率的にカウントする

このソリューションは、関数型プログラミングとテキスト分析に Java 8 Streams API を使用します。

import java.util.Arrays;
import java.util.Map;
import java.util.function.Function;
import java.util.stream.Collectors;
public class WordFrequency {
    public static void main(String[] args) {
        // Input array of sentences
        String[] input = {
            "This is a sample string",
            " string ",
            "Another sample string",
            "This is not    a sample string"
        };
        // Stream pipeline for word frequency calculation
        Map<String, Long> wordFrequencies = Arrays.stream(input)
            .flatMap(sentence -> Arrays.stream(sentence.split("\\s+")))
            .filter(word -> !word.isEmpty())
            .map(String::trim)
            .collect(Collectors.groupingBy(Function.identity(), Collectors.counting()));
        // Output the result
        System.out.println(wordFrequencies);
    }
}

モジュール化のためのカスタム ユーティリティ メソッドの使用

このソリューションは、再利用性を高めるためのユーティリティ メソッドを導入することにより、モジュール化されたコードを実証します。

import java.util.Arrays;
import java.util.Map;
import java.util.function.Function;
import java.util.stream.Collectors;
public class WordFrequencyWithUtils {
    public static void main(String[] args) {
        String[] input = {
            "This is a sample string",
            " string ",
            "Another sample string",
            "This is not    a sample string"
        };
        Map<String, Long> result = calculateWordFrequencies(input);
        System.out.println(result);
    }
    public static Map<String, Long> calculateWordFrequencies(String[] sentences) {
        return Arrays.stream(sentences)
            .flatMap(sentence -> Arrays.stream(sentence.split("\\s+")))
            .filter(word -> !word.isEmpty())
            .map(String::trim)
            .collect(Collectors.groupingBy(Function.identity(), Collectors.counting()));
    }
}

単語頻度ロジックの単体テスト

このアプローチには、機能を検証するための JUnit 5 を使用した単体テストが含まれています。

import org.junit.jupiter.api.Test;
import java.util.Map;
import static org.junit.jupiter.api.Assertions.*;
public class WordFrequencyTest {
    @Test
    void testCalculateWordFrequencies() {
        String[] input = {
            "This is a sample string",
            " string ",
            "Another sample string",
            "This is not    a sample string"
        };
        Map<String, Long> result = WordFrequencyWithUtils.calculateWordFrequencies(input);
        assertEquals(2, result.get("This"));
        assertEquals(4, result.get("string"));
        assertEquals(3, result.get("sample"));
        assertEquals(1, result.get("not"));
    }
}

Java Wordの頻度分析に関するよくある質問

1. 単語頻度分析で大文字と小文字を区別するにはどうすればよいですか?
2. 使用 map(String::toLowerCase) 処理する前にすべての単語を小文字に変換します。
3. 単語を分析する前に句読点を削除するにはどうすればよいですか?
4. 適用する replaceAll("[^a-zA-Z0-9 ]", "") 各文で不要な文字を削除します。
5. 入力内の空の文字列を処理する最良の方法は何ですか?
6. 使用 filter(word -> !word.isEmpty()) 処理から除外します。
7. パフォーマンスを向上させるために入力配列を並列処理できますか?
8. はい、使用しています Arrays.stream(input).parallel() マルチスレッド処理が可能になります。
9. 入力にテキストとともに数値データが含まれている場合はどうなるでしょうか?
10. 正規表現を変更できます replaceAll 必要に応じて数値を含めたり除外したりできます。

単語頻度カウントのための合理化されたソリューション

単語の出現頻度を正確にカウントすることは、テキストの処理と分析に不可欠です。 Java 8 の Streams API を使用すると、余分なスペースや大文字と小文字の混合などの不規則な入力を処理しながら、簡潔で効率的なソリューションを作成できます。これらの技術により、開発者はさまざまなデータの課題に簡単に取り組むことができます。 🌟

大規模なデータセットであっても、小規模なプロジェクトであっても、このアプローチは堅牢で再利用可能であり、拡張が容易であることが証明されています。そのモジュール構造により、あらゆるアプリケーションにシームレスに統合できるほか、正規化や単体テストなどのベスト プラクティスにより、多様なユース ケースに対する信頼性の高いソリューションとなります。 🚀