Java是一種廣泛使用的編程語(yǔ)言，它具有出色的分詞和全文檢索功能。

分詞是文本處理中的一種重要技術(shù)，它可以將一段文本分解成一個(gè)個(gè)詞匯。在Java中，我們可以使用Lucene等工具包來(lái)實(shí)現(xiàn)分詞功能。例如，下面是一個(gè)簡(jiǎn)單的Java程序，使用Lucene進(jìn)行分詞:

Analyzer analyzer = new StandardAnalyzer();
TokenStream tokenStream = analyzer.tokenStream("fieldName", new StringReader("This is a text to be tokenized"));
CharTermAttribute charTermAttribute = tokenStream.addAttribute(CharTermAttribute.class);
try {
tokenStream.reset();
while (tokenStream.incrementToken()) {
String term = charTermAttribute.toString();
System.out.println("Term: " + term);
}
tokenStream.end();
} finally {
tokenStream.close();
}

以上代碼使用StandardAnalyzer對(duì)一段文本進(jìn)行分詞，然后輸出分解后的每個(gè)詞匯。在實(shí)際應(yīng)用中，我們可以將分詞后的結(jié)果存儲(chǔ)到數(shù)據(jù)庫(kù)中，方便進(jìn)行全文檢索。

全文檢索是指在一個(gè)文本庫(kù)中，搜索與用戶查詢匹配的所有文檔并返回相應(yīng)的結(jié)果。Java中，我們可以使用Lucene等工具包來(lái)實(shí)現(xiàn)全文檢索功能。例如，下面是一個(gè)簡(jiǎn)單的Java程序，使用Lucene進(jìn)行全文檢索:

String indexDir = "C:\\Index";
String q = "text:Lucene";
IndexReader reader = DirectoryReader.open(FSDirectory.open(new File(indexDir)));
IndexSearcher searcher = new IndexSearcher(reader);
Analyzer analyzer = new StandardAnalyzer();
QueryParser parser = new QueryParser("fieldName", analyzer);
Query query = parser.parse(q);
TopDocs hits = searcher.search(query, 10);
for (int i = 0; i< hits.totalHits; i++) {
Document doc = searcher.doc(hits.scoreDocs[i].doc);
System.out.println("Doc title: " + doc.get("title"));
}

以上代碼首先指定了索引庫(kù)的路徑和用戶查詢的關(guān)鍵詞，然后使用IndexSearcher進(jìn)行搜索，并指定需要返回的結(jié)果數(shù)量。最后，遍歷搜索結(jié)果并輸出匹配到的文檔標(biāo)題。在實(shí)際應(yīng)用中，我們可以通過(guò)對(duì)分詞后的文本進(jìn)行索引，實(shí)現(xiàn)更高效的全文檢索。