Lexical 検索
Lexical 検索は、転置インデックスに対してキーワードをマッチングすることでドキュメントを検索します。Laurus は、完全一致、フレーズ一致、あいまい一致など、豊富なクエリタイプを提供します。
基本的な使い方
#![allow(unused)]
fn main() {
use laurus::{SearchRequestBuilder, LexicalSearchRequest};
use laurus::lexical::TermQuery;
let request = SearchRequestBuilder::new()
.lexical_search_request(
LexicalSearchRequest::new(
Box::new(TermQuery::new("body", "rust"))
)
)
.limit(10)
.build();
let results = engine.search(request).await?;
}
クエリタイプ
TermQuery
特定のフィールドに完全一致するタームを含むドキュメントをマッチングします。
#![allow(unused)]
fn main() {
use laurus::lexical::TermQuery;
// Find documents where "body" contains the term "rust"
let query = TermQuery::new("body", "rust");
}
注意: タームは解析後にマッチングされます。フィールドが
StandardAnalyzerを使用している場合、インデキシングされたテキストとクエリタームの両方が小文字化されるため、TermQuery::new("body", "rust")は元テキスト内の “Rust” にもマッチします。
PhraseQuery
正確なタームの並びを含むドキュメントをマッチングします。
#![allow(unused)]
fn main() {
use laurus::lexical::query::phrase::PhraseQuery;
// Find documents containing the exact phrase "machine learning"
let query = PhraseQuery::new("body", vec!["machine".to_string(), "learning".to_string()]);
// Or use the convenience method from a phrase string:
let query = PhraseQuery::from_phrase("body", "machine learning");
}
フレーズクエリは、ターム位置情報が格納されている必要があります(TextOption のデフォルト設定)。
BooleanQuery
複数のクエリをブーリアン論理で結合します。
#![allow(unused)]
fn main() {
use laurus::lexical::query::boolean::{BooleanQuery, BooleanQueryBuilder, Occur};
let query = BooleanQueryBuilder::new()
.must(Box::new(TermQuery::new("body", "rust"))) // AND
.must(Box::new(TermQuery::new("body", "programming"))) // AND
.must_not(Box::new(TermQuery::new("body", "python"))) // NOT
.build();
}
| Occur | 意味 | DSL での表現 |
|---|---|---|
Must | ドキュメントが必ずマッチしなければならない | +term または AND |
Should | ドキュメントがマッチすべき(スコアをブースト) | term または OR |
MustNot | ドキュメントがマッチしてはならない | -term または NOT |
Filter | 必ずマッチする必要があるが、スコアには影響しない | (DSL に相当するものなし) |
FuzzyQuery
指定された編集距離(レーベンシュタイン距離)内のタームをマッチングします。
#![allow(unused)]
fn main() {
use laurus::lexical::query::fuzzy::FuzzyQuery;
// Find documents matching "programing" within edit distance 2
// This will match "programming", "programing", etc.
let query = FuzzyQuery::new("body", "programing"); // default max_edits = 2
}
WildcardQuery
ワイルドカードパターンを使用してタームをマッチングします。
#![allow(unused)]
fn main() {
use laurus::lexical::query::wildcard::WildcardQuery;
// '?' matches exactly one character, '*' matches zero or more
let query = WildcardQuery::new("filename", "*.pdf")?;
let query = WildcardQuery::new("body", "pro*")?;
let query = WildcardQuery::new("body", "col?r")?; // matches "color" and "colour"
}
PrefixQuery
特定のプレフィックスで始まるタームを含むドキュメントをマッチングします。
#![allow(unused)]
fn main() {
use laurus::lexical::query::prefix::PrefixQuery;
// Find documents where "body" contains terms starting with "pro"
// This matches "programming", "program", "production", etc.
let query = PrefixQuery::new("body", "pro");
}
RegexpQuery
正規表現パターンにマッチするタームを含むドキュメントをマッチングします。
#![allow(unused)]
fn main() {
use laurus::lexical::query::regexp::RegexpQuery;
// Find documents where "body" contains terms matching the regex
let query = RegexpQuery::new("body", "^pro.*ing$")?;
// Match version-like patterns
let query = RegexpQuery::new("version", r"^v\d+\.\d+")?;
}
注意:
RegexpQuery::new()はResultを返します。正規表現パターンは構築時にバリデーションされ、無効なパターンの場合はエラーが返されます。
NumericRangeQuery
数値フィールドの値が指定された範囲内にあるドキュメントをマッチングします。
#![allow(unused)]
fn main() {
use laurus::lexical::NumericRangeQuery;
use laurus::lexical::core::field::NumericType;
// Find documents where "price" is between 10.0 and 100.0 (inclusive)
let query = NumericRangeQuery::new(
"price",
NumericType::Float,
Some(10.0), // min
Some(100.0), // max
true, // include min
true, // include max
);
// Open-ended range: price >= 50
let query = NumericRangeQuery::new(
"price",
NumericType::Float,
Some(50.0),
None, // no upper bound
true,
false,
);
}
GeoQuery
地理的な位置に基づいてドキュメントをマッチングします。
#![allow(unused)]
fn main() {
use laurus::lexical::query::geo::GeoQuery;
// Find documents within 10km of Tokyo Station (35.6812, 139.7671)
let query = GeoQuery::within_radius("location", 35.6812, 139.7671, 10.0)?; // radius in kilometers
// Find documents within a bounding box (min_lat, min_lon, max_lat, max_lon)
let query = GeoQuery::within_bounding_box(
"location",
35.0, 139.0, // min (lat, lon)
36.0, 140.0, // max (lat, lon)
)?;
}
SpanQuery
ドキュメント内のタームの近接度に基づいてマッチングします。SpanTermQuery と SpanNearQuery を使用して近接クエリを構築します。
#![allow(unused)]
fn main() {
use laurus::lexical::query::span::{SpanQuery, SpanTermQuery, SpanNearQuery};
// Find documents where "quick" appears near "fox" (within 3 positions)
let query = SpanNearQuery::new(
"body",
vec![
Box::new(SpanTermQuery::new("body", "quick")) as Box<dyn SpanQuery>,
Box::new(SpanTermQuery::new("body", "fox")) as Box<dyn SpanQuery>,
],
3, // slop (max distance between terms)
true, // in_order (terms must appear in order)
);
}
スコアリング
Lexical 検索結果は BM25 を使用してスコアリングされます。スコアは、ドキュメントがクエリに対してどの程度関連性があるかを反映します。
- ドキュメント内のターム頻度が高いほどスコアが上昇する
- インデックス全体でタームが希少なほどスコアが上昇する
- 短いドキュメントは長いドキュメントに対してブーストされる
フィールドブースト
特定のフィールドをブーストして関連性に影響を与えることができます。
#![allow(unused)]
fn main() {
use laurus::LexicalSearchRequest;
let mut request = LexicalSearchRequest::new(Box::new(query));
request.field_boosts.insert("title".to_string(), 2.0); // title matches count double
request.field_boosts.insert("body".to_string(), 1.0);
}
LexicalSearchRequest のオプション
| オプション | デフォルト | 説明 |
|---|---|---|
query | (必須) | 実行するクエリ |
limit | 10 | 結果の最大件数 |
load_documents | true | ドキュメントの全内容をロードするかどうか |
min_score | 0.0 | 最小スコア閾値 |
timeout_ms | None | 検索タイムアウト(ミリ秒) |
parallel | false | セグメント間の並列検索を有効にする |
sort_by | Score | 関連性スコアでソート、またはフィールドでソート(asc / desc) |
field_boosts | 空 | フィールドごとのスコア倍率 |
ビルダーメソッド
LexicalSearchRequest はオプション設定のためのビルダースタイルの API をサポートします。
#![allow(unused)]
fn main() {
use laurus::LexicalSearchRequest;
use laurus::lexical::TermQuery;
let request = LexicalSearchRequest::new(Box::new(TermQuery::new("body", "rust")))
.limit(20)
.min_score(0.5)
.timeout_ms(5000)
.parallel(true)
.sort_by_field_desc("date")
.with_field_boost("title", 2.0)
.with_field_boost("body", 1.0);
}
Query DSL の使用
プログラマティックにクエリを構築する代わりに、テキストベースの Query DSL を使用できます。
#![allow(unused)]
fn main() {
use laurus::lexical::QueryParser;
use laurus::analysis::analyzer::standard::StandardAnalyzer;
use std::sync::Arc;
let analyzer = Arc::new(StandardAnalyzer::default());
let parser = QueryParser::new(analyzer).with_default_field("body");
// Simple term
let query = parser.parse("rust")?;
// Boolean
let query = parser.parse("rust AND programming")?;
// Phrase
let query = parser.parse("\"machine learning\"")?;
// Field-specific
let query = parser.parse("title:rust AND body:programming")?;
// Fuzzy
let query = parser.parse("programing~2")?;
// Range
let query = parser.parse("year:[2020 TO 2024]")?;
}
完全な構文リファレンスは Query DSL を参照してください。