学习Xapian(3) – 同义词的查询拓展

2022-04-27 00:00:00 同义词 拓展 中国队 词组 同义

Xapian支持同义词的查询拓展。
按照同义词进行拓展算是查询拓展基本的一种方式。
比如“汽车展览”“车展”是同义词,我们搜索汽车展览的时候,也会把“车展”的结果返回。
很多人认为这个就是拼写校正,但实际它比拼写校正稍微点,特别是放在Xapian的语境下,毕竟拼写校正是基于编辑距离而不是语义的。

1、在DB写入同义词组
创建同义词组的API很简明。
WritableDatabase::add_synonym(term, synonym)
这一对同义词是有方向的,term的同义词是synonym,反之不成立。
即我们搜索“汽车展览”时能拓展出“车展”,反之不成立,如果你需要,那么反着再插入一次吧!

2、在搜索时使用同义词组
和拼写校正一样,肯定的对QueryParser设置db,QueryParser::set_database()
然后在QueryParser::parse_query时,第二个参数传入FLAG_SYNONYM 或者 FLAG_AUTO_SYNONYMS
FLAG_SYNONYM 是在查询语句中出现~WORD 的形式,则把WORD自动同义词拓展
FLAG_AUTO_SYNONYMS 则是把全部的词都给查询拓展,不用显示的写~。

例子:写入同义词组

#include <xapian.h> 
#include <iostream> 
using namespace std; 
#define CONTENT "70比 69, 这是 男篮 亚锦赛 历史上 的 小 分 差 比赛 , 笑 到 后 的是 东道主 中国队 。 可以说 , 这是 一次 惊险 的 胜利 ; 也可 以 说 , 这是 中国男篮 幸运 的 结局 。终 >  场 哨 响 , 中国队 主教练 邓 华德 和 篮管中心 副主任 胡 加时 紧紧拥抱 在一 起 , 两人 都 激动 得 热泪盈眶 —— 中国队 赢了 , 赢得 很 庆幸 。" 
#define INDEX_PATH "./index_data" 
#define WORD1 "男蓝" 
#define WORD2 "男篮" 
int main() 

    try
    { 
        //Text to be indexed 
        string content(CONTENT); 
  
        //Open an Database for write 
        Xapian::WritableDatabase db(string(INDEX_PATH), Xapian::DB_CREATE_OR_OPEN); 
  
        //Add Synonym 
        db.add_synonym(string(WORD1), string(WORD2)); 
  
        //Prepare TermGenerator, just split word by space, not chinese analysis 
        Xapian::TermGenerator indexer; 
  
        //Make Document 
        Xapian::Document doc; 
        doc.set_data(content); 
        indexer.set_document(doc); 
        indexer.index_text(content); 
  
        //Add Document to db 
        db.add_document(doc); 
  
        //Flush to disk 
        db.commit(); 
    } 
    catch(const Xapian::Error &e) 
    { 
        cout << e.get_description() << endl; 
    } 
    return 0; 
}

相关文章