青青草原综合久久大伊人导航_色综合久久天天综合_日日噜噜夜夜狠狠久久丁香五月_热久久这里只有精品

為生存而奔跑

   :: 首頁 :: 聯系 :: 聚合  :: 管理
  271 Posts :: 0 Stories :: 58 Comments :: 0 Trackbacks

留言簿(5)

我參與的團隊

搜索

  •  

積分與排名

  • 積分 - 331734
  • 排名 - 74

最新評論

閱讀排行榜

評論排行榜

本文僅記錄一些簡單的使用方法,供初學者參考。
以下例子采用 Lucene.NET 1.9 版本,可取去 Lucene.Net 下載。

1. 基本應用
using System;
using System.Collections.Generic;
using System.Text;
using Lucene.Net;
using Lucene.Net.Analysis;
using Lucene.Net.Analysis.Standard;
using Lucene.Net.Documents;
using Lucene.Net.Index;
using Lucene.Net.QueryParsers;
using Lucene.Net.Search;
using Lucene.Net.Store;
using Lucene.Net.Util;

namespace ConsoleApplication1.Lucene
{
  public class LuceneTest
  {
    private const string FieldName = "name";
    private const string FieldValue = "value";

    private Directory directory = new RAMDirectory();
    private Analyzer analyzer = new StandardAnalyzer();

    public LuceneTest()
    {
    }

    private void Index()
    {
      IndexWriter writer = new IndexWriter(directory, analyzer, true);
      writer.maxFieldLength = 1000;
      
      for (int i = 1; i <= 100; i++)
      {
        Document document = new Document();

        document.Add(new Field(FieldName, "name" + i, Field.Store.YES, Field.Index.UN_TOKENIZED));
        document.Add(new Field(FieldValue, "Hello, World!", Field.Store.YES, Field.Index.TOKENIZED));

        writer.AddDocument(document);
      }

      writer.Optimize();
      writer.Close();
    }

    private void Search()
    {
      Query query = QueryParser.Parse("name*", FieldName, analyzer);

      IndexSearcher searcher = new IndexSearcher(directory);

      Hits hits = searcher.Search(query);
      
      Console.WriteLine("符合條件記錄:{0}; 索引庫記錄總數:{1}", hits.Length(), searcher.Reader.NumDocs());
      for (int i = 0; i < hits.Length(); i++)
      {
        int docId = hits.Id(i);
        string name = hits.Doc(i).Get(FieldName);
        string value = hits.Doc(i).Get(FieldValue);
        float score = hits.Score(i);

        Console.WriteLine("{0}: DocId:{1}; Name:{2}; Value:{3}; Score:{4}", 
          i + 1, docId, name, value, score);
      }

      searcher.Close();
    }
  }
}

除了 RAMDirectory,還可以使用 FSDirectory。(注意 FSDirectory.GetDirectory 的 create 參數,為 true 時將刪除已有索引庫文件,可以通過 IndexReader.IndexExists() 方法判斷。)

從指定目錄打開已有索引庫。
private Directory directory = FSDirectory.GetDirectory("c:\index", false);

將索引庫載入內存,以提高搜索速度。
private Directory directory = new RAMDirectory(FSDirectory.GetDirectory(@"c:\index", false));
//或
//private Directory directory = new RAMDirectory(c:\index");

2. 多字段搜索

使用 MultiFieldQueryParser 可以指定多個搜索字段。
Query query = MultiFieldQueryParser.Parse("name*", new string[] { FieldName, FieldValue }, analyzer);

IndexReader reader = IndexReader.Open(directory);
IndexSearcher searcher = new IndexSearcher(reader);
Hits hits = searcher.Search(query);

3. 多條件搜索

除了使用 QueryParser.Parse 分解復雜的搜索語法外,還可以通過組合多個 Query 來達到目的。
Query query1 = new TermQuery(new Term(FieldValue, "name1")); // 詞語搜索
Query query2 = new WildcardQuery(new Term(FieldName, "name*")); // 通配符 
//Query query3 = new PrefixQuery(new Term(FieldName, "name1")); // 字段搜索 Field:Keyword,自動在結尾添加 *
//Query query4 = new RangeQuery(new Term(FieldNumber, NumberTools.LongToString(11L)), new Term(FieldNumber, NumberTools.LongToString(13L)), true); // 范圍搜索
//Query query5 = new FilteredQuery(query, filter); // 帶過濾條件的搜索
      
BooleanQuery query = new BooleanQuery();
query.Add(query1, BooleanClause.Occur.MUST);
query.Add(query2, BooleanClause.Occur.MUST);

IndexSearcher searcher = new IndexSearcher(reader);
Hits hits = searcher.Search(query);

4. 設置權重

可以給 Document 和 Field 增加權重(Boost),使其在搜索結果排名更加靠前。缺省情況下,搜索結果以 Document.Score 作為排序依據,該數值越大排名越靠前。Boost 缺省值為 1。
Score = Score * Boost

通過上面的公式,我們就可以設置不同的權重來影響排名。

如下面的例子中根據 VIP 級別設定不同的權重。
Document document = new Document();
switch (vip)
{
  case VIP.Gold: document.SetBoost(2F); break;
  case VIP.Argentine: document.SetBoost(1.5F); break;
}

只要 Boost 足夠大,那么就可以讓某個命中結果永遠排第一位,這就是百度等網站的"收費排名"業務。明顯有失公平,鄙視一把。 [no] 

5. 排序

通過 SortField 的構造參數,我們可以設置排序字段,排序條件,以及倒排。
Sort sort = new Sort(new SortField(FieldName, SortField.DOC, false));

IndexSearcher searcher = new IndexSearcher(reader);
Hits hits = searcher.Search(query, sort);

排序對搜索速度影響還是很大的,盡可能不要使用多個排序條件。

6. 過濾

使用 Filter 對搜索結果進行過濾,可以獲得更小范圍內更精確的結果。

舉個例子,我們搜索上架時間在 2005-10-1 到 2005-10-30 之間的商品。
對于日期時間,我們需要轉換一下才能添加到索引庫,同時還必須是索引字段。
// index
document.Add(FieldDate, DateField.DateToString(date), Field.Store.YES, Field.Index.UN_TOKENIZED);

//...

// search
Filter filter = new DateFilter(FieldDate, DateTime.Parse("2005-10-1"), DateTime.Parse("2005-10-30"));
Hits hits = searcher.Search(query, filter);

除了日期時間,還可以使用整數。比如搜索價格在 100 ~ 200 之間的商品。
Lucene.Net NumberTools 對于數字進行了補位處理,如果需要使用浮點數可以自己參考源碼進行。
// index
document.Add(new Field(FieldNumber, NumberTools.LongToString((long)price), Field.Store.YES, Field.Index.UN_TOKENIZED));

//...

// search
Filter filter = new RangeFilter(FieldNumber, NumberTools.LongToString(100L), NumberTools.LongToString(200L), true, true);
Hits hits = searcher.Search(query, filter);

使用 Query 作為過濾條件。
QueryFilter filter = new QueryFilter(QueryParser.Parse("name2", FieldValue, analyzer));

我們還可以使用 FilteredQuery 進行多條件過濾。
Filter filter = new DateFilter(FieldDate, DateTime.Parse("2005-10-10"), DateTime.Parse("2005-10-15"));
Filter filter2 = new RangeFilter(FieldNumber, NumberTools.LongToString(11L), NumberTools.LongToString(13L), true, true);

Query query = QueryParser.Parse("name*", FieldName, analyzer);
query = new FilteredQuery(query, filter);
query = new FilteredQuery(query, filter2);

IndexSearcher searcher = new IndexSearcher(reader);
Hits hits = searcher.Search(query);

7. 分布搜索

我們可以使用 MultiReader 或 MultiSearcher 搜索多個索引庫。
MultiReader reader = new MultiReader(new IndexReader[] { IndexReader.Open(@"c:\index"), IndexReader.Open(@"\\server\index") });
IndexSearcher searcher = new IndexSearcher(reader);
Hits hits = searcher.Search(query);


IndexSearcher searcher1 = new IndexSearcher(reader1);
IndexSearcher searcher2 = new IndexSearcher(reader2);
MultiSearcher searcher = new MultiSearcher(new Searchable[] { searcher1, searcher2 });
Hits hits = searcher.Search(query);

還可以使用 ParallelMultiSearcher 進行多線程并行搜索。

8. 合并索引庫

將 directory1 合并到 directory2 中。
Directory directory1 = FSDirectory.GetDirectory("index1", false);
Directory directory2 = FSDirectory.GetDirectory("index2", false);

IndexWriter writer = new IndexWriter(directory2, analyzer, false);
writer.AddIndexes(new Directory[] { directory });
Console.WriteLine(writer.DocCount());
writer.Close();

9. 顯示搜索語法字符串

我們組合了很多種搜索條件,或許想看看與其對等的搜索語法串是什么樣的。
BooleanQuery query = new BooleanQuery();
query.Add(query1, true, false);
query.Add(query2, true, false);
//...

Console.WriteLine("Syntax: {0}", query.ToString());

輸出:
Syntax: +(name:name* value:name*) +number:[0000000000000000b TO 0000000000000000d]

呵呵,就這么簡單。

10. 操作索引庫

刪除 (軟刪除,僅添加了刪除標記。調用 IndexWriter.Optimize() 后真正刪除。)
IndexReader reader = IndexReader.Open(directory);

// 刪除指定序號(DocId)的 Document。
reader.Delete(123);

// 刪除包含指定 Term 的 Document。
reader.Delete(new Term(FieldValue, "Hello"));

// 恢復軟刪除。
reader.UndeleteAll();

reader.Close();

增量更新 (只需將 create 參數設為 false,即可往現有索引庫添加新數據。)
Directory directory = FSDirectory.GetDirectory("index", false);
IndexWriter writer = new IndexWriter(directory, analyzer, false);
writer.AddDocument(doc1);
writer.AddDocument(doc2);
writer.Optimize();
writer.Close();

11. 優化

批量向 FSDirectory 增加索引時,增大合并因子(mergeFactor )和最小文檔合并數(minMergeDocs)有助于提高性能,減少索引時間。
IndexWriter writer = new IndexWriter(directory, analyzer, true);

writer.maxFieldLength = 1000; // 字段最大長度
writer.mergeFactor = 1000;
writer.minMergeDocs = 1000;

for (int i = 0; i < 10000; i++)
{
  // Add Documentes...
}

writer.Optimize();
writer.Close();

相關參數說明 


轉自《深入 Lucene 索引機制

利用 Lucene,在創建索引的工程中你可以充分利用機器的硬件資源來提高索引的效率。當你需要索引大量的文件時,你會注意到索引過程的瓶頸是在往磁盤上寫索引文件的過程中。為了解決這個問題, Lucene 在內存中持有一塊緩沖區。但我們如何控制 Lucene 的緩沖區呢?幸運的是,Lucene 的類 IndexWriter 提供了三個參數用來調整緩沖區的大小以及往磁盤上寫索引文件的頻率。

1.合并因子 (mergeFactor)

這個參數決定了在 Lucene 的一個索引塊中可以存放多少文檔以及把磁盤上的索引塊合并成一個大的索引塊的頻率。比如,如果合并因子的值是 10,那么當內存中的文檔數達到 10 的時候所有的文檔都必須寫到磁盤上的一個新的索引塊中。并且,如果磁盤上的索引塊的隔數達到 10 的話,這 10 個索引塊會被合并成一個新的索引塊。這個參數的默認值是 10,如果需要索引的文檔數非常多的話這個值將是非常不合適的。對批處理的索引來講,為這個參數賦一個比較大的值會得到比較好的索引效果。

2.最小合并文檔數 (minMergeDocs)

這個參數也會影響索引的性能。它決定了內存中的文檔數至少達到多少才能將它們寫回磁盤。這個參數的默認值是10,如果你有足夠的內存,那么將這個值盡量設的比較大一些將會顯著的提高索引性能。

3.最大合并文檔數 (maxMergeDocs)

這個參數決定了一個索引塊中的最大的文檔數。它的默認值是 Integer.MAX_VALUE,將這個參數設置為比較大的值可以提高索引效率和檢索速度,由于該參數的默認值是整型的最大值,所以我們一般不需要改動這個參數。


-------------------迷糊中的分割線-----------------------------

Lucene 相關資源:

1. Lucene 官方網站
2. Apache Lucene
3. Lucene FAQ
4. Lucene.Net
5. Lucene API (Java)
6. DotLucene
7. Luke - Lucene Index Toolbox
8. Nutch
9. LUCENE.COM.CN 中國
10. Compass
11. 實戰 Lucene,第 1 部分: 初識 Lucene
12. 深入 Lucene 索引機制
posted on 2010-03-21 13:49 baby-fly 閱讀(530) 評論(0)  編輯 收藏 引用 所屬分類: Information Retrival / Data Mining
青青草原综合久久大伊人导航_色综合久久天天综合_日日噜噜夜夜狠狠久久丁香五月_热久久这里只有精品
  • <ins id="pjuwb"></ins>
    <blockquote id="pjuwb"><pre id="pjuwb"></pre></blockquote>
    <noscript id="pjuwb"></noscript>
          <sup id="pjuwb"><pre id="pjuwb"></pre></sup>
            <dd id="pjuwb"></dd>
            <abbr id="pjuwb"></abbr>
            一区二区三区视频在线播放| 欧美精品一区二区精品网| 久久婷婷国产综合精品青草| 亚洲一区二区三区精品在线观看| 亚洲精品欧美在线| 亚洲网站在线| 久久精品亚洲一区二区三区浴池| 久久国产综合精品| 欧美一级视频免费在线观看| 久久国产精品亚洲va麻豆| 乱码第一页成人| 亚洲精品一区在线观看香蕉| 亚洲影院污污.| 久久色中文字幕| 欧美日韩在线高清| 国产在线成人| 一区二区日韩免费看| 香蕉久久国产| 欧美肥婆在线| 亚洲在线免费视频| 亚洲伊人久久综合| 91久久精品一区二区三区| 免费久久精品视频| 亚洲欧洲精品一区二区| 亚洲欧美日韩国产另类专区| 久久午夜视频| 欧美日韩美女在线观看| 国产日韩亚洲欧美综合| 亚洲国产一区二区三区a毛片| 亚洲视频一区| 欧美 日韩 国产精品免费观看| 日韩午夜视频在线观看| 久久久久久一区| 国产精品免费看| 艳妇臀荡乳欲伦亚洲一区| 久久精品一区四区| 99精品国产在热久久| 久久影视三级福利片| 国产伦精品一区| 99在线精品视频| 欧美国产免费| 久久精品综合网| 国产欧美婷婷中文| 亚洲欧美日韩精品久久奇米色影视| 欧美成人激情在线| 久久久www成人免费无遮挡大片 | 蜜臀av性久久久久蜜臀aⅴ| 国产精品久久久久久久一区探花| 亚洲电影一级黄| 久久久久九九九九| 午夜精品久久久久久久99黑人| 欧美午夜影院| 亚洲午夜一二三区视频| 亚洲精品美女在线观看播放| 久久亚洲一区二区三区四区| 国产一区二区三区免费观看| 午夜久久美女| 亚洲综合另类| 国产日韩欧美综合| 久久久久久久久蜜桃| 性做久久久久久| 国产午夜精品理论片a级大结局| 午夜国产欧美理论在线播放| 亚洲精品亚洲人成人网| 欧美成人综合在线| 99精品久久| 999在线观看精品免费不卡网站| 欧美精品粉嫩高潮一区二区 | 美女91精品| 亚洲精品激情| 亚洲精品三级| 欧美日一区二区在线观看| 中文在线资源观看网站视频免费不卡| 亚洲国产精品传媒在线观看| 欧美激情精品久久久久久大尺度| 欧美在线一二三| 久久精品国产清高在天天线| 国内精品久久久久伊人av| 老司机免费视频久久| 久久久.com| 亚洲人人精品| 一区二区精品| 国内精品久久久久伊人av| 免费日韩视频| 欧美日韩爆操| 久久久久久欧美| 欧美国产日韩视频| 午夜精品久久久久久久99热浪潮 | 欧美国产日韩一区二区在线观看 | 午夜伦欧美伦电影理论片| 亚洲欧美日韩国产成人精品影院| 在线观看成人av| 亚洲精品欧美一区二区三区| 国产精品亚洲综合天堂夜夜| 奶水喷射视频一区| 国产精品成人观看视频国产奇米| 久久久久在线| 欧美日韩精品免费观看视一区二区 | 国语自产精品视频在线看抢先版结局| 麻豆精品在线播放| 国产精品国产精品国产专区不蜜| 久久精品国产精品亚洲综合| 欧美国产视频在线观看| 久久久综合视频| 国产精品a级| 欧美激情一区三区| 国产欧美日韩视频一区二区三区| 亚洲国产91| 国产亚洲一区精品| 亚洲天堂偷拍| 一区二区三区产品免费精品久久75| 午夜精品一区二区三区四区| 亚洲美女中文字幕| 久久夜色撩人精品| 久久精品网址| 国产精品稀缺呦系列在线| 亚洲国产精选| 亚洲国产黄色| 久久久久久久97| 欧美综合国产精品久久丁香| 欧美日韩高清区| 亚洲国产成人精品久久| 狠狠色综合播放一区二区| 亚洲一区国产精品| 午夜精品福利在线观看| 亚洲黄色成人| 欧美日韩免费| 日韩午夜视频在线观看| 亚洲美女视频在线观看| 免费欧美在线视频| 欧美不卡视频一区| 精品不卡在线| 久久久久国产成人精品亚洲午夜| 久久国产天堂福利天堂| 国产日韩欧美一区在线 | 欧美日韩色一区| 日韩一区二区久久| 亚洲一级二级在线| 欧美午夜视频在线观看| 一本色道久久综合狠狠躁的推荐| 亚洲蜜桃精久久久久久久| 欧美激情二区三区| 99精品视频免费| 亚洲欧美日韩网| 国产欧美日韩不卡免费| 午夜视频久久久| 蜜臀av性久久久久蜜臀aⅴ四虎 | 亚洲影视九九影院在线观看| 欧美一区二区成人6969| 国产精品自在欧美一区| 小嫩嫩精品导航| 开心色5月久久精品| 亚洲国产日韩欧美一区二区三区| 欧美成黄导航| 在线亚洲精品| 久久精品国产精品亚洲综合| 黄色一区二区三区四区| 欧美成人福利视频| 日韩亚洲国产精品| 欧美主播一区二区三区美女 久久精品人| 国产精品久久国产精品99gif | 美女精品在线| 亚洲狼人综合| 久久国产精品久久w女人spa| 狠狠噜噜久久| 欧美日韩成人在线观看| 午夜精品理论片| 欧美电影在线观看完整版| 这里只有精品在线播放| 国产日韩欧美三级| 欧美精品色综合| 一区二区日韩免费看| 久久久精品性| 亚洲精品欧美| 国内成人精品视频| 欧美精品1区2区| 久久国产精品色婷婷| 一区二区三区国产| 欧美高清在线一区| 欧美一二区视频| 精品成人一区二区| 欧美日韩一级视频| 麻豆国产精品777777在线 | 欧美色精品在线视频| 99国内精品久久| 欧美日韩专区在线| 亚洲一区二区三区四区五区黄 | 亚洲精选一区二区| 国产精品亚洲综合一区在线观看 | 国产精品日韩高清| 久久综合综合久久综合| 亚洲香蕉伊综合在人在线视看| 美日韩精品免费| 亚洲欧美日韩中文播放| 亚洲精品视频在线看| 国产亚洲精品高潮| 欧美日韩亚洲一区二区| 男人的天堂亚洲| 欧美在线观看日本一区| 一区二区三区三区在线|