成人国产在线小视频_日韩寡妇人妻调教在线播放_色成人www永久在线观看_2018国产精品久久_亚洲欧美高清在线30p_亚洲少妇综合一区_黄色在线播放国产_亚洲另类技巧小说校园_国产主播xx日韩_a级毛片在线免费

資訊專欄INFORMATION COLUMN

Django添加全文搜索功能入門篇

lookSomeone / 625人閱讀

摘要:轉(zhuǎn)載說(shuō)明來(lái)源添加全文搜索功能入門一使用的工具是的開源搜索框架,該框架支持搜索引擎,不用更改代碼,直接切換引擎,減少代碼量。修改如下添加修改為如下第二步在中修改引擎,如下第三步重建索引,在進(jìn)行搜索中文試試吧。

感覺網(wǎng)絡(luò)上關(guān)于Django全文搜索的中文文章太少,并且講的也不是很到位,就是簡(jiǎn)單介紹了怎么配置,并沒有說(shuō)這樣配置有什么用,所以依然很迷茫。所以希望我這篇文章能夠幫助到后來(lái)人。

轉(zhuǎn)載說(shuō)明來(lái)源 http://tenlee2012.github.io/2...添加全文搜索功能入門/

一、使用的工具

haystack是django的開源搜索框架,該框架支持Solr, Elasticsearch, Whoosh, *Xapian*搜索引擎,不用更改代碼,直接切換引擎,減少代碼量。

搜索引擎使用Whoosh,這是一個(gè)由純Python實(shí)現(xiàn)的全文搜索引擎,沒有二進(jìn)制文件等,比較小巧,配置比較簡(jiǎn)單,當(dāng)然性能自然略低。

中文分詞Jieba,由于Whoosh自帶的是英文分詞,對(duì)中文的分詞支持不是太好,故用jieba替換whoosh的分詞組件。

其他:Python 3.4.4, Django 1.8.3,Debian 4.2.6_3

二、配置說(shuō)明

現(xiàn)在假設(shè)我們的項(xiàng)目叫做Project,有一個(gè)myapp的app,簡(jiǎn)略的目錄結(jié)構(gòu)如下。

 - Project
   - Project
     - settings.py
   - blog
     - models.py

models.py的內(nèi)容假設(shè)如下:

from django.db import models
from django.contrib.auth.models import User


class Note(models.Model):
    user = models.ForeignKey(User)
    pub_date = models.DateTimeField()
    title = models.CharField(max_length=200)
    body = models.TextField()

    def __str__(self):
        return self.title

1. 首先安裝各工具

pip install whoosh django-haystack jieba
2. 添加 Haystack 到Django的?INSTALLED_APPS

配置Django項(xiàng)目的settings.py里面的 INSTALLED_APPS添加Haystack,例子:

INSTALLED_APPS = [ 
        "django.contrib.admin",
        "django.contrib.auth", 
        "django.contrib.contenttypes", 
        "django.contrib.sessions", 
        "django.contrib.sites", 

          # Added. haystack先添加,
          "haystack", 
          # Then your usual apps... 自己的app要寫在haystakc后面
          "blog",
]

點(diǎn)我看英文原版

3. 修改 你的?settings.py,以配置引擎

本教程使用的是Whoosh,故配置如下:

import os
HAYSTACK_CONNECTIONS = {
    "default": {
        "ENGINE": "haystack.backends.whoosh_backend.WhooshEngine",
        "PATH": os.path.join(os.path.dirname(__file__), "whoosh_index"),
    },
}

其中顧名思義,ENGINE為使用的引擎必須要有,如果引擎是Whoosh,則PATH必須要填寫,其為Whoosh 索引文件的存放文件夾。

其他引擎的配置見官方文檔

4.創(chuàng)建索引

如果你想針對(duì)某個(gè)app例如mainapp做全文檢索,則必須在mainapp的目錄下面建立search_indexes.py文件,文件名不能修改。內(nèi)容如下:

import datetime
from haystack import indexes
from myapp.models import Note

class NoteIndex(indexes.SearchIndex, indexes.Indexable):
    text = indexes.CharField(document=True, use_template=True)
    
    author = indexes.CharField(model_attr="user")
    pub_date = indexes.DateTimeField(model_attr="pub_date")

    def get_model(self):
        return Note

    def index_queryset(self, using=None):
        """Used when the entire index for model is updated."""
        return self.get_model().objects.filter(pub_date__lte=datetime.datetime.now())

每個(gè)索引里面必須有且只能有一個(gè)字段為document=True,這代表haystack 和搜索引擎將使用此字段的內(nèi)容作為索引進(jìn)行檢索(primary field)。其他的字段只是附屬的屬性,方便調(diào)用,并不作為檢索數(shù)據(jù)。

注意:如果使用一個(gè)字段設(shè)置了document=True,則一般約定此字段名為text,這是在SearchIndex類里面一貫的命名,以防止后臺(tái)混亂,當(dāng)然名字你也可以隨便改,不過(guò)不建議改。

并且,haystack提供了use_template=Truetext字段,這樣就允許我們使用數(shù)據(jù)模板去建立搜索引擎索引的文件,使用方便(官方推薦,當(dāng)然還有其他復(fù)雜的建立索引文件的方式,目前我還不知道),數(shù)據(jù)模板的路徑為yourapp/templates/search/indexes/yourapp/note_text.txt,例如本例子為blog/templates/search/indexes/blog/note_text.txt文件名必須為要索引的類名_text.txt,其內(nèi)容為

{{ object.title }}
{{ object.user.get_full_name }}
{{ object.body }}

這個(gè)數(shù)據(jù)模板的作用是對(duì)Note.title, Note.user.get_full_name,Note.body這三個(gè)字段建立索引,當(dāng)檢索的時(shí)候會(huì)對(duì)這三個(gè)字段做全文檢索匹配。

5.在URL配置中添加SearchView,并配置模板

urls.py中配置如下url信息,當(dāng)然url路由可以隨意寫。

(r"^search/", include("haystack.urls")),

其實(shí)haystack.urls的內(nèi)容為,

from django.conf.urls import url
from haystack.views import SearchView

urlpatterns = [
    url(r"^$", SearchView(), name="haystack_search"),
]

SearchView()視圖函數(shù)默認(rèn)使用的html模板為當(dāng)前app目錄下,路徑為myapp/templates/search/search.html
所以需要在blog/templates/search/下添加search.html文件,內(nèi)容為

{% extends "base.html" %}

{% block content %}
    

Search

{{ form.as_table }}
?
{% if query %}

Results

{% for result in page.object_list %}

{{ result.object.title }}

{% empty %}

No results found.

{% endfor %} {% if page.has_previous or page.has_next %}
{% if page.has_previous %}{% endif %}? Previous{% if page.has_previous %}{% endif %} | {% if page.has_next %}{% endif %}Next ?{% if page.has_next %}{% endif %}
{% endif %} {% else %} {# Show some example queries to run, maybe query syntax, something else? #} {% endif %}
{% endblock %}

很明顯,它自帶了分頁(yè)。

6.最后一步,重建索引文件

使用python manage.py rebuild_index或者使用update_index命令。

好,下面運(yùn)行項(xiàng)目,進(jìn)入該url搜索一下試試吧。

三、下面要做的,使用jieba分詞
第一步

將文件whoosh_backend.py(該文件路徑為python路徑/lib/python3.4/site-packages/haystack/backends/whoosh_backend.py
)拷貝到app下面,并重命名為whoosh_cn_backend.py,例如blog/whoosh_cn_backend.py。修改如下
添加from jieba.analyse import ChineseAnalyzer
修改為如下

schema_fields[field_class.index_fieldname] =
    TEXT(stored=True, analyzer=ChineseAnalyzer(),
            field_boost=field_class.boost)
第二步

settings.py中修改引擎,如下

import os
HAYSTACK_CONNECTIONS = {
    "default": {
        "ENGINE": "blog.whoosh_cn_backend.WhooshEngine",
        "PATH": os.path.join(BASE_DIR, "whoosh_index"
    },
}
第三步

重建索引,在進(jìn)行搜索中文試試吧。

索引自動(dòng)更新

如果沒有索引自動(dòng)更新,那么每當(dāng)有新數(shù)據(jù)添加到數(shù)據(jù)庫(kù),就要手動(dòng)執(zhí)行update_index命令是不科學(xué)的。自動(dòng)更新索引的最簡(jiǎn)單方法在
settings.py添加一個(gè)信號(hào)。

HAYSTACK_SIGNAL_PROCESSOR =
            "haystack.signals.RealtimeSignalProcessor"

官方文檔


看了這入門篇,你現(xiàn)在應(yīng)該大概能配置一個(gè)簡(jiǎn)單的全文搜索了吧,如果想自定義怎么辦? 建議閱讀官方文檔和github的源碼。

文章版權(quán)歸作者所有,未經(jīng)允許請(qǐng)勿轉(zhuǎn)載,若此文章存在違規(guī)行為,您可以聯(lián)系管理員刪除。

轉(zhuǎn)載請(qǐng)注明本文地址:http://systransis.cn/yun/38108.html

相關(guān)文章

  • 使用haystack實(shí)現(xiàn)django全文檢索搜索引擎功能

    摘要:搜索引擎使用,是一個(gè)純實(shí)現(xiàn)的全文搜索引擎,小巧簡(jiǎn)單。中文搜索需要進(jìn)行中文分詞,使用。高亮部分的源碼位于和文件中,可復(fù)制進(jìn)行修改,實(shí)現(xiàn)自定義高亮功能。 前言 django是python語(yǔ)言的一個(gè)web框架,功能強(qiáng)大。配合一些插件可為web網(wǎng)站很方便地添加搜索功能。 搜索引擎使用whoosh,是一個(gè)純python實(shí)現(xiàn)的全文搜索引擎,小巧簡(jiǎn)單。 中文搜索需要進(jìn)行中文分詞,使用jieba。 直...

    wh469012917 評(píng)論0 收藏0
  • 如何成為一名優(yōu)秀的程序員

    摘要:前言羅子雄如何成為一名優(yōu)秀設(shè)計(jì)師董明偉工程師的入門和進(jìn)階董明偉基于自己實(shí)踐講的知乎為新人提供了很多實(shí)用建議,他推薦的羅子雄如何成為一名優(yōu)秀設(shè)計(jì)師的演講講的非常好,總結(jié)了設(shè)計(jì)師從入門到提高的優(yōu)秀實(shí)踐。 前言 羅子雄:如何成為一名優(yōu)秀設(shè)計(jì)師 董明偉:Python 工程師的入門和進(jìn)階 董明偉基于自己實(shí)踐講的知乎live為Python新人提供了很多實(shí)用建議,他推薦的羅子雄:如何成為一名優(yōu)秀...

    keelii 評(píng)論0 收藏0
  • 使用 django-blog-zinnia 搭建個(gè)人博客

    摘要:語(yǔ)法支持再次打開文件,在文件的最后添加指明了使用語(yǔ)法標(biāo)記,做了兩個(gè)拓展,其中表示支持語(yǔ)法高亮,包含的特性請(qǐng)參見相關(guān)文檔。語(yǔ)法高亮支持注意這一步必須在安裝完主題之后。 目前網(wǎng)上搭建個(gè)人博客的方案很多,雖然使用諸如 Wordpress ( PHP )、Hexo ( Node.js ) 等可以方便快速地搭建一款功能齊全的高性能個(gè)人博客,但是本文將嘗試一種更為小眾化的方案 —— 一款基于 dj...

    褰辯話 評(píng)論0 收藏0
  • 編程零基礎(chǔ)應(yīng)當(dāng)如何開始學(xué)習(xí) Python?

    摘要:首先,在學(xué)習(xí)之前一定會(huì)考慮一個(gè)問(wèn)題版本選擇對(duì)于編程零基礎(chǔ)的人來(lái)說(shuō),選擇。建議從下面課程開始教程標(biāo)準(zhǔn)庫(kù)官方文檔非常貼心地提供中文翻譯首先需要學(xué)習(xí)的基礎(chǔ)知識(shí),下載安裝導(dǎo)入庫(kù)字符串處理函數(shù)使用等等。 提前說(shuō)一下,這篇福利多多,別的不說(shuō),直接讓你玩回最有手感的懷舊游戲,參數(shù)貼圖很方便自己可以根據(jù)喜好修改哦。 本篇通過(guò)以下四塊展開,提供大量資源對(duì)應(yīng)。 showImg(https://segmen...

    JackJiang 評(píng)論0 收藏0

發(fā)表評(píng)論

0條評(píng)論

閱讀需要支付1元查看
<