摘要:轉(zhuǎn)載說(shuō)明來(lái)源添加全文搜索功能入門一使用的工具是的開源搜索框架,該框架支持搜索引擎,不用更改代碼,直接切換引擎,減少代碼量。修改如下添加修改為如下第二步在中修改引擎,如下第三步重建索引,在進(jìn)行搜索中文試試吧。
一、使用的工具感覺網(wǎng)絡(luò)上關(guān)于Django全文搜索的中文文章太少,并且講的也不是很到位,就是簡(jiǎn)單介紹了怎么配置,并沒有說(shuō)這樣配置有什么用,所以依然很迷茫。所以希望我這篇文章能夠幫助到后來(lái)人。
轉(zhuǎn)載說(shuō)明來(lái)源 http://tenlee2012.github.io/2...添加全文搜索功能入門/
haystack是django的開源搜索框架,該框架支持Solr, Elasticsearch, Whoosh, *Xapian*搜索引擎,不用更改代碼,直接切換引擎,減少代碼量。
搜索引擎使用Whoosh,這是一個(gè)由純Python實(shí)現(xiàn)的全文搜索引擎,沒有二進(jìn)制文件等,比較小巧,配置比較簡(jiǎn)單,當(dāng)然性能自然略低。
中文分詞Jieba,由于Whoosh自帶的是英文分詞,對(duì)中文的分詞支持不是太好,故用jieba替換whoosh的分詞組件。
其他:Python 3.4.4, Django 1.8.3,Debian 4.2.6_3
二、配置說(shuō)明現(xiàn)在假設(shè)我們的項(xiàng)目叫做Project,有一個(gè)myapp的app,簡(jiǎn)略的目錄結(jié)構(gòu)如下。
- Project - Project - settings.py - blog - models.py
此models.py的內(nèi)容假設(shè)如下:
from django.db import models from django.contrib.auth.models import User class Note(models.Model): user = models.ForeignKey(User) pub_date = models.DateTimeField() title = models.CharField(max_length=200) body = models.TextField() def __str__(self): return self.title
1. 首先安裝各工具
pip install whoosh django-haystack jieba
配置Django項(xiàng)目的settings.py里面的 INSTALLED_APPS添加Haystack,例子:
INSTALLED_APPS = [ "django.contrib.admin", "django.contrib.auth", "django.contrib.contenttypes", "django.contrib.sessions", "django.contrib.sites", # Added. haystack先添加, "haystack", # Then your usual apps... 自己的app要寫在haystakc后面 "blog", ]
點(diǎn)我看英文原版
本教程使用的是Whoosh,故配置如下:
import os HAYSTACK_CONNECTIONS = { "default": { "ENGINE": "haystack.backends.whoosh_backend.WhooshEngine", "PATH": os.path.join(os.path.dirname(__file__), "whoosh_index"), }, }
其中顧名思義,ENGINE為使用的引擎必須要有,如果引擎是Whoosh,則PATH必須要填寫,其為Whoosh 索引文件的存放文件夾。
其他引擎的配置見官方文檔
如果你想針對(duì)某個(gè)app例如mainapp做全文檢索,則必須在mainapp的目錄下面建立search_indexes.py文件,文件名不能修改。內(nèi)容如下:
import datetime from haystack import indexes from myapp.models import Note class NoteIndex(indexes.SearchIndex, indexes.Indexable): text = indexes.CharField(document=True, use_template=True) author = indexes.CharField(model_attr="user") pub_date = indexes.DateTimeField(model_attr="pub_date") def get_model(self): return Note def index_queryset(self, using=None): """Used when the entire index for model is updated.""" return self.get_model().objects.filter(pub_date__lte=datetime.datetime.now())
每個(gè)索引里面必須有且只能有一個(gè)字段為document=True,這代表haystack 和搜索引擎將使用此字段的內(nèi)容作為索引進(jìn)行檢索(primary field)。其他的字段只是附屬的屬性,方便調(diào)用,并不作為檢索數(shù)據(jù)。
注意:如果使用一個(gè)字段設(shè)置了document=True,則一般約定此字段名為text,這是在SearchIndex類里面一貫的命名,以防止后臺(tái)混亂,當(dāng)然名字你也可以隨便改,不過(guò)不建議改。
并且,haystack提供了use_template=True在text字段,這樣就允許我們使用數(shù)據(jù)模板去建立搜索引擎索引的文件,使用方便(官方推薦,當(dāng)然還有其他復(fù)雜的建立索引文件的方式,目前我還不知道),數(shù)據(jù)模板的路徑為yourapp/templates/search/indexes/yourapp/note_text.txt,例如本例子為blog/templates/search/indexes/blog/note_text.txt文件名必須為要索引的類名_text.txt,其內(nèi)容為
{{ object.title }} {{ object.user.get_full_name }} {{ object.body }}
這個(gè)數(shù)據(jù)模板的作用是對(duì)Note.title, Note.user.get_full_name,Note.body這三個(gè)字段建立索引,當(dāng)檢索的時(shí)候會(huì)對(duì)這三個(gè)字段做全文檢索匹配。
在urls.py中配置如下url信息,當(dāng)然url路由可以隨意寫。
(r"^search/", include("haystack.urls")),
其實(shí)haystack.urls的內(nèi)容為,
from django.conf.urls import url from haystack.views import SearchView urlpatterns = [ url(r"^$", SearchView(), name="haystack_search"), ]
SearchView()視圖函數(shù)默認(rèn)使用的html模板為當(dāng)前app目錄下,路徑為myapp/templates/search/search.html
所以需要在blog/templates/search/下添加search.html文件,內(nèi)容為
{% extends "base.html" %} {% block content %}{% endblock %}Search
很明顯,它自帶了分頁(yè)。
使用python manage.py rebuild_index或者使用update_index命令。
好,下面運(yùn)行項(xiàng)目,進(jìn)入該url搜索一下試試吧。
三、下面要做的,使用jieba分詞將文件whoosh_backend.py(該文件路徑為python路徑/lib/python3.4/site-packages/haystack/backends/whoosh_backend.py
)拷貝到app下面,并重命名為whoosh_cn_backend.py,例如blog/whoosh_cn_backend.py。修改如下
添加from jieba.analyse import ChineseAnalyzer
修改為如下
schema_fields[field_class.index_fieldname] = TEXT(stored=True, analyzer=ChineseAnalyzer(), field_boost=field_class.boost)
在settings.py中修改引擎,如下
import os HAYSTACK_CONNECTIONS = { "default": { "ENGINE": "blog.whoosh_cn_backend.WhooshEngine", "PATH": os.path.join(BASE_DIR, "whoosh_index" }, }
重建索引,在進(jìn)行搜索中文試試吧。
如果沒有索引自動(dòng)更新,那么每當(dāng)有新數(shù)據(jù)添加到數(shù)據(jù)庫(kù),就要手動(dòng)執(zhí)行update_index命令是不科學(xué)的。自動(dòng)更新索引的最簡(jiǎn)單方法在
settings.py添加一個(gè)信號(hào)。
HAYSTACK_SIGNAL_PROCESSOR = "haystack.signals.RealtimeSignalProcessor"
官方文檔
看了這入門篇,你現(xiàn)在應(yīng)該大概能配置一個(gè)簡(jiǎn)單的全文搜索了吧,如果想自定義怎么辦? 建議閱讀官方文檔和github的源碼。
文章版權(quán)歸作者所有,未經(jīng)允許請(qǐng)勿轉(zhuǎn)載,若此文章存在違規(guī)行為,您可以聯(lián)系管理員刪除。
轉(zhuǎn)載請(qǐng)注明本文地址:http://systransis.cn/yun/38108.html
摘要:搜索引擎使用,是一個(gè)純實(shí)現(xiàn)的全文搜索引擎,小巧簡(jiǎn)單。中文搜索需要進(jìn)行中文分詞,使用。高亮部分的源碼位于和文件中,可復(fù)制進(jìn)行修改,實(shí)現(xiàn)自定義高亮功能。 前言 django是python語(yǔ)言的一個(gè)web框架,功能強(qiáng)大。配合一些插件可為web網(wǎng)站很方便地添加搜索功能。 搜索引擎使用whoosh,是一個(gè)純python實(shí)現(xiàn)的全文搜索引擎,小巧簡(jiǎn)單。 中文搜索需要進(jìn)行中文分詞,使用jieba。 直...
摘要:前言羅子雄如何成為一名優(yōu)秀設(shè)計(jì)師董明偉工程師的入門和進(jìn)階董明偉基于自己實(shí)踐講的知乎為新人提供了很多實(shí)用建議,他推薦的羅子雄如何成為一名優(yōu)秀設(shè)計(jì)師的演講講的非常好,總結(jié)了設(shè)計(jì)師從入門到提高的優(yōu)秀實(shí)踐。 前言 羅子雄:如何成為一名優(yōu)秀設(shè)計(jì)師 董明偉:Python 工程師的入門和進(jìn)階 董明偉基于自己實(shí)踐講的知乎live為Python新人提供了很多實(shí)用建議,他推薦的羅子雄:如何成為一名優(yōu)秀...
摘要:語(yǔ)法支持再次打開文件,在文件的最后添加指明了使用語(yǔ)法標(biāo)記,做了兩個(gè)拓展,其中表示支持語(yǔ)法高亮,包含的特性請(qǐng)參見相關(guān)文檔。語(yǔ)法高亮支持注意這一步必須在安裝完主題之后。 目前網(wǎng)上搭建個(gè)人博客的方案很多,雖然使用諸如 Wordpress ( PHP )、Hexo ( Node.js ) 等可以方便快速地搭建一款功能齊全的高性能個(gè)人博客,但是本文將嘗試一種更為小眾化的方案 —— 一款基于 dj...
摘要:首先,在學(xué)習(xí)之前一定會(huì)考慮一個(gè)問(wèn)題版本選擇對(duì)于編程零基礎(chǔ)的人來(lái)說(shuō),選擇。建議從下面課程開始教程標(biāo)準(zhǔn)庫(kù)官方文檔非常貼心地提供中文翻譯首先需要學(xué)習(xí)的基礎(chǔ)知識(shí),下載安裝導(dǎo)入庫(kù)字符串處理函數(shù)使用等等。 提前說(shuō)一下,這篇福利多多,別的不說(shuō),直接讓你玩回最有手感的懷舊游戲,參數(shù)貼圖很方便自己可以根據(jù)喜好修改哦。 本篇通過(guò)以下四塊展開,提供大量資源對(duì)應(yīng)。 showImg(https://segmen...
閱讀 2668·2021-11-24 10:44
閱讀 1928·2021-11-22 13:53
閱讀 1952·2021-09-30 09:47
閱讀 3713·2021-09-22 16:00
閱讀 2444·2021-09-08 09:36
閱讀 2323·2019-08-30 15:53
閱讀 2798·2019-08-30 15:48
閱讀 996·2019-08-30 15:44