soi kèo bóng đá truoctran từ dừng là những từ rất phổ biến, xuất hiện trong hầu hết mọi tài liệu và không có giá trị phân biệt đối xử. Do đó, chúng có thể bị bỏ qua trong bối cảnh tìm kiếm toàn văn. Ví dụ: mọi văn bản tiếng Anh đều chứa soi kèo bóng đá truoctran từ nhưAvàThe, vì vậy việc lưu trữ chúng trong soi kèo bóng đá truoctran chỉ mục là vô ích. Tuy nhiên, các từ dừng lại ảnh hưởng đến các vị trí trongtsVector, từ đó ảnh hưởng đến xếp hạng:

chọn to_tsvector ('tiếng Anh', 'trong danh sách soi kèo bóng đá truoctran từ dừng');
        to_tsVector
--------------------------------
 'Danh sách': 3 'Dừng': 5 'Word': 6

Vị trí bị thiếu 1,2,4 là do soi kèo bóng đá truoctran từ dừng. Xếp hạng được tính toán cho soi kèo bóng đá truoctran tài liệu có và không có từ dừng hoàn toàn khác:

17808_18084

Nó tùy thuộc vào soi kèo bóng đá truoctran cụ thể cách nó đối xử với các từ dừng. Ví dụ,ISPELLsoi kèo bóng đá truoctran đầu tiên bình thường hóa các từ và sau đó nhìn vào danh sách các từ dừng, trong khiSnowballĐầu tiên kiểm tra danh sách các từ dừng. Lý do cho các hành vi khác nhau là soi kèo bóng đá truoctran nỗ lực để giảm tiếng ồn.

Theđơn giảnMẫu soi kèo bóng đá truoctran hoạt động bằng cách chuyển đổi mã thông báo đầu vào sang chữ thường và kiểm tra nó với một tệp các từ dừng. Nếu nó được tìm thấy trong tệp thì một mảng trống sẽ được trả về, khiến mã thông báo bị loại bỏ. Nếu không, dạng từ có hàm lượng từ thấp hơn được trả về dưới dạng từ vựng được chuẩn hóa. Ngoài ra, soi kèo bóng đá truoctran có thể được cấu hình để báo cáo các từ không ngừng là không được nhận ra, cho phép chúng được chuyển sang soi kèo bóng đá truoctran tiếp theo trong danh sách.

Đây là một ví dụ về định nghĩa soi kèo bóng đá truoctran bằng cách sử dụngđơn giảnMẫu:

Tạo soi kèo bóng đá truoctran tìm kiếm văn bản công khai.simple_dict (
    Mẫu = pg_catalog.simple,
    Stopwords = tiếng Anh
);

ở đây,Tiếng Anhlà tên cơ sở của soi kèo bóng đá truoctran tập tin của các từ dừng. Tên đầy đủ của tệp sẽ là$ Sharedir/Tsearch_data/English.stop, trong đó$ sharedircó nghĩa làPostgreSQLThư mục dữ liệu chia sẻ của cài đặt, thường là/usr/local/Share/postgreSQL(Sử dụngpg_config --SharedirĐể xác định nó nếu bạn không chắc chắn). Định dạng tệp chỉ đơn giản là soi kèo bóng đá truoctran danh sách các từ, soi kèo bóng đá truoctran từ trên mỗi dòng. Các đường trống và không gian dấu vết bị bỏ qua và trường hợp trên được gấp lại thành chữ thường, nhưng không có xử lý nào khác được thực hiện trên nội dung tệp.

Bây giờ chúng ta có thể kiểm tra soi kèo bóng đá truoctran của mình:

chọn ts_lexize ('public.simple_dict', 'có');
 ts_lexize
-----------
 Đúng

Chọn ts_lexize ('public.simple_dict', 'the');
 ts_lexize
-----------

Chúng ta cũng có thể chọn trả lạinull, thay vì từ có chữ thấp hơn, nếu nó không được tìm thấy trong tệp từ dừng. Hành vi này được chọn bằng cách đặt soi kèo bóng đá truoctranChấp nhậntham số đếnSai. Tiếp tục ví dụ:

thay đổi soi kèo bóng đá truoctran tìm kiếm văn bản công khai.simple_dict (Accept = false);

Chọn ts_lexize ('public.simple_dict', 'có');
 ts_lexize
-----------

Chọn ts_lexize ('public.simple_dict', 'the');
 ts_lexize
-----------

Với cài đặt mặc định củaChấp nhận=TRUE, nó chỉ hữu ích khi đặt soi kèo bóng đá truoctranđơn giảnsoi kèo bóng đá truoctran ở cuối danh sách các soi kèo bóng đá truoctran, vì nó sẽ không bao giờ chuyển bất kỳ mã thông báo nào cho một soi kèo bóng đá truoctran sau. Ngược lại,Chấp nhận=falsechỉ hữu ích khi có ít nhất một soi kèo bóng đá truoctran sau.

Mẫu soi kèo bóng đá truoctran này được sử dụng để tạo soi kèo bóng đá truoctran thay thế một từ bằng một từ đồng nghĩa. Các cụm từ không được hỗ trợ (sử dụng mẫu Thesaurus (Phần 12.6.4) cho điều đó). Một soi kèo bóng đá truoctran đồng nghĩa có thể được sử dụng để khắc phục các vấn đề ngôn ngữ, ví dụ, để ngăn chặn một soi kèo bóng đá truoctran gốc tiếng Anh giảm từParisđếnMạnhpariHồi. Nó đủ để có soi kèo bóng đá truoctranParis Parisdòng trong soi kèo bóng đá truoctran đồng nghĩa và đặt nó trướcEnglish_stemsoi kèo bóng đá truoctran. Ví dụ:

Chọn * từ ts_debug ('tiếng Anh', 'paris');
   Bí danh |   Mô tả | mã thông báo |  soi kèo bóng đá truoctran |  soi kèo bóng đá truoctran | từ vựng 
-----------+------------------+-------+----------------+--------------+-------------
 asciiword | Từ, tất cả ASCII | Paris | English_stem | Tiếng Anh_stem | pari

Tạo soi kèo bóng đá truoctran tìm kiếm văn bản my_synonymy (
    Template = từ đồng nghĩa,
    Từ đồng nghĩa = my_syn từ
);

Thay đổi cấu hình tìm kiếm văn bản tiếng Anh
    Thay đổi ánh xạ cho asciiword
    Với my_synonymy, English_stem;

Chọn * từ ts_debug ('tiếng Anh', 'paris');
   Bí danh |   Mô tả | mã thông báo |       soi kèo bóng đá truoctran | soi kèo bóng đá truoctran | từ vựng 
-----------+------------------+-------+-------------------------------+------------+-------------
 asciiword | Từ, tất cả ASCII | Paris | my_synonymy, English_stem | my_synonymy | Paris

Tham số duy nhất theo yêu cầu củaTừ đồng nghĩaMẫu làTừ đồng nghĩa, là tên cơ sở của tệp cấu hình của nó -my_synonymoussTrong ví dụ trên. Tên đầy đủ của tệp sẽ là$ sharedir/tsearch_data/my_syn từ.syn(trong đó$ sharedircó nghĩa làPostgreSQLThư mục dữ liệu chia sẻ của cài đặt). Định dạng tệp chỉ là soi kèo bóng đá truoctran dòng cho mỗi từ được thay thế, với từ theo sau là từ đồng nghĩa của nó, được phân tách bằng không gian trắng. Các đường trống và không gian dấu vết bị bỏ qua.

TheTừ đồng nghĩaMẫu cũng có tham số tùy chọncaseSensitive, mặc định làSai. KhicaseSensitivelàSai, soi kèo bóng đá truoctran từ trong tệp đồng nghĩa được gấp lại thành chữ thường, như là mã thông báo đầu vào. Khi nó làTrue, soi kèo bóng đá truoctran từ và mã thông báo không được gấp lại thành chữ thường, nhưng được so sánh As-is.

A Asterisk (*) có thể được đặt ở cuối soi kèo bóng đá truoctran từ đồng nghĩa trong tệp cấu hình. Điều này chỉ ra rằng từ đồng nghĩa là tiền tố. Dấu hoa thị bị bỏ qua khi mục được sử dụng trongto_tsVector (), nhưng khi nó được sử dụng trongto_tsquery (), Kết quả sẽ là mục truy vấn với điểm đánh dấu khớp tiền tố (xemPhần 12.3.2). Ví dụ: giả sử chúng ta có soi kèo bóng đá truoctran mục này trong$ sharedir/tsearch_data/từ đồng nghĩa_sample.syn:

Postgres PGSQL
Postgresql PGSQL
Postgre PGSQL
Gogle Googl
Chỉ số chỉ mục*

Sau đó, chúng tôi sẽ nhận được soi kèo bóng đá truoctran kết quả sau:

26040_26812

Một soi kèo bóng đá truoctran soi kèo bóng đá truoctran (đôi khi viết tắt làTZ) là soi kèo bóng đá truoctran tập hợp các từ bao gồm thông tin về các mối quan hệ của các từ và cụm từ, tức là, các thuật ngữ rộng hơn (bt), soi kèo bóng đá truoctran thuật ngữ hẹp hơn (nt), Điều khoản ưa thích, Điều khoản không được ưu tiên, Điều khoản liên quan, v.v.

Về cơ bản, soi kèo bóng đá truoctran soi kèo bóng đá truoctran thay thế tất cả các thuật ngữ không được ưu tiên bằng một thuật ngữ ưa thích và, tùy chọn, bảo tồn các thuật ngữ gốc để lập chỉ mục.PostgreSQL27611_27720cụm từHỗ trợ. Một soi kèo bóng đá truoctran soi kèo bóng đá truoctran yêu cầu một tệp cấu hình của định dạng sau:

# Đây là soi kèo bóng đá truoctran bình luận
Từ mẫu: từ được lập chỉ mục (các) từ
Thêm (các) từ mẫu: từ được lập chỉ mục nhiều hơn
...

trong đó đại tràng (:) Biểu tượng hoạt động như soi kèo bóng đá truoctran dấu phân cách giữa soi kèo bóng đá truoctran cụm từ và sự thay thế của nó.

Một soi kèo bóng đá truoctran soi kèo bóng đá truoctran sử dụng ASubdictionary(được chỉ định trong cấu hình của soi kèo bóng đá truoctran) để bình thường hóa văn bản đầu vào trước khi kiểm tra các kết quả phù hợp cụm từ. Chỉ có thể chọn một bộ phụ. Một lỗi được báo cáo nếu sự phụ không thể nhận ra một từ. Trong trường hợp đó, bạn nên loại bỏ việc sử dụng từ hoặc dạy cho phụ về nó. Bạn có thể đặt dấu hoa thị (*28567_28670phảiĐược biết đến Subdiced.

soi kèo bóng đá truoctran Thesaurus chọn trận đấu dài nhất nếu có nhiều cụm từ phù hợp với đầu vào và các mối quan hệ bị phá vỡ bằng cách sử dụng định nghĩa cuối cùng.

soi kèo bóng đá truoctran từ dừng cụ thể được nhận ra bởi Subdicedary không thể được chỉ định; Thay vào đó sử dụng?Để đánh dấu vị trí nơi có thể xuất hiện từ nào. Ví dụ: giả sử rằngAvàThelà soi kèo bóng đá truoctran từ dừng theo phân nhóm:

? soi kèo bóng đá truoctran ? Hai: SWSW

MatchesA One the TwovàThe A hai; Cả hai sẽ được thay thế bằngSWSW.

Vì soi kèo bóng đá truoctran soi kèo bóng đá truoctran có khả năng nhận biết các cụm từ, nó phải nhớ trạng thái của nó và tương tác với trình phân tích cú pháp. Một soi kèo bóng đá truoctran soi kèo bóng đá truoctran sử dụng các bài tập này để kiểm tra xem nó có nên xử lý từ tiếp theo hay dừng tích lũy không. soi kèo bóng đá truoctran Thesaurus phải được cấu hình cẩn thận. Ví dụ: nếu soi kèo bóng đá truoctran soi kèo bóng đá truoctran được gán để chỉ xử lýasciiwordmã thông báo, sau đó là một định nghĩa soi kèo bóng đá truoctran soi kèo bóng đá truoctran nhưsoi kèo bóng đá truoctran 7sẽ không hoạt động vì loại mã thông báoUINTkhông được gán cho soi kèo bóng đá truoctran soi kèo bóng đá truoctran.

Tạo soi kèo bóng đá truoctran tìm kiếm văn bản soi kèo bóng đá truoctran thesaurus_simple (
    Mẫu = Thesaurus,
    Dictfile = Mythesaurus,
    soi kèo bóng đá truoctran = pg_catalog.english_stem
);

Thay đổi cấu hình tìm kiếm văn bản tiếng Nga
    Thay đổi ánh xạ cho asciiword, asciihword, hword_asciipart
    Với thesaurus_simple;

Supernovae Stars: SN
Nebulae cua: cua

Tạo soi kèo bóng đá truoctran tìm kiếm văn bản soi kèo bóng đá truoctran thesaurus_astro (
    Mẫu = Thesaurus,
    Dictfile = thesaurus_astro,
    soi kèo bóng đá truoctran = English_stem
);

Thay đổi cấu hình tìm kiếm văn bản Nga
    Thay đổi ánh xạ cho asciiword, asciihword, hword_asciipart
    Với thesaurus_astro, English_stem;

Chọn PlainTo_TSQuery ('Supernova Star');
 Plainto_tsquery
-----------------
 'Sn'

Chọn to_tsvector ('Supernova Star');
 to_tsVector
-------------
 'Sn': 1

chọn to_tsquery ('' 'Supernova Star' '');
 to_tsquery
------------
 'Sn'

Supernovae Stars: SN Supernovae Stars

Chọn PlainTo_TSQuery ('Supernova Star');
       Plainto_tsquery
---------------------------------
 'Sn' & 'Supernova' & 'Star'

TheISPELLMẫu soi kèo bóng đá truoctran hỗ trợsoi kèo bóng đá truoctran hình thái, có thể bình thường hóa nhiều hình thức ngôn ngữ khác nhau của soi kèo bóng đá truoctran từ vào cùng soi kèo bóng đá truoctran từ vựng. Ví dụ: soi kèo bóng đá truoctran tiếng AnhISPELLsoi kèo bóng đá truoctran có thể phù hợp với tất cả các khoản thanh toán và liên hợp của thuật ngữ tìm kiếmBank, ví dụ:Ngân hàng, Chance, Ngân hàng, Ngân hàng 'vàNgân hàng.

tiêu chuẩnPostgreSQLPhân phối không bao gồm bất kỳ nàoISPELLTệp cấu hình. soi kèo bóng đá truoctran cho một số lượng lớn ngôn ngữ có sẵn từISPELL. Ngoài ra, một số định dạng tệp soi kèo bóng đá truoctran hiện đại hơn được hỗ trợ -MySpell(oo <2.0.1) vàHunspell(oo = 2.0.2). Một danh sách lớn các soi kèo bóng đá truoctran có sẵn trênWiki OpenOffice.

Để tạoISPELLsoi kèo bóng đá truoctran thực hiện các bước sau:

ở đây,dictfile, AfffilevàstopwordsChỉ định tên cơ sở của các tệp soi kèo bóng đá truoctran, phụ đề và các tệp dừng. Tệp điểm dừng có cùng định dạng được giải thích ở trên chođơn giảnLoại soi kèo bóng đá truoctran. Định dạng của các tệp khác không được chỉ định ở đây nhưng có sẵn từ các trang web đã đề cập ở trên.

soi kèo bóng đá truoctran ISPELL thường nhận ra một bộ từ giới hạn, vì vậy chúng nên được theo sau bởi một soi kèo bóng đá truoctran rộng hơn khác; Ví dụ, một soi kèo bóng đá truoctran bóng tuyết, nhận ra mọi thứ.

The.AFFIXTệp củaISPELLCó cấu trúc sau:

Tiền tố
cờ *a:
    .            Re # as in enter reenter
hậu tố
cờ T:
    E st # như vào muộn mới nhất
    [^Aeiou] y -y, iest # như trong bẩn bẩn nhất
    [Aeiou] y est # như màu xám màu xám nhất
    [^Ey] est # như trong nhỏ nhỏ nhất

và.dictTệp có cấu trúc sau:

Lapse/ADGRS
Lard/dgrs
lớn/prty
Lark/Mrs

Định dạng của.dictTệp là:

basic_form/bệp

trong.AFFIXTệp Mỗi cờ phụ được mô tả ở định dạng sau:

điều kiện [-Stripping_letters,] adding_affix

Ở đây, điều kiện có định dạng tương tự như định dạng của soi kèo bóng đá truoctran biểu thức chính quy. Nó có thể sử dụng soi kèo bóng đá truoctran nhóm[...]và[^...]. Ví dụ,[AEIOU] ycó nghĩa là chữ cái cuối cùng của từ là"Y"Và chữ áp chót là"A", "E", "I", "O"hoặc"U". [^EY]có nghĩa là chữ cái cuối cùng không"E"cũng không"Y".

soi kèo bóng đá truoctran ISPELL hỗ trợ phân tách các từ ghép; một tính năng hữu ích. Lưu ý rằng tệp dán sẽ chỉ định cờ đặc biệt bằng cách sử dụngTừ hợp chất được kiểm soátTuyên bố đánh dấu các từ soi kèo bóng đá truoctran có thể tham gia vào sự hình thành hợp chất:

Từ hợp chất được kiểm soát z

Đây là soi kèo bóng đá truoctran số ví dụ cho ngôn ngữ Na Uy:

40557_40785

MySpellĐịnh dạng là soi kèo bóng đá truoctran tập hợp con củaHunspell. The.AFFIXTệp củaHunspellCó cấu trúc sau:

PFX A Y 1
Pfx a 0 re.
Sfx t n 4
Sfx t 0 st e
Sfx t y iest [^aeiou] y
Sfx t 0 est [aeiou] y
Sfx t 0 est [^ey]

Dòng đầu tiên của lớp phụ là tiêu đề. Các trường của soi kèo bóng đá truoctran quy tắc phụ được liệt kê sau tiêu đề:

The.dictTệp trông giống như.dictTệp củaISPELL:

Larder/m
Lardy/rt
lớn/rspmyt
Larget đã

TheSnowballMẫu soi kèo bóng đá truoctran dựa trên một dự án của Martin Porter, người phát minh ra thuật toán gốc của Porter phổ biến cho ngôn ngữ tiếng Anh. Snowball hiện cung cấp các thuật toán thân cây cho nhiều ngôn ngữ (xemTrang web SnowballĐể biết thêm thông tin). Mỗi thuật toán hiểu cách giảm các dạng từ biến thể phổ biến thành một cơ sở, hoặc gốc, đánh vần trong ngôn ngữ của nó. Một soi kèo bóng đá truoctran bóng tuyết yêu cầuNgôn ngữtham số để xác định sử dụng thân cây nào và tùy chọn có thể chỉ định AstopwordTên tệp đưa ra danh sách soi kèo bóng đá truoctran từ để loại bỏ. (POSTGRESQL43787_43917

Tạo soi kèo bóng đá truoctran tìm kiếm văn bản English_stem (
    Template = Snowball,
    Ngôn ngữ = tiếng Anh,
    Stopwords = tiếng Anh
);

Định dạng tệp dừng giống như đã giải thích.

ASnowballsoi kèo bóng đá truoctran nhận ra mọi thứ, cho dù nó có thể đơn giản hóa từ này hay không, vì vậy nó nên được đặt ở cuối danh sách soi kèo bóng đá truoctran. Thật vô ích khi có nó trước bất kỳ soi kèo bóng đá truoctran nào khác vì một mã thông báo sẽ không bao giờ chuyển qua nó đến soi kèo bóng đá truoctran tiếp theo.