Tìm kiếm toàn văn (hoặc chỉTìm kiếm văn bản) Cung cấp khả năng xác định ngôn ngữ tự nhiênTài kèo bóng đá phápthỏa mãn ATruy vấnvà tùy chọn để sắp xếp chúng theo sự liên quan đến truy vấn. Loại tìm kiếm phổ biến nhất là tìm tất cả các tài kèo bóng đá pháp có chứaĐiều khoản truy vấnvà trả lại chúng theo thứ tự của họTương tựđến truy vấn. kèo bóng đá pháp khái niệm củaTruy vấnvàTương tựrất linh hoạt và phụ thuộc vào ứng dụng cụ thể. Tìm kiếm đơn giản nhất xem xétTruy vấnnhư một tập hợp kèo bóng đá pháp từ vàTương tựLà tần số của các từ truy vấn trong tài kèo bóng đá pháp.
Các toán tử tìm kiếm văn bản đã tồn tại trong cơ sở dữ kèo bóng đá pháp trong nhiều năm.PostgreSQLcó~, ~*, nhưvàilikeNhà khai thác cho các loại dữ kèo bóng đá pháp văn bản, nhưng chúng thiếu nhiều thuộc tính thiết yếu được yêu cầu bởi các hệ thống thông tin hiện đại:
Không có hỗ trợ ngôn ngữ, ngay cả đối với tiếng Anh. Biểu thức thông thường không đủ vì chúng không thể dễ dàng xử lý kèo bóng đá pháp từ có nguồn gốc, ví dụ:thỏa mãnvàthỏa mãn. Bạn có thể bỏ lỡ các tài kèo bóng đá pháp có chứathỏa mãn, mặc dù bạn có thể muốn tìm thấy chúng khi tìm kiếmthỏa mãn. Có thể sử dụnghoặcĐể tìm kiếm nhiều dạng dẫn xuất, nhưng điều này là tẻ nhạt và dễ bị lỗi (kèo bóng đá pháp số từ có thể có vài nghìn dẫn xuất).
Họ không cung cấp đặt hàng (xếp hạng) kết quả tìm kiếm, điều này làm cho chúng không hiệu quả khi tìm thấy hàng ngàn tài kèo bóng đá pháp phù hợp.
Chúng có xu hướng chậm vì không có hỗ trợ chỉ mục, vì vậy họ phải xử lý tất cả các tài kèo bóng đá pháp cho mỗi tìm kiếm.
Lập chỉ mục văn bản đầy đủ cho phép các tài kèo bóng đá pháp đượctiền xử lývà kèo bóng đá pháp chỉ mục được lưu để tìm kiếm nhanh sau. Tiền xử lý bao gồm:
phân tích tài kèo bóng đá pháp phân tích thànhmã thông báo. Rất hữu ích để xác định kèo bóng đá pháp lớp mã thông báo khác nhau, ví dụ: số, từ, từ phức tạp, địa chỉ email, để chúng có thể được xử lý khác nhau.PostgreSQLSử dụng Aphân tích cú phápĐể thực hiện bước này. Một trình phân tích cú pháp tiêu chuẩn được cung cấp và trình phân tích cú pháp tùy chỉnh có thể được tạo cho kèo bóng đá pháp nhu cầu cụ thể.
Chuyển đổi mã thông báo thànhLexeme. kèo bóng đá pháp từ vựng là kèo bóng đá pháp chuỗi, giống như kèo bóng đá pháp mã thông báo, nhưng nó đã đượcchuẩn hóasao cho kèo bóng đá pháp hình thức khác nhau của cùng một từ được tạo ra giống nhau. Ví dụ, bình thường hóa hầu như luôn bao gồm kèo bóng đá pháp chữ cái cao cấp gấp vào trường hợp thấp hơn và thường liên quan đến việc loại bỏ kèo bóng đá pháp hậu tố (chẳng hạn nhưShoặcesbằng tiếng Anh). Điều này cho phép kèo bóng đá pháp tìm kiếm tìm thấy kèo bóng đá pháp dạng biến thể của cùng một từ, mà không cần nhập tất cả kèo bóng đá pháp biến thể có thể.Dừng từ, đó là những từ phổ biến đến mức chúng vô dụng khi tìm kiếm. .PostgreSQLsử dụngTừ điểnĐể thực hiện bước này. kèo bóng đá pháp từ điển tiêu chuẩn khác nhau được cung cấp và kèo bóng đá pháp từ tùy chỉnh có thể được tạo cho kèo bóng đá pháp nhu cầu cụ thể.
Lưu trữ các tài kèo bóng đá pháp được xử lý trước được tối ưu hóa để tìm kiếm. Ví dụ, mỗi tài kèo bóng đá pháp có thể được biểu diễn dưới dạng một mảng được sắp xếp của các từ vựng được chuẩn hóa.Xếp hạng gần, để một tài kèo bóng đá pháp chứa nhiều hơndày đặcVùng của kèo bóng đá pháp từ truy vấn được gán thứ hạng cao hơn một từ có từ truy vấn phân tán.
Từ điển cho phép kiểm soát hạt mịn đối với kèo bóng đá pháp mã thông báo được chuẩn hóa. Với từ điển thích hợp, bạn có thể:
Xác định kèo bóng đá pháp từ không nên lập chỉ mục.
Bản đồ đồng nghĩa với kèo bóng đá pháp từ sử dụngISPELL.
Bản đồ cụm từ kèo bóng đá pháp từ bằng cách sử dụng từ điển đồng nghĩa.
Bản đồ kèo bóng đá pháp biến thể khác nhau của một từ thành một hình thức kinh điển bằng cách sử dụngISPELLTừ điển.
Bản đồ kèo bóng đá pháp biến thể khác nhau của một từ thành một hình thức kinh điển bằng cách sử dụngSnowballQuy tắc Stemmer.
Một kiểu dữ kèo bóng đá phápTSVectorđược cung cấp để lưu trữ các tài kèo bóng đá pháp được xử lý trước, cùng với loạitsqueryđể biểu diễn kèo bóng đá pháp truy vấn đã xử lý (Phần 8.11). Có nhiều chức năng và toán tử có sẵn cho các loại dữ kèo bóng đá pháp này (Phần 9.13), Điều quan trọng nhất là toán tử khớp@@, mà chúng tôi giới thiệu trongPhần 12.1.2. Tìm kiếm toàn văn có thể được tăng tốc bằng kèo bóng đá pháp chỉ mục (Phần 12.9).
ADocumentlà đơn vị tìm kiếm trong hệ thống tìm kiếm văn bản đầy đủ; Ví dụ, kèo bóng đá pháp bài báo tạp chí hoặc tin nhắn email.
cho kèo bóng đá pháp tìm kiếm trongPostgreSQL, một tài kèo bóng đá pháp thường là một trường văn bản trong một hàng của bảng cơ sở dữ kèo bóng đá pháp hoặc có thể là sự kết hợp (nối) của các trường đó, có thể được lưu trữ trong một số bảng hoặc thu được động. Nói cách khác, một tài kèo bóng đá pháp có thể được xây dựng từ các phần khác nhau để lập chỉ mục và nó có thể không được lưu trữ ở bất cứ đâu nói chung.
Chọn Tiêu đề || '' ||
Trên thực tế, trong kèo bóng đá pháp truy vấn ví dụ này,HOUNESCEnên được sử dụng để ngăn chặn kèo bóng đá phápnullthuộc tính từ việc gây ranullKết quả cho toàn bộ tài kèo bóng đá pháp.
Một khả năng khác là lưu trữ các tài kèo bóng đá pháp dưới dạng tệp văn bản đơn giản trong hệ thống tệp. Trong trường hợp này, cơ sở dữ kèo bóng đá pháp có thể được sử dụng để lưu trữ chỉ mục văn bản đầy đủ và để thực hiện các tìm kiếm và một số định danh duy nhất có thể được sử dụng để truy xuất tài kèo bóng đá pháp từ hệ thống tệp.PostgreSQL. Ngoài ra, giữ mọi thứ bên trong cơ sở dữ kèo bóng đá pháp cho phép dễ dàng truy cập vào siêu dữ kèo bóng đá pháp tài kèo bóng đá pháp để hỗ trợ lập chỉ mục và hiển thị.
Đối với mục đích tìm kiếm văn bản, mỗi tài kèo bóng đá pháp phải được giảm xuống mức tiền xử lýtsVectorĐịnh dạng. Tìm kiếm và xếp hạng được thực hiện hoàn toàn trênTSVECTORBiểu diễn của một tài kèo bóng đá pháp - văn bản gốc chỉ cần được truy xuất khi tài kèo bóng đá pháp đã được chọn để hiển thị cho người dùng. Do đó chúng tôi thường nói vềtsVectorLà tài kèo bóng đá pháp, nhưng tất nhiên nó chỉ là một đại diện nhỏ gọn của tài kèo bóng đá pháp đầy đủ.
Tìm kiếm toàn văn trongPostgreSQLdựa trên toán tử khớp@@, trả vềTRUENếu ATSVECTOR(tài kèo bóng đá pháp) khớp với Atsquery(truy vấn). Không quan trọng kiểu dữ kèo bóng đá pháp nào được viết đầu tiên:
Chọn 'kèo bóng đá pháp con mèo béo ngồi trên thảm và ăn kèo bóng đá pháp con chuột béo' :: tsvector @@ 'Cat & Rat' :: Tsquery;
Như ví dụ trên gợi ý, Atsquerykhông chỉ là văn bản thô, nhiều hơn kèo bóng đá phápTSVECTORIS. MỘTtsqueryChứa kèo bóng đá pháp thuật ngữ tìm kiếm, phải được quy định hóa kèo bóng đá pháp từ kèo bóng đá pháp từ ngữ và có thể kết hợp nhiều thuật ngữ bằng cách sử dụng và, hoặc không, và theo sau là kèo bóng đá pháp toán tử. (Để biết chi tiết cú pháp, xemPhần 8.11.2.) Có kèo bóng đá pháp chức năngto_tsquery, Plainto_tsqueryvàPHRASETO_TSQUERYrất hữu ích trong việc chuyển đổi văn bản viết người dùng thành kèo bóng đá pháp thích hợptsquery, chủ yếu bằng cách bình thường hóa kèo bóng đá pháp từ xuất hiện trong văn bản. Tương tự,to_tsVectorđược sử dụng để phân tích và bình thường hóa chuỗi tài kèo bóng đá pháp. Vì vậy, trong thực tế, một kết quả tìm kiếm văn bản sẽ trông giống như thế này:
Chọn to_tsvector ('mèo béo đã ăn chuột chất béo') @@ to_tsquery ('Fat & Rat');
Quan sát rằng trận đấu này sẽ không thành công nếu được viết là
Chọn 'mèo béo đã ăn chuột béo' :: tsvector @@ to_tsquery ('fat & chuột');
Vì ở đây không bình thường hóa từRATSsẽ xảy ra. kèo bóng đá pháp yếu tố của AtsVectorlà những người từ bỏ, được giả định đã được chuẩn hóa, vì vậyRATSkhông khớpRAT.
The@@Nhà điều hành cũng hỗ trợTextĐầu vào, cho phép chuyển đổi rõ ràng chuỗi văn bản thànhTSVECTORhoặctsqueryĐược bỏ qua trong kèo bóng đá pháp trường hợp đơn giản. kèo bóng đá pháp biến thể có sẵn là:
tsvector @@ tsquery
Hai cái đầu tiên chúng ta đã thấy. Biểu mẫuText @@ tsquerylà tương đương vớito_tsVector (x) @@ y. Biểu mẫuText @@ Textlà tương đương vớito_tsVector (x) @@ Plainto_tsquery (y).
trong Atsquery, The&(và) Người vận hành chỉ định rằng cả hai đối số của nó phải xuất hiện trong tài kèo bóng đá pháp để có một trận đấu. Tương tự,|(hoặc) toán tử chỉ định rằng ít nhất một trong kèo bóng đá pháp đối số của nó phải xuất hiện, trong khi!(không) toán tử chỉ định rằng đối số của nó phảikhôngxuất hiện để có kèo bóng đá pháp trận đấu. Ví dụ: truy vấnFat &! con chuộtkhớp với các tài kèo bóng đá pháp có chứaFATnhưng khôngRAT.
Tìm kiếm cụm từ có thể với sự trợ giúp của<-(tiếp theo là)tsqueryToán tử, chỉ khớp với kèo bóng đá pháp đối số của nó có kèo bóng đá pháp trận đấu liền kề và theo thứ tự đã cho. Ví dụ:
Chọn To_TSVECTOR ('Lỗi nghiêm trọng') @@ to_tsquery ('Fatal <- Error');
Có kèo bóng đá pháp phiên bản chung hơn sau đó là toán tử có biểu mẫu<, trong đónnlà một số nguyên đứng cho sự khác biệt giữa kèo bóng đá pháp vị trí của kèo bóng đá pháp từ vựng phù hợp.<1giống như<-, trong khi<2Cho phép chính xác một từ vựng khác xuất hiện giữa kèo bóng đá pháp trận đấu, v.v. ThePHRASETO_TSQUERYHàm sử dụng toán tử này để xây dựng kèo bóng đá pháptsquerycó thể khớp với cụm từ đa từ khi một số từ là kèo bóng đá pháp từ dừng. Ví dụ:
chọn Phraseto_tsquery ('mèo ATS RATS');
kèo bóng đá pháp trường hợp đặc biệt đôi khi hữu ích là<0có thể được sử dụng để yêu cầu hai mẫu phù hợp với cùng kèo bóng đá pháp từ.
dấu ngoặc đơn có thể được sử dụng để kiểm soát việc làm tổ củatsqueryNgười vận hành. Không có dấu ngoặc đơn,|ràng buộc ít nhất, sau đó&, sau đó<-và!chặt chẽ nhất.
Đáng chú ý rằng kèo bóng đá pháp nhà điều hành và/hoặc/không có nghĩa là một cái gì đó khác biệt một cách tinh tế khi chúng nằm trong kèo bóng đá pháp đối số của một toán tử theo sau so với khi chúng không, bởi vì trong đó là vị trí chính xác của trận đấu là rất đáng kể. Ví dụ: bình thường! XChỉ phù hợp với các tài kèo bóng đá pháp không chứaXBất cứ nơi nào. Nhưng! X <- yMatchesYNếu nó không phải là ngay sau kèo bóng đá phápx; sự xuất hiện củaxnơi khác trong tài kèo bóng đá pháp không ngăn được một trận đấu. Một ví dụ khác làX & YThông thường chỉ yêu cầu điều đóxvàYCả hai xuất hiện ở đâu đó trong tài kèo bóng đá pháp, nhưng(x & y) <- zYêu cầuxvàYĐể phù hợp tại cùng kèo bóng đá pháp nơi, ngay trước AZ. Do đó, truy vấn này hoạt động khác vớix <- z & y <- z, sẽ khớp với một tài kèo bóng đá pháp chứa hai chuỗi riêng biệtX ZvàY Z. (Truy vấn cụ thể này là vô dụng như được viết, vìXvàYKhông thể khớp tại cùng một nơi; Nhưng với kèo bóng đá pháp tình huống phức tạp hơn như kèo bóng đá pháp mẫu khớp tiền tố, một truy vấn của biểu mẫu này có thể hữu ích.)
Trên đây đều là tất cả kèo bóng đá pháp ví dụ tìm kiếm văn bản đơn giản. Như đã đề cập trước đây, chức năng tìm kiếm văn bản đầy đủ bao gồm khả năng thực hiện nhiều việc hơn: bỏ qua việc lập chỉ mục một số từ (từ dừng), từ đồng nghĩa quy trình và sử dụng phân tích cú pháp tinh vi, ví dụ, phân tích cú pháp dựa trên không chỉ là không gian trắng.Cấu hình tìm kiếm văn bản. PostgreSQLđi kèm với kèo bóng đá pháp cấu hình được xác định trước cho nhiều ngôn ngữ và bạn có thể dễ dàng tạo cấu hình của riêng mình. (PSQL's\ DFLệnh hiển thị tất cả kèo bóng đá pháp cấu hình có sẵn.)
Trong quá trình cài đặt, cấu hình thích hợp được chọn vàdefault_text_search_configđược đặt tương ứng trongPostgreSql.conf. Nếu bạn đang sử dụng cùng kèo bóng đá pháp cấu hình tìm kiếm văn bản cho toàn bộ cụm, bạn có thể sử dụng giá trị trongPostgreSql.conf. Để sử dụng các cấu hình khác nhau trong toàn bộ cụm nhưng cùng một cấu hình trong bất kỳ một cơ sở dữ kèo bóng đá pháp nào, hãy sử dụngthay đổi cơ sở dữ kèo bóng đá pháp ... SET. Nếu không, bạn có thể đặtdefault_text_search_configTrong mỗi phiên.
Mỗi hàm tìm kiếm văn bản phụ thuộc vào cấu hình có tùy chọnRegConfigĐối số, để cấu hình để sử dụng có thể được chỉ định rõ ràng.Default_Text_search_configchỉ được sử dụng khi đối số này bị bỏ qua.
Để dễ dàng xây dựng cấu hình tìm kiếm văn bản tùy chỉnh, một cấu hình được xây dựng từ các đối tượng cơ sở dữ kèo bóng đá pháp đơn giản hơn.PostgreSQLCơ sở tìm kiếm văn bản cung cấp bốn loại đối tượng cơ sở dữ kèo bóng đá pháp liên quan đến cấu hình:
trình phân tích cú pháp tìm kiếm văn bảnChia tài kèo bóng đá pháp thành mã thông báo và phân loại từng mã thông báo (ví dụ: dưới dạng từ hoặc số).
Từ điển tìm kiếm văn bảnChuyển đổi mã thông báo sang dạng chuẩn hóa và từ chối kèo bóng đá pháp từ dừng.
Mẫu tìm kiếm văn bảnCung cấp kèo bóng đá pháp chức năng từ điển cơ bản. (Một từ điển chỉ cần chỉ định một mẫu và một tập hợp kèo bóng đá pháp tham số cho mẫu.)
Cấu hình tìm kiếm văn bảnChọn trình phân tích cú pháp và một bộ từ điển để sử dụng để bình thường hóa kèo bóng đá pháp mã thông báo được tạo bởi trình phân tích cú pháp.
Trình phân tích và mẫu tìm kiếm văn bản được xây dựng từ các hàm C cấp thấp; Do đó, nó yêu cầu khả năng lập trình C để phát triển những đặc quyền mới và các đặc quyền của siêu người dùng để cài đặt một vào cơ sở dữ kèo bóng đá pháp.PREDT/khu vực củaPostgreSQLPhân phối.) Vì từ điển và cấu hình chỉ tham số hóa và kết nối với nhau kèo bóng đá pháp số trình phân tích cú pháp và mẫu cơ bản, không cần đặc quyền đặc biệt để tạo từ điển hoặc cấu hình mới. Ví dụ về việc tạo từ điển và cấu hình tùy chỉnh xuất hiện sau trong chương này.