Yes, We're Open という映画に関する情報を含む映画データベースがあります。
データベースを検索すると、「yes we're open」を検索すると、説明に「we're」と「open」が含まれているが「yes」が含まれていない別のタイトルが返されるという問題があります。すべての単語がブール モードである必要があります (つまり'+yes +we\'re +open'、クエリとして送信される前に、"yes we\'re open" に変換されます)。
これは、組み込みのストップワード リストに「はい」が含まれているためだと思いました。ただし、設定ft_stopword_file = ""してmysqlを再起動repair table [tablename] quickし、検索しているテーブルを検索すると、「はい、開いています」の検索で結果が得られません。my.cnf を以下に含めました。これは MySQL バージョン 5.0.22 です。何か案は？
[mysqld]
query-cache-type = 1
query-cache-size = 8M
max_allowed_packet=500M
ft_min_word_len=2
ft_stopword_file = ""
[myisamchk]
ft_min_word_len=2
set-variable=local-infile=0
datadir=/var/lib/mysql
socket=/var/lib/mysql/mysql.sock
# Default to using old password format for compatibility with mysql 3.x
# clients (those using the mysqlclient10 compatibility package).
# old_passwords=1
skip-bdb
set-variable = innodb_buffer_pool_size=2M
set-variable = innodb_additional_mem_pool_size=500K
set-variable = innodb_log_buffer_size=500K
set-variable = innodb_thread_concurrency=2
[mysql.server]
user=mysql
basedir=/var/lib
[mysqld_safe]
log-error=/var/log/mysqld.log
pid-file=/var/run/mysqld/mysqld.pid
skip-bdb
set-variable = innodb_buffer_pool_size=2M
set-variable = innodb_additional_mem_pool_size=500K
set-variable = innodb_log_buffer_size=500K
set-variable = innodb_thread_concurrency=2
編集:ここにいくつかのサンプルクエリがあります:
#1 - 組み込みのストップワード ファイルを使用
mysql> SHOW VARIABLES LIKE 'ft_%';
+--------------------------+----------------+
| Variable_name | Value |
+--------------------------+----------------+
| ft_boolean_syntax | + -><()~*:""&| |
| ft_max_word_len | 84 |
| ft_min_word_len | 2 |
| ft_query_expansion_limit | 20 |
| ft_stopword_file | (built-in) |
+--------------------------+----------------+
5 rows in set (0.00 sec)
mysql> SELECT title, MATCH(title,description,genre,country) AGAINST (' +yes +we\'re +open' IN BOOLEAN MODE) as title_description_genre_country_score FROM `films` WHERE MATCH(title,description,genre,country) AGAINST (' +yes +we\'re +open' IN BOOLEAN MODE) AND `hidden` <> '1' ORDER BY `title_description_genre_country_score` DESC ;
+-----------------+---------------------------------------+
| title | title_description_genre_country_score |
+-----------------+---------------------------------------+
| Yes, We?re Open | 1 |
| Present/Future | 1 |
+-----------------+---------------------------------------+
2 rows in set (0.00 sec)
.... 次に、my.cnf を編集し、ft_stopword_file="".....を追加します。
#2 ストップワードファイルなし
mysql> SHOW VARIABLES LIKE 'ft_%';
+--------------------------+----------------+
| Variable_name | Value |
+--------------------------+----------------+
| ft_boolean_syntax | + -><()~*:""&| |
| ft_max_word_len | 84 |
| ft_min_word_len | 2 |
| ft_query_expansion_limit | 20 |
| ft_stopword_file | |
+--------------------------+----------------+
5 rows in set (0.00 sec)
mysql> REPAIR TABLE `films` QUICK;
+-------------------------+--------+----------+----------+
| Table | Op | Msg_type | Msg_text |
+-------------------------+--------+----------+----------+
| db.films | repair | status | OK |
+-------------------------+--------+----------+----------+
1 row in set (0.14 sec)
mysql> SELECT title, MATCH(title,description,genre,country) AGAINST (' +yes +we\'re +open' IN BOOLEAN MODE) as title_description_genre_country_score FROM `films` WHERE MATCH(title,description,genre,country) AGAINST (' +yes +we\'re +open' IN BOOLEAN MODE) AND `hidden` <> '1' ORDER BY `title_description_genre_country_score` DESC ;
Empty set (0.00 sec)
編集 #2: テーブルの作成:
mysql> SHOW CREATE TABLE db.films\G;
*************************** 1. row ***************************
Table: films
Create Table: CREATE TABLE `films` (
`id` varchar(8) NOT NULL default '',
`title` varchar(255) default NULL,
`hidden` tinyint(1) default '0',
`featured` tinyint(1) default NULL,
`type` varchar(255) default NULL,
`subtype` varchar(255) default NULL,
`summary` text,
`description` text,
`image_url` varchar(255) default NULL,
`trailer_url` varchar(255) default NULL,
`slug` varchar(255) default NULL,
`category` varchar(255) default NULL,
`parent` varchar(255) default NULL,
`related` varchar(255) default NULL,
`sponsor` varchar(255) default NULL,
`genre` varchar(255) default NULL,
`country` varchar(255) default NULL,
`copresenters` varchar(255) default NULL,
`original_title` varchar(255) default NULL,
`director` varchar(255) default NULL,
`executive_producer` varchar(255) default NULL,
`producer` varchar(255) default NULL,
`cinematographer` varchar(255) default NULL,
`writer` varchar(255) default NULL,
`editor` varchar(255) default NULL,
`sound` varchar(255) default NULL,
`cast` varchar(255) default NULL,
`language` varchar(255) default NULL,
`trt` varchar(255) default NULL,
`year` varchar(255) default NULL,
`subtitles` varchar(255) default NULL,
`format` varchar(255) default NULL,
`color` varchar(255) default NULL,
`premiere_status` varchar(255) default NULL,
PRIMARY KEY (`id`),
KEY `id` (`id`),
KEY `type` (`type`),
KEY `subtype` (`subtype`),
KEY `slug` (`slug`),
KEY `category` (`category`),
KEY `parent` (`parent`),
KEY `hidden` (`hidden`),
KEY `featured` (`featured`),
KEY `copresenters` (`copresenters`),
KEY `original_title` (`original_title`),
KEY `director` (`director`),
KEY `executive_producer` (`executive_producer`),
KEY `producer` (`producer`),
KEY `cinematographer` (`cinematographer`),
KEY `writer` (`writer`),
KEY `editor` (`editor`),
KEY `sound` (`sound`),
KEY `cast` (`cast`),
KEY `language` (`language`),
KEY `trt` (`trt`),
KEY `year` (`year`),
KEY `subtitles` (`subtitles`),
KEY `format` (`format`),
KEY `color` (`color`),
KEY `premiere_status` (`premiere_status`),
FULLTEXT KEY `title` (`title`),
FULLTEXT KEY `summary` (`summary`),
FULLTEXT KEY `description` (`description`),
FULLTEXT KEY `genre` (`genre`),
FULLTEXT KEY `country` (`country`),
FULLTEXT KEY `title,description` (`title`,`description`),
FULLTEXT KEY `title,description,genre,country` (`title`,`description`,`genre`,`country`)
) ENGINE=MyISAM DEFAULT CHARSET=utf8
1 row in set (0.00 sec)