Меню
Что нового?

Поиск с помощью phpmorphy

GvOzDiK

Новичок
Поиск с помощью phpmorphy

Здравствуйте.
Написал морфологический поиск с помощью класса phpmorphy , тоесть пользователь вводит ключевое слово , функцией getPseudoRoot я получаю его корень и потом вставляю всё это дело в запрос к бд (... key_word LIKE '%$word%'...).
Всё отлично работает на php выше 5 , а на меньших не хочет работать из-за конструкции interface , очень хотелось бы что бы работало и на 4 версии php.
Кто-нибудь знает как переписать скрипт или какую-нибудь альтернативу phpmorphy???
 

GvOzDiK

Новичок
А у кого-нибудь есть старые версии , всё облазил найти не могу.Если есть скиньте пожалуйста на [email protected] или ссылку выложите.
Еще один вопрос , а сам алгоритм поиска нормально сделан???
 

iSlayter

Новичок
LIKE '%$word%'. почему-то всегда у меня вызывает спазмы в районе печени...
 

GvOzDiK

Новичок
kode
Я не Филип ))) Просто скрипт будет использоваться на множестве серверов и поэтому должен работать на пхп 4 тоже.

iSlayter
Чем вас не устраивает данный подход???
 
phprus

phprus

Moderator
Команда форума
GvOzDiK
Чем вас не устраивает данный подход???
Нажмите для раскрытия...
Скоростью. Решение дающее полное сканирование таблицы при каждом выполнении запроса - это один из самых легких способов завалить сервер. А кроме того на всякий случай прочитай PHP FAQ: \"Кавычки \". Cоставление запросов, слеши, SQL Injection
 

iSlayter

Новичок
Не знаю как правильно делать, но у меня сделано так:
1) при добавлении какого-либо материала парсится его содержимое: выделяются корни слов;
2) проверяем есть ли такой корень в базе данных.
если есть, то
2.1) пишем во вторую таблицу (связь один со многими) id опубликованного материала, id корня слова;
если нет, то
2.2) пишем в первую таблицу (с корнями) новый корень, а затем к п. 2.1.
3) при поиске выделяем корень слова и делаем SELECT `id` from `word_roots` WHERE `root` = 'полк' OR `root` = 'воен' (используется имплеметированный Котёровым стеммер Портера)

естественно, без словарей получается такой безобразие, что полк (вооружённых сил) и книжная полка -- это одно и тоже.

А по-хорошему нужно использовать ispell словарики :)
Используется на маленьких сайтах.
 

no_santa

Снегур
PHP: 
class Lingua_Stem_Ru {    var $VERSION = "0.02";    var $Stem_Caching = 0;    var $Stem_Cache = array();    var $VOWEL = '/аеиоуыэюя/';    var $PERFECTIVEGROUND = '/((ив|ивши|ившись|ыв|ывши|ывшись)|((?<=[ая])(в|вши|вшись)))$/';    var $REFLEXIVE = '/(с[яь])$/';    var $ADJECTIVE = '/(ее|ие|ые|ое|ими|ыми|ей|ий|ый|ой|ем|им|ым|ом|его|ого|еых|ую|юю|ая|яя|ою|ею)$/';    var $PARTICIPLE = '/((ивш|ывш|ующ)|((?<=[ая])(ем|нн|вш|ющ|щ)))$/';    var $VERB = '/((ила|ыла|ена|ейте|уйте|ите|или|ыли|ей|уй|ил|ыл|им|ым|ены|ить|ыть|ишь|ую|ю)|((?<=[ая])(ла|на|ете|йте|ли|й|л|ем|н|ло|но|ет|ют|ны|ть|ешь|нно)))$/';    var $NOUN = '/(а|ев|ов|ие|ье|е|иями|ями|ами|еи|ии|и|ией|ей|ой|ий|й|и|ы|ь|ию|ью|ю|ия|ья|я)$/';    var $RVRE = '/^(.*?[аеиоуыэюя])(.*)$/';    var $DERIVATIONAL = '/[^аеиоуыэюя][аеиоуыэюя]+[^аеиоуыэюя]+[аеиоуыэюя].*(?<=о)сть?$/';
    function s(&$s, $re, $to)    {        $orig = $s;        $s = preg_replace($re, $to, $s);        return $orig !== $s;    }
    function m($s, $re)    {        return preg_match($re, $s);    }
    function stem_word($word)     {        $word = strtolower($word);        $word = strtr($word, 'ё', 'е');        # Check against cache of stemmed words        if ($this->Stem_Caching && isset($this->Stem_Cache[$word])) {            return $this->Stem_Cache[$word];        }        $stem = $word;        do {          if (!preg_match($this->RVRE, $word, $p)) break;          $start = $p[1];          $RV = $p[2];          if (!$RV) break;
          # Step 1          if (!$this->s($RV, $this->PERFECTIVEGROUND, '')) {              $this->s($RV, $this->REFLEXIVE, '');
              if ($this->s($RV, $this->ADJECTIVE, '')) {                  $this->s($RV, $this->PARTICIPLE, '');              } else {                  if (!$this->s($RV, $this->VERB, ''))                      $this->s($RV, $this->NOUN, '');              }          }
          # Step 2          $this->s($RV, '/и$/', '');
          # Step 3          if ($this->m($RV, $this->DERIVATIONAL))              $this->s($RV, '/ость?$/', '');
          # Step 4          if (!$this->s($RV, '/ь$/', '')) {              $this->s($RV, '/ейше?/', '');              $this->s($RV, '/нн$/', 'н');           }
          $stem = $start.$RV;        } while(false);        if ($this->Stem_Caching) $this->Stem_Cache[$word] = $stem;        return $stem;    }
    function stem_caching($parm_ref)     {        $caching_level = @$parm_ref['-level'];        if ($caching_level) {            if (!$this->m($caching_level, '/^[012]$/')) {                die(__CLASS__ . "::stem_caching() - Legal values are '0','1' or '2'. '$caching_level' is not a legal value");            }            $this->Stem_Caching = $caching_level;        }        return $this->Stem_Caching;    }
    function clear_stem_cache()     {        $this->Stem_Cache = array();    }}?>
Пример использования: 
$stemmer = new Lingua_Stem_Ru();echo $stemmer->stem_word('Котеровыми');
если западло копипаздить, поищи в гугле "стеммер Портера". Помогает в 99% случаев
 
Войдите или зарегистрируйтесь для ответа.
Сверху