Redis autocomplete

Ответ 1

Если вы имеете дело с большим набором данных, я бы предложил рассмотреть возможность реализации этого как trie. Я собрал немного Ruby, который бы сделал это:

require 'rubygems'
require 'redis'

class RedisTrie
  TERMINAL = '+'

  def initialize(prefix)
    @prefix = prefix
    @r = Redis.new
  end

  def add_word(word)
    w = word.gsub(/[^a-zA-Z0-9_-]/, '')
    key = "#{@prefix}:"

    w.each_char do |c|
      @r.zset_add key, c.bytes.first, c
      key += c
    end

    @r.zset_add key, 0, TERMINAL
  end

  def add_words(*words)
    words.flatten.compact.each {|word| add_word word}
  end

  def suggest(text)
    @r.zset_range("#{@prefix}:#{text}", 0, -1).map do |c|
      (c == TERMINAL) ? text : suggest(text + c)
    end.flatten
  end
end

rt = RedisTrie.new('trie')

rt.add_words %w( apple automobile carwash oil-change cranky five ruthie axe auto )

p rt.suggest(ARGV.shift.to_s)

Например:

$ ruby RedisTrie.rb
["apple", "auto", "automobile", "axe", "carwash", "cranky", "five", "oil-change", "ruthie"]
$ ruby RedisTrie.rb a
["apple", "auto", "automobile", "axe"]
$ ruby RedisTrie.rb au
["auto", "automobile"]
$ ruby RedisTrie.rb aux
[]

Подробнее о Tries в Запись в Википедии о попытках.

Вы обязательно захотите оптимизировать свой метод предложения, чтобы не возвращать ВСЕ значения, а только возвращали первые найденные им значения X. Это превзойдет цель перебора всей структуры данных.

Ответ 2

[Да, через 2 года после публикации вопроса, но тем не менее релевантный]

На веб-сайте Redis есть полный учебник (в Ruby):

Auto Complete with Redis

Ответ 3

Я также нашел этот фрагмент при чтении Саймона Уиллисона впечатляющего учебника Redis.

Решение:

Привет Макс,

KEYS - это не путь, лучший вещь, которую вы можете сделать, это использовать вместо этого отсортированный набор. Вы хотите превратить первые 4 или 5 символов строки в целое число (вы можете представьте себе каждый char как цифру например, номер радикса 256, но есть лучшее представление) и добавьте все ваши имена пользователей в отсортированные набор.

Затем, используя ZRANGEBYSCORE, вы можете получить все элементы между данным Диапазон.

Этот метод гораздо более масштабируемый, чем это O (log (N)) вещь.

Я рассказываю об этом в своем медленно развивающаяся книга Редиса...

Приветствия, Сальваторе

Ответ 4

Вот простой простой алгоритм в PHP для алфавитного автозаполнения с redis:

function getNextChar($char) {
    $char++;
    if(strlen($char) > 1) { $char--; }
    return $char;
}

function createDictionary($redis, $key, $wordList) {
    if(!$redis->exists($key)) {
        foreach($wordList as $word) {
            $redis->zadd($key, 0, $word);
        }
    }
}

function getLexicalAutocomplete($redis, $dictionaryKey, $input) {
    $inputNext = substr($input, 0, -1) . getNextChar(substr($input, -1)); //ab -> ac

    $redis->zadd($dictionaryKey, 0, $input);
    $redis->zadd($dictionaryKey, 0, $inputNext);

    $rangeStart = $redis->zrank($dictionaryKey, $input)+1;
    $rangeEnd = $redis->zrank($dictionaryKey, $inputNext)-1;

    $autocompleteResults = $redis->zrange($dictionaryKey, $rangeStart, $rangeEnd);

    $redis->zrem($dictionaryKey, $input);
    $redis->zrem($dictionaryKey, $inputNext);

    return $autocompleteResults;
}

$redis = new Redis();
$redis->connect('', 0); //Your redis server ip/port goes here

createDictionary($redis, "dict", array("alfred", "joel", "jeff", "addick"));
$result = getLexicalAutocomplete($redis, "dict", $argv[1]);

echo json_encode($result);

На основе статьи Auto Complete with Redis от Salvatore, за исключением того, что мне нужно создать дополнительный словарь автозаполнения, за счет крошечный небольшой штраф за производительность (пара зад и лишних), но в большинстве случаев он должен хорошо работать. script предполагает phpredis, но он должен быть практически одинаковым с predis.

Примеры вывода:

> php redisauto.php a
["addick","alfred"]

> php redisauto.php ad
["addick"]

> php redisauto.php al
["alfred"]

> php redisauto.php j
["jeff","joel"]

> php redisauto.php je
["jeff"]

Ответ 5

Вот порт оригинальной реализации Ruby Ruby в Python:

http://www.varunpant.com/posts/auto-complete-with-redis-python

Ответ 6

Я просто просмотрел потрясающий пост, который обслуживает точную проблему, о которой вы говорите, и многое другое. Проверьте это

Ответ 7

Вероятно, несвязанный, но если вы приземлились здесь, вас также может заинтересовать легкий, правильный, быстрый и масштабируемый способ автоматического заполнения полей пользовательского интерфейса с предложениями:

http://www.elasticsearch.org/guide/en/elasticsearch/reference/current/search-suggesters-completion.html