Могу ли я записать генератор Python?

У меня есть функция, называемая runquery, которая вызывает вызовы в базе данных, а затем выводит строки один за другим. Я написал memoize decorator (или, точнее, просто украл один из qaru.site/info/256045/...), но при последующих вызовах он просто дает пустую последовательность, по-видимому, потому что значения генератора могут только один раз.

Как я могу изменить декоратор memoization, который работает для генераторов Python? Я понимаю, что мне нужно будет сохранить его в памяти в какой-то момент, но я бы хотел обработать это в декораторе и не изменять оригинальную функцию.

Текущий код функции memoization:

def memoized(f):
    # Warning: Doesn't work if f yields values
    cache={}
    def ret(*args):
        if args in cache:
            return cache[args]
        else:
            answer=f(*args)
            cache[args]=answer
            return answer
    return ret

Ответ 1

Я понимаю, что это старый вопрос, но для тех, кто хочет полного решения: здесь один, основанный на предположении jsbueno:

from itertools import tee
from types import GeneratorType

Tee = tee([], 1)[0].__class__

def memoized(f):
    cache={}
    def ret(*args):
        if args not in cache:
            cache[args]=f(*args)
        if isinstance(cache[args], (GeneratorType, Tee)):
            # the original can't be used any more,
            # so we need to change the cache as well
            cache[args], r = tee(cache[args])
            return r
        return cache[args]
    return ret

Ответ 2

from itertools import tee

sequence, memoized_sequence = tee (sequence, 2)

Готово.

Это проще для генераторов, потому что стандартный lib имеет этот метод "tee"!

Ответ 3

Да. Там декоратор разместил здесь. Обратите внимание, что, как говорит плакат, вы теряете часть пользы от ленивой оценки.

def memoize(func):
    def inner(arg):
        if isinstance(arg, list):
            # Make arg immutable
            arg = tuple(arg)
        if arg in inner.cache:
            print "Using cache for %s" % repr(arg)
            for i in inner.cache[arg]:
                yield i
        else:
            print "Building new for %s" % repr(arg)
            temp = []
            for i in func(arg):
                temp.append(i)
                yield i
            inner.cache[arg] = temp
    inner.cache = {}
    return inner


@memoize
def gen(x):
    if not x:
        yield 0
        return

    for i in xrange(len(x)):
        for a in gen(x[i + 1:]):
            yield a + x[0]


print "Round 1"
for a in gen([2, 3, 4, 5]):
    print a

print
print "Round 2"
for a in gen([2, 3, 4, 5]):
    print a