Что такое генератор и чем он полезен?

Если в теле функции есть yield, её вызов не выполняет код, а возвращает объект-генератор. Генератор — итератор: каждый next() выполняет тело до следующего yield, отдаёт значение и приостанавливается. Локальные переменные и место остановки сохраняются. Когда функция заканчивается, генератор бросает StopIteration, и цикл for завершается.

Зачем:

• память — читать файл на 10 ГБ построчно, не загружая его целиком;
• ленивость — значения считаются только если нужны: можно взять первые 10 из бесконечной последовательности;
• конвейеры — генераторы удобно соединять в цепочку: прочитать → отфильтровать → преобразовать.

yield from other отдаёт все значения из другого итерируемого объекта — удобно для рекурсии и делегирования.

Ограничения: генератор исчерпывается после одного прохода; у него нет len() и доступа по индексу.

def read_lines(path):
    with open(path, encoding="utf-8") as f:
        for line in f:
            yield line.rstrip("\n")

def numbers():
    n = 0
    while True:          # бесконечный генератор
        yield n
        n += 1

from itertools import islice
list(islice(numbers(), 5))   # [0, 1, 2, 3, 4]

def flatten(items):
    for x in items:
        if isinstance(x, list):
            yield from flatten(x)
        else:
            yield x