Python生成器

一、生成器定义:

  • 为了缓解内存压力,Python使用生成器对延迟操作提供了支持。所谓延迟操作,是指在需要的时候才产生结果,而不是立即产生结果。这也是生成器的主要好处。
  • 运用场景:大数据量的运算,不会因为内存的问题被进程杀死
  • 生成器有二种方式进行获取数据:for循环和__next__
  • 生成器中的元素只能获取一遍,如果读取全部数据还继续获取会提示报错

二、生成器表达式:

  • 类似于列表推导,但是,生成器返回按需产生结果的一个对象,而不是一次构建一个结果列表

list01 = [random.randint(1, 5) for i in range(5)]
|| 中括号变成小括号
gen01 = (random.randint(1, 5) for i in range(5))

# 列表推导式
import random
list01 = [random.randint(1, 5) for i in range(5)]
print(list01)  # [1, 3, 4, 1, 2]
# 生成器表达式
gen01 = (random.randint(1, 5) for i in range(5))
print(gen01)  # <generator object <genexpr> at 0x7f18cc1c8830>

三、生成器调用方式:

  • 方式一:gen.__next__()
# 生成器当中的元素只能获取一遍
# for   生成器.__next__()
print("data:", gen01.__next__())  # 第一个数据
print("data:", gen01.__next__())  # 第二个数据
  • 方式二:for循环
for item in gen01:
    print("for:", item)
# print("data:", gen01.__next__())  # 报错:StopIteration

三、生成器函数yield:

  • 常规函数定义,但是,使用 yield 语句而不是 return 语句返回结果
  • yield 语句一次返回一个结果,在每个结果中间,挂起函数的状态,相当于暂停,以便下次重它离开的地方继续执行
  • 已执行过的代码,不会再进行执行,但会保留执行结果
  • 函数内yield 语句全部执行完在进行调用会报错

执行流程:

  • 在函数内部,有很多 yield 返回中间结果;
  • 程序向函数取值时,当函数执行到第1个yield时,会暂停函数运行并返回中间结果;
    当主程序再次调用函数时,函数会从上次暂停的位置继续运行,当遇到第2个yield,会再次暂停运行函数并返回数据;
  • 重复以上操作,一直到函数内部的yield全部执行完成为止
# 生成器函数
# return: 函数执行的终止
# yield: 表示函数执行的暂停
def func02():
    a = 1
    yield a
    b = "hello"
    yield b
    c = [1, 2]
    yield c
gen2 = func02()
print("gen2:", gen2)
# <generator object func02 at 0x7f94da357a98>
print(gen2.__next__())  # 1
print(gen2.__next__())  # hello
for item in gen2:
    print("for:", item)  # [1, 2]
# gen2.__next__()  # 报错

四、案例

需求:

  • 使用函数实现生成器 yield
  • 函数接受一个文件对象作为参数(读文件)
  • 生成器函数每次返回文件的 10 行数据
# 实现思路:
# 创建list容器接收读取的文件内容
# 读取文件内容,并将每一行存储到list中
# 判断list长度是否为10,是,yield返回,清空列表
# 读取完文件后,查看list是否大于0,是,yield返回
def get_lines(file_name):
    li = []
    with open(file_name, mode="r") as fr:
        while True:
            line = fr.readline()
            # 没数据就退出循环
            if line is "":
                break
            # 添加每一行的数据
            li.append(line)
            # 判断line长度
            if len(li) == 10:
                yield li
                li.clear()
    # 兜底判断,保证最后的数据完整性
    if len(li) != 0:
        yield li

if __name__ == '__main__':
    gen = get_lines("/etc/hosts")
    # 循环输出文件内容
    for item in gen:
        print("line:", item)
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 159,835评论 4 364
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 67,598评论 1 295
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 109,569评论 0 244
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 44,159评论 0 213
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 52,533评论 3 287
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 40,710评论 1 222
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 31,923评论 2 313
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 30,674评论 0 203
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 34,421评论 1 246
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 30,622评论 2 245
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 32,115评论 1 260
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 28,428评论 2 254
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 33,114评论 3 238
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 26,097评论 0 8
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 26,875评论 0 197
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 35,753评论 2 276
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 35,649评论 2 271

推荐阅读更多精彩内容

  • 作者:邵正将 来源:PytLab 在python中生成器可以很方便的实现迭代协议。生成器通过生成器函数产生,生成器...
    PyChina阅读 1,557评论 0 6
  • 什么是生成器 可以理解为一种数据类型,这种数据类型自动实现了迭代器协议,其他的数据类型需要调用自己的内置的 _ _...
    测试探索阅读 99评论 0 0
  • 本文转自kissg Blog的《Python之生成器详解 引文 编程派前几天推送了一篇文章,叫“Python学习进...
    Founting阅读 374评论 0 1
  • 一、生成器 生成器指的是生成器对象,可由生成器表达式得到,也可使用 yield 关键字得到一个生成器函数,调用这个...
    Alexander_Zz阅读 286评论 0 0
  • 文章来源:python 生成器和迭代器有这篇就够了 什么是迭代器? 迭代器是访问集合元素的一种方式。迭代器对象从集...
    lxy_悦阅读 521评论 0 4