Python 的 itertools 模块

2024-04-16 10:18
文章标签 python 模块 itertools

本文主要是介绍Python 的 itertools 模块,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

Python 当中的 itertools 模块在程序员中的存在感一直不高,可能是大家真正用到的时候并不多。然而,最近它却成功引起了我的注意,它在 Python 求列表的所有 k 阶子列 时大放异彩,所以,不妨再来看一看,学一学,不求别的,只求在解决问题的过程当中至少能成功想到它一次。我会把自己觉得很有用的函数标红。

官方还给出了每个方法的实现方式:itertools --- 为高效循环而创建迭代器的函数 (既然是标准库,当然官方的文档是最权威且最具有参考性的啦 —— 关键是标题还很霸气)。

itertools.combinations

求列表的 k 阶子列 (同一个位置的元素子列不允许重复使用),也即求列表的组合 C(n, k)。顺序与原先元素的顺序保持一致。

import itertoolsinput_list = [1, 2, 4, 3, 5]
n = len(input_list)
k = 3
k_subsequence = list(itertools.combinations(input_list, k))
print(k_subsequence)
[(1, 2, 4), (1, 2, 3), (1, 2, 5), (1, 4, 3), (1, 4, 5), (1, 3, 5), (2, 4, 3), (2, 4, 5), (2, 3, 5), (4, 3, 5)]

itertools.combinations_with_replacement 

求列表的 k 阶子列 (同一个位置的元素子列允许重复使用)。

import itertoolsinput_list = [1, 2, 4, 3, 5]
n = len(input_list)
k = 3
k_subsequence = list(itertools.combinations_with_replacement(input_list, k))
print(k_subsequence)
[(1, 1, 1), (1, 1, 2), (1, 1, 4), (1, 1, 3), (1, 1, 5), (1, 2, 2), (1, 2, 4), (1, 2, 3), (1, 2, 5), (1, 4, 4), 
(1, 4, 3), (1, 4, 5), (1, 3, 3), (1, 3, 5), (1, 5, 5), (2, 2, 2), (2, 2, 4), (2, 2, 3), (2, 2, 5), (2, 4, 4),
(2, 4, 3), (2, 4, 5), (2, 3, 3), (2, 3, 5), (2, 5, 5), (4, 4, 4), (4, 4, 3), (4, 4, 5), (4, 3, 3), (4, 3, 5),
(4, 5, 5), (3, 3, 3), (3, 3, 5), (3, 5, 5), (5, 5, 5)]

itertools.permutations

返回由迭代元素生成长度为 k 的排列。也就是求列表的排列 A(n, k)。

import itertoolsinput_list = [1, 2, 4]
k = 2
print(list(itertools.permutations(input_list, k)))k = 3
print(list(itertools.permutations(input_list, k)))
[(1, 2), (1, 4), (2, 1), (2, 4), (4, 1), (4, 2)]
[(1, 2, 4), (1, 4, 2), (2, 1, 4), (2, 4, 1), (4, 1, 2), (4, 2, 1)]

itertools.count

创建一个自定义步长的无限迭代器。(这块感觉和 range 的功能差不多,只不过一般用 range 的时候都是生成一个有限的迭代器)。不过,一般用到无限迭代的情况还真不多,所以可以使用 itertools.takewhile 从无限迭代中取出满足条件的有限迭代。

import itertoolsstart = 2
step = 3
end = 11
counts = itertools.count(start, step)
it = itertools.takewhile(lambda x: x <= 11, counts)
for i in it:print(i)
2
5
8
11

itertools.takewhile

这个感觉和 filter 有点像,但是又不同,看下区别(filter 会对每个迭代元素进行判断,takewhile 碰到第一个不满足条件的元素就退出了,然后返回满足条件的结果):

import itertoolsprint('takewhile: ', list(itertools.takewhile(lambda x: x < 5, [1, 4, 6, 4, 1])))
print('   filter: ', list(filter(lambda x: x < 5, [1, 4, 6, 4, 1])))
takewhile:  [1, 4]filter:  [1, 4, 4, 1]

itertools.dropwhile

这个刚好和 takewhile 是相反的,dropwhile 也是碰到第一个不满足条件的元素就退出了,但是返回不满足条件的结果:

import itertoolsprint('dropwhile: ', list(itertools.dropwhile(lambda x: x < 5, [1, 4, 6, 4, 1])))
dropwhile:  [6, 4, 1]

itertools.cycle

创建一个无限循环序列。

import itertoolsfor i in itertools.cycle('abc'):print(i)
a
b
c
a
...

itertools.repeat

创建一个无限重复的迭代(也可以添加参数限制迭代次数)。

import itertools# for i in itertools.repeat('a', 4):
for i in itertools.repeat('a'):print(i)
a
a
a
a
...

itertools.chain

可以把一组迭代对象串联起来,形成一个更大的迭代器。

import itertoolsfor i in itertools.chain('ABC', ('D', 'E'), {'F': 1, 'G': 2}, range(3)):print(i)
import itertoolsfor i in itertools.chain.from_iterable(['ABC', ('D', 'E'), {'F': 1, 'G': 2}, range(3)]):print(i)
A
B
C
D
E
F
G
0
1
2

itertools.groupby

返回一个产生按照 key 进行分组后的值集合的迭代器。

import itertoolsfor key, group in itertools.groupby('AAABBBCCAAA'):print(key, list(group))
A ['A', 'A', 'A']
B ['B', 'B', 'B']
C ['C', 'C']
A ['A', 'A', 'A']

注意:key 是可以重复的它只是将相邻元素中具有相同 key 的归为一类,和 dict 里边不能有相同 key 的情况还是不一样的。

import itertoolsa = ['aa', 'ab', 'abc', 'bcd', 'bc', 'de', 'abcde']
for i, k in itertools.groupby(a, lambda x: len(x)):print(i, list(k))
2 ['aa', 'ab']
3 ['abc', 'bcd']
2 ['bc', 'de']
5 ['abcde']

itertools.zip_longest

这个就没啥多说的了,把它和 zip 放到一块,对比一下输出结果就很容易理解其功效了。

import itertoolswords = ['nice', 'to', 'meet', 'you']
print(list(zip(*words)))
print(list(itertools.zip_longest(*words)))
[('n', 't', 'm', 'y'), ('i', 'o', 'e', 'o')]
[('n', 't', 'm', 'y'), ('i', 'o', 'e', 'o'), ('c', None, 'e', 'u'), ('e', None, 't', None)]

itertools.accumulate

这个和 functools 的 reduce 有点像,只不过 reduce 对数组作用之后只返回一个结果,accumulate 则是返回每次迭代过程操作的结果。两个都可以自定义 func ,所以灵活性还是很高的。

import itertoolsfor i in itertools.accumulate([1, 4, 6, 4, 1], func=lambda x, y: x + y):print(i)
from functools import reduceinput_list = [1, 4, 6, 4, 1]
for i in range(len(input_list)):print(reduce(lambda x, y: x + y, input_list[:i + 1]))
1
5
11
15
16

itertools.compress

创建一个迭代器,它返回 data 中经 selectors 真值测试为 True 的元素。迭代器在两者较短的长度处停止。

import itertoolsdata = 'ABCDEFG'
selectors = [1, 0, 1, 0, 1, 1]
print(list(itertools.compress(data, selectors)))
['A', 'C', 'E', 'F']

官方给的实现是下面这种,我还是比较认同的:

def compress(data, selectors):# compress('ABCDEF', [1,0,1,0,1,1]) --> A C E Freturn (d for d, s in zip(data, selectors) if s)

itertools.product

生成可迭代对象的笛卡儿积。

import itertoolsfirst_list = ['a', 'b', 'c', 'd']
second_list = [1, 2, 3]
print(list(itertools.product(first_list, second_list)))# first_list = ['a', 'b', 'c', 'd']
# second_list = [1, 2, 3]
# third_list = ['X', 'Y']
# print(list(itertools.product(first_list, second_list, third_list)))
# [('a', 1, 'X'), ('a', 1, 'Y'), ('a', 2, 'X'), ('a', 2, 'Y'), ('a', 3, 'X'), ('a', 3, 'Y'), ('b', 1, 'X'), ...]
[('a', 1), ('a', 2), ('a', 3), ('b', 1), ('b', 2), ('b', 3), ('c', 1), ('c', 2), ('c', 3), ('d', 1), ('d', 2), ('d', 3)]

itertools.starmap

这个方法,从我目前做的小测试来看,似乎和 map 就差了个 zip 对数据作用的区别。下面的例子可以做下参考。

pow

import itertoolsprint(list(itertools.starmap(pow, [(2, 5), (3, 2), (10, 3)])))
import itertoolsprint(list(itertools.starmap(pow, zip([2, 3, 10], [5, 2, 3]))))
print(list(map(pow, [2, 3, 10], [5, 2, 3])))
[32, 9, 1000]

 int

import itertoolsprint(list(itertools.starmap(int, [(2, ), (3, ), (10, )])))
print(list(itertools.starmap(int, zip([2, 3, 10]))))
print(list(map(int, [2, 3, 10])))
[2, 3, 10]
import itertoolsprint(list(itertools.starmap(int, [('1001', 2), ('0011', 2), ('1011', 2)])))
print(list(itertools.starmap(int, zip(['1001', '0011', '1011'], [2, 2, 2]))))
print(list(map(int, ['1001', '0011', '1011'], [2, 2, 2])))
[9, 3, 11]
[9, 3, 11]
[9, 3, 11]

这篇关于Python 的 itertools 模块的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/908513

相关文章

Python按照24个实用大方向精选的上千种工具库汇总整理

《Python按照24个实用大方向精选的上千种工具库汇总整理》本文整理了Python生态中近千个库,涵盖数据处理、图像处理、网络开发、Web框架、人工智能、科学计算、GUI工具、测试框架、环境管理等多... 目录1、数据处理文本处理特殊文本处理html/XML 解析文件处理配置文件处理文档相关日志管理日期和

Python标准库datetime模块日期和时间数据类型解读

《Python标准库datetime模块日期和时间数据类型解读》文章介绍Python中datetime模块的date、time、datetime类,用于处理日期、时间及日期时间结合体,通过属性获取时间... 目录Datetime常用类日期date类型使用时间 time 类型使用日期和时间的结合体–日期时间(

使用Python开发一个Ditto剪贴板数据导出工具

《使用Python开发一个Ditto剪贴板数据导出工具》在日常工作中,我们经常需要处理大量的剪贴板数据,下面将介绍如何使用Python的wxPython库开发一个图形化工具,实现从Ditto数据库中读... 目录前言运行结果项目需求分析技术选型核心功能实现1. Ditto数据库结构分析2. 数据库自动定位3

Python yield与yield from的简单使用方式

《Pythonyield与yieldfrom的简单使用方式》生成器通过yield定义,可在处理I/O时暂停执行并返回部分结果,待其他任务完成后继续,yieldfrom用于将一个生成器的值传递给另一... 目录python yield与yield from的使用代码结构总结Python yield与yield

python使用Akshare与Streamlit实现股票估值分析教程(图文代码)

《python使用Akshare与Streamlit实现股票估值分析教程(图文代码)》入职测试中的一道题,要求:从Akshare下载某一个股票近十年的财务报表包括,资产负债表,利润表,现金流量表,保存... 目录一、前言二、核心知识点梳理1、Akshare数据获取2、Pandas数据处理3、Matplotl

Django开发时如何避免频繁发送短信验证码(python图文代码)

《Django开发时如何避免频繁发送短信验证码(python图文代码)》Django开发时,为防止频繁发送验证码,后端需用Redis限制请求频率,结合管道技术提升效率,通过生产者消费者模式解耦业务逻辑... 目录避免频繁发送 验证码1. www.chinasem.cn避免频繁发送 验证码逻辑分析2. 避免频繁

精选20个好玩又实用的的Python实战项目(有图文代码)

《精选20个好玩又实用的的Python实战项目(有图文代码)》文章介绍了20个实用Python项目,涵盖游戏开发、工具应用、图像处理、机器学习等,使用Tkinter、PIL、OpenCV、Kivy等库... 目录① 猜字游戏② 闹钟③ 骰子模拟器④ 二维码⑤ 语言检测⑥ 加密和解密⑦ URL缩短⑧ 音乐播放

python panda库从基础到高级操作分析

《pythonpanda库从基础到高级操作分析》本文介绍了Pandas库的核心功能,包括处理结构化数据的Series和DataFrame数据结构,数据读取、清洗、分组聚合、合并、时间序列分析及大数据... 目录1. Pandas 概述2. 基本操作:数据读取与查看3. 索引操作:精准定位数据4. Group

Python pandas库自学超详细教程

《Pythonpandas库自学超详细教程》文章介绍了Pandas库的基本功能、安装方法及核心操作,涵盖数据导入(CSV/Excel等)、数据结构(Series、DataFrame)、数据清洗、转换... 目录一、什么是Pandas库(1)、Pandas 应用(2)、Pandas 功能(3)、数据结构二、安

Python使用Tenacity一行代码实现自动重试详解

《Python使用Tenacity一行代码实现自动重试详解》tenacity是一个专为Python设计的通用重试库,它的核心理念就是用简单、清晰的方式,为任何可能失败的操作添加重试能力,下面我们就来看... 目录一切始于一个简单的 API 调用Tenacity 入门:一行代码实现优雅重试精细控制:让重试按我