[bigdata-121] python科学计算

2024-06-11 09:32

本文主要是介绍[bigdata-121] python科学计算,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

python科学计算,目前用的比较多的库,列一下。用的人多,也就意味着坑少,该踩的坑都被踩完了


1. 数值计算

1.1 numpy

http://www.numpy.org/


1.2 scipy

https://www.scipy.org/


1.3 pandas

http://pandas.pydata.org/


2. 符号计算

sympy


3.绘图

matplot


--------

关于numpy

1.
numpy提供的东西:多维数组以及扩展功能,比如掩码数组和矩阵; 数组的快速操作,包括数据的,逻辑的,改变形状,排序,选择,IO,离散变换,线性代数,随机模拟等等。


1.1 numpy的ndaarray封装同质的数据类型,数据必须是同一类型的; 数据创建时大小固定,改变大小,其实就是创建了新数组。


[1,2,1]是一个数组,rank 1,只有一个axis,这个axis的长度是3,而[[1.,0.,0.],[0.,1.,2.]]是rank 2,第一个axis/dimentsion的长度是2,第二个axis/dimentsion的长度是3。


numpy的数组类是ndararry,也叫做array。numpy.array和python标准库的array.array不同。


ndarray.ndim,几个axis,也就是rank
ndarray.shape,dimensions of array,是一个tuple,比如(3,5),它的长度是rank,也就是ndarry.ndim。


ndarry.size, 数组里有多少个元素,等于shape所有值的乘积。


ndarry.dtype,numpy.int32, numpy.int16, numpy.float64,等等。


ndarray.itemsize, 比如faoat64的itemsize是8, 也就是64/8。


ndarray.data,存放数据的buffer,通常不需要直接使用。




1.2 创建数组
一个二维数据的定义,a = np.arange(15).reshape(3, 5)


一个一维数组的定义,a = np.array([6.,7.,8.])


b = np.array([(1.5,2,3), (4,5,6)])


b = np.array( [ [1,2], [3,4] ], dtype=complex )


b = np.ones( (2,3,4), dtype=np.int16 )np.zeros( (3,4) )


b = np.empty( (2,3) )


b = np.arange( 10, 30, 5 )




1.3 复杂一点的
from numpy import pi
np.linspace( 0, 2, 9 )
x = np.linspace( 0, 2*pi, 100 )
f = np.sin(x)


1.4 相关函数
array, zeros, zeros_like, ones, ones_like, empty, empty_like, arange, linspace, numpy.
random.rand, numpy.random.randn, fromfunction, fromfile


2. 计算
2.1 *和dot不一样,前者是两个数组的元素和元素乘积结果,后者是按照矩阵相乘计算。

2.3 诸多运算函数


3.numpy 基础

强制类型转换,x=np.float32(1.0)   x=np.int_([1.1, 2.2,3.3])


broadcasting: 这个表示,numpy如何处理计算时的shape问题。比如说,在计算中,小的数据要broadcast到更大的数据,以适配shape。比如说,a = np.array([1.,2.,3.]),b = np.array([2.,3.,4.]),那么a*b的结果就是np.array([2.,6.,12.])。对 a = np.array([1.,2.,3.]),b=2.,a*b就是np.array[2.,4.,6.],broadcast将b拉伸成跟a一样的尺寸然后进行计算。


byte-swapping,在存储上,可能会遇到不同的数,在python和c或者操作系统上的存储方式不同,比如大端法或者小端法。

结构数据类型,也就是创建一个包涵不同数据类型的数组,比如:

x=np.array([(1,2.,'hello'),(2,3.,'world') ], dtype=[('foo','i4'), ('bar','f4'), ('bza', 's10')])


更多的细节,可以参考num-ref

-----------------------------------------------------

关于 scipy

scipy的namespace只包含numpy里的函数。scipy是基于numpy的数学算法和便用函数库,比numpy的应用层面更高一些。主要包括,聚类,数学物理方法,快速复立叶变换,积分,插值,线代,图像处理,回归,优化,信号处理,稀疏矩阵,空间数据,统计等等。

-----------------------------------------------------

关于pandas

主要解决如下问题:有标记的数据,多种索引方式,数据集变换,输入数据,高效的内存稀疏数据,移动窗统计。


创建时序数据

s = pd.Series([1,3,5,np.nan,6,8])


创建DataFrame

dates = pd.date_range('20130101', periods=6)

df = pd.DataFrame(np.random.randn(6,4), index=dates, columns=list('ABCD'))

这就是创建了一个label是日期的6行4列的随机数矩阵。


在基于DataFrame上,出现了一大批算法操作函数。






这篇关于[bigdata-121] python科学计算的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1050789

相关文章

Python的Darts库实现时间序列预测

《Python的Darts库实现时间序列预测》Darts一个集统计、机器学习与深度学习模型于一体的Python时间序列预测库,本文主要介绍了Python的Darts库实现时间序列预测,感兴趣的可以了解... 目录目录一、什么是 Darts?二、安装与基本配置安装 Darts导入基础模块三、时间序列数据结构与

Python正则表达式匹配和替换的操作指南

《Python正则表达式匹配和替换的操作指南》正则表达式是处理文本的强大工具,Python通过re模块提供了完整的正则表达式功能,本文将通过代码示例详细介绍Python中的正则匹配和替换操作,需要的朋... 目录基础语法导入re模块基本元字符常用匹配方法1. re.match() - 从字符串开头匹配2.

Python使用FastAPI实现大文件分片上传与断点续传功能

《Python使用FastAPI实现大文件分片上传与断点续传功能》大文件直传常遇到超时、网络抖动失败、失败后只能重传的问题,分片上传+断点续传可以把大文件拆成若干小块逐个上传,并在中断后从已完成分片继... 目录一、接口设计二、服务端实现(FastAPI)2.1 运行环境2.2 目录结构建议2.3 serv

通过Docker容器部署Python环境的全流程

《通过Docker容器部署Python环境的全流程》在现代化开发流程中,Docker因其轻量化、环境隔离和跨平台一致性的特性,已成为部署Python应用的标准工具,本文将详细演示如何通过Docker容... 目录引言一、docker与python的协同优势二、核心步骤详解三、进阶配置技巧四、生产环境最佳实践

Python一次性将指定版本所有包上传PyPI镜像解决方案

《Python一次性将指定版本所有包上传PyPI镜像解决方案》本文主要介绍了一个安全、完整、可离线部署的解决方案,用于一次性准备指定Python版本的所有包,然后导出到内网环境,感兴趣的小伙伴可以跟随... 目录为什么需要这个方案完整解决方案1. 项目目录结构2. 创建智能下载脚本3. 创建包清单生成脚本4

Python实现Excel批量样式修改器(附完整代码)

《Python实现Excel批量样式修改器(附完整代码)》这篇文章主要为大家详细介绍了如何使用Python实现一个Excel批量样式修改器,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一... 目录前言功能特性核心功能界面特性系统要求安装说明使用指南基本操作流程高级功能技术实现核心技术栈关键函

python获取指定名字的程序的文件路径的两种方法

《python获取指定名字的程序的文件路径的两种方法》本文主要介绍了python获取指定名字的程序的文件路径的两种方法,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要... 最近在做项目,需要用到给定一个程序名字就可以自动获取到这个程序在Windows系统下的绝对路径,以下

使用Python批量将.ncm格式的音频文件转换为.mp3格式的实战详解

《使用Python批量将.ncm格式的音频文件转换为.mp3格式的实战详解》本文详细介绍了如何使用Python通过ncmdump工具批量将.ncm音频转换为.mp3的步骤,包括安装、配置ffmpeg环... 目录1. 前言2. 安装 ncmdump3. 实现 .ncm 转 .mp34. 执行过程5. 执行结

Python实现批量CSV转Excel的高性能处理方案

《Python实现批量CSV转Excel的高性能处理方案》在日常办公中,我们经常需要将CSV格式的数据转换为Excel文件,本文将介绍一个基于Python的高性能解决方案,感兴趣的小伙伴可以跟随小编一... 目录一、场景需求二、技术方案三、核心代码四、批量处理方案五、性能优化六、使用示例完整代码七、小结一、

Python中 try / except / else / finally 异常处理方法详解

《Python中try/except/else/finally异常处理方法详解》:本文主要介绍Python中try/except/else/finally异常处理方法的相关资料,涵... 目录1. 基本结构2. 各部分的作用tryexceptelsefinally3. 执行流程总结4. 常见用法(1)多个e