一、Python基础
1. 列表推导式与条件赋值
在生成一个数字序列的时候,在 Python 中可以如下写出:
![](https://img.haomeiwen.com/i6080695/1dd9ab5cef2c18ed.png)
事实上可以利用列表推导式进行写法上的简化: [* for i in *] 。其中,第一个 * 为映射函数,其输入为后面 i 指代的内容,第二个 * 表示迭代的对象。
![](https://img.haomeiwen.com/i6080695/b75b950c9a5f9183.png)
列表表达式还支持多层嵌套,如下面的例子中第一个 for 为外层循环,第二个为内层循环:
![](https://img.haomeiwen.com/i6080695/7d3ff92468edd058.png)
除了列表推导式,另一个实用的语法糖是带有 if 选择的条件赋值,其形式为 value = a if condition else b :
![](https://img.haomeiwen.com/i6080695/82f111a7824a1ac6.png)
等价于如下的写法:
![](https://img.haomeiwen.com/i6080695/771838a1ef5db158.png)
下面举一个例子,截断列表中超过5的元素,即超过5的用5代替,小于5的保留原来的值:
![](https://img.haomeiwen.com/i6080695/bca50bbd5bb12c76.png)
2. 匿名函数与map方法
有一些函数的定义具有清晰简单的映射关系,例如上面的 my_func 函数,这时候可以用匿名函数的方法简洁地表示:
![](https://img.haomeiwen.com/i6080695/d9615e55ca4e31f7.png)
但上面的用法其实违背了“匿名”的含义,事实上它往往在无需多处调用的场合进行使用,例如上面列表推导式中的例子,用户不关心函数的名字,只关心这种映射的关系:
![](https://img.haomeiwen.com/i6080695/aea51f3ecfdde1fb.png)
对于上述的这种列表推导式的匿名函数映射, Python 中提供了 map 函数来完成,它返回的是一个 map 对象,需要通过 list 转为列表:
![](https://img.haomeiwen.com/i6080695/992cdb6bd66137c5.png)
对于多个输入值的函数映射,可以通过追加迭代对象实现:
![](https://img.haomeiwen.com/i6080695/b59ef808a11a98b6.png)
3. zip对象与enumerate方法
zip函数能够把多个可迭代对象打包成一个元组构成的可迭代对象,它返回了一个 zip 对象,通过 tuple, list 可以得到相应的打包结果
![](https://img.haomeiwen.com/i6080695/00b39cee3cb37e20.png)
往往会在循环迭代的时候使用到 zip 函数:
![](https://img.haomeiwen.com/i6080695/a596d52aa726697e.png)
enumerate 是一种特殊的打包,它可以在迭代时绑定迭代元素的遍历序号:
![](https://img.haomeiwen.com/i6080695/fc771d9410afb873.png)
用 zip 对象也能够简单地实现这个功能:
![](https://img.haomeiwen.com/i6080695/28de6ac4e3f5dc63.png)
当需要对两个列表建立字典映射时,可以利用 zip 对象:
![](https://img.haomeiwen.com/i6080695/75b6bda72ff2a5b2.png)
既然有了压缩函数,那么 Python 也提供了 * 操作符和 zip 联合使用来进行解压操作:
![](https://img.haomeiwen.com/i6080695/c0d117cd3fa668de.png)
二、Numpy基础
1. np数组的构造
最一般的方法是通过 array 来构造:
![](https://img.haomeiwen.com/i6080695/27f3239f2bb47951.png)
下面讨论一些特殊数组的生成方式:
【a】等差序列: np.linspace, np.arange
![](https://img.haomeiwen.com/i6080695/5b27711575d4ab5c.png)
【b】特殊矩阵: zeros, eye, full
![](https://img.haomeiwen.com/i6080695/50886a8eebcc8a68.png)
【c】随机矩阵: np.random
最常用的随机生成函数为 rand, randn, randint, choice ,它们分别表示0-1均匀分布的随机数组、标准正态的随机数组、随机整数组和随机列表抽样:
![](https://img.haomeiwen.com/i6080695/b1342fb880fcfb7f.png)
对于服从区间 aa 到 bb 上的均匀分布可以如下生成:
![](https://img.haomeiwen.com/i6080695/f1b9ff5590f30c06.png)
randn 生成了 N(0,I)N(0,I) 的标准正态分布:
![](https://img.haomeiwen.com/i6080695/bd7e425533744188.png)
对于服从方差为 σ2σ2 均值为 μμ 的一元正态分布可以如下生成:
![](https://img.haomeiwen.com/i6080695/4081704dde23eb50.png)
randint 可以指定生成随机整数的最小值最大值(不包含)和维度大小:
![](https://img.haomeiwen.com/i6080695/6f05e4a1feaf6cc2.png)
choice 可以从给定的列表中,以一定概率和方式抽取结果,当不指定概率时为均匀采样,默认抽取方式为有放回抽样:
![](https://img.haomeiwen.com/i6080695/f35d718671ca1cb7.png)
当返回的元素个数与原列表相同时,等价于使用 permutation 函数,即打散原列表:
![](https://img.haomeiwen.com/i6080695/9aa096ae91f2e2bd.png)
最后,需要提到的是随机种子,它能够固定随机数的输出结果:
![](https://img.haomeiwen.com/i6080695/2ea4aa1ac727451f.png)
2. np数组的变形与合并
【a】转置: T
![](https://img.haomeiwen.com/i6080695/c2c3db64c2dadfde.png)
【b】合并操作: r_, c_
对于二维数组而言, r_ 和 c_ 分别表示上下合并和左右合并:
![](https://img.haomeiwen.com/i6080695/adbc41bafa8de905.png)
一维数组和二维数组进行合并时,应当把其视作列向量,在长度匹配的情况下只能够使用左右合并的 c_ 操作:
![](https://img.haomeiwen.com/i6080695/9efbe1c5051cd9a1.png)
【c】维度变换: reshape
reshape 能够帮助用户把原数组按照新的维度重新排列。在使用时有两种模式,分别为 C 模式和 F 模式,分别以逐行和逐列的顺序进行填充读取。
![](https://img.haomeiwen.com/i6080695/f8f3cbcf0207b771.png)
特别地,由于被调用数组的大小是确定的, reshape 允许有一个维度存在空缺,此时只需填充-1即可:
![](https://img.haomeiwen.com/i6080695/7dea594a177aa885.png)
下面将 n*1 大小的数组转为1维数组的操作是经常使用的:
![](https://img.haomeiwen.com/i6080695/25538ba700f6ce77.png)
3. np数组的切片与索引
数组的切片模式支持使用 slice 类型的 start:end:step 切片,还可以直接传入列表指定某个维度的索引进行切片:
![](https://img.haomeiwen.com/i6080695/21e468ef3ec2403d.png)
此外,还可以利用 np.ix_ 在对应的维度上使用布尔索引,但此时不能使用 slice 切片:
![](https://img.haomeiwen.com/i6080695/0a95622152e639be.png)
当数组维度为1维时,可以直接进行布尔索引,而无需 np.ix_ :
![](https://img.haomeiwen.com/i6080695/b9d08a97c533b91c.png)
4. 常用函数
为了简单起见,这里假设下述函数输入的数组都是一维的。
【a】 where
where 是一种条件函数,可以指定满足条件与不满足条件位置对应的填充值:
![](https://img.haomeiwen.com/i6080695/c8e378e03f95d580.png)
【b】 nonzero, argmax, argmin
这三个函数返回的都是索引, nonzero 返回非零数的索引, argmax, argmin 分别返回最大和最小数的索引:
![](https://img.haomeiwen.com/i6080695/982e44d914c416c9.png)
【c】 any, all
any 指当序列至少 存在一个 True 或非零元素时返回 True ,否则返回 False
all 指当序列元素 全为 True 或非零元素时返回 True ,否则返回 False
![](https://img.haomeiwen.com/i6080695/e655a8f78b489d0a.png)
【d】 cumprod, cumsum, diff
cumprod, cumsum 分别表示累乘和累加函数,返回同长度的数组, diff 表示和前一个元素做差,由于第一个元素为缺失值,因此在默认参数情况下,返回长度是原数组减1
![](https://img.haomeiwen.com/i6080695/2282dcbd9d01ab55.png)
【e】 统计函数
常用的统计函数包括 max, min, mean, median, std, var, sum, quantile ,其中分位数计算是全局方法,因此不能通过 array.quantile 的方法调用:
![](https://img.haomeiwen.com/i6080695/ccd01f235d35633f.png)
但是对于含有缺失值的数组,它们返回的结果也是缺失值,如果需要略过缺失值,必须使用 nan* 类型的函数,上述的几个统计函数都有对应的 nan* 函数。
![](https://img.haomeiwen.com/i6080695/e25bec2998e8ad52.png)
对于协方差和相关系数分别可以利用 cov, corrcoef 如下计算:
![](https://img.haomeiwen.com/i6080695/5d43304b401d520c.png)
最后,需要说明二维 Numpy 数组中统计函数的 axis 参数,它能够进行某一个维度下的统计特征计算,当 axis=0 时结果为列的统计指标,当 axis=1 时结果为行的统计指标:
![](https://img.haomeiwen.com/i6080695/c9a809a2c59aa7a8.png)
5. 广播机制
广播机制用于处理两个不同维度数组之间的操作,这里只讨论不超过两维的数组广播机制。
【a】标量和数组的操作
当一个标量和数组进行运算时,标量会自动把大小扩充为数组大小,之后进行逐元素操作:
![](https://img.haomeiwen.com/i6080695/b86e57d3678e3b82.png)
【b】二维数组之间的操作
当两个数组维度完全一致时,使用对应元素的操作,否则会报错,除非其中的某个数组的维度是 m×1m×1 或者 1×n1×n ,那么会扩充其具有 11 的维度为另一个数组对应维度的大小。例如, 1×21×2 数组和 3×23×2 数组做逐元素运算时会把第一个数组扩充为 3×23×2 ,扩充时的对应数值进行赋值。但是,需要注意的是,如果第一个数组的维度是 1×31×3 ,那么由于在第二维上的大小不匹配且不为 11 ,此时报错。
![](https://img.haomeiwen.com/i6080695/0e782b60456ab632.png)
【c】一维数组与二维数组的操作
当一维数组 AkAk 与二维数组 Bm,nBm,n 操作时,等价于把一维数组视作 A1,kA1,k 的二维数组,使用的广播法则与【b】中一致,当 k!=nk!=n 且 k,nk,n 都不是 11 时报错。
![](https://img.haomeiwen.com/i6080695/18439e6ab8efd0e7.png)
6. 向量与矩阵的计算
【a】向量内积: dot
a⋅b=∑iaibi
![](https://img.haomeiwen.com/i6080695/1eb09227baaacff5.png)
【b】向量范数和矩阵范数: np.linalg.norm
在矩阵范数的计算中,最重要的是 ord 参数,可选值如下:
![](https://img.haomeiwen.com/i6080695/34d024cab36b96b5.png)
![](https://img.haomeiwen.com/i6080695/ba4df49039a56408.png)
![](https://img.haomeiwen.com/i6080695/f8d644b8199ad1fa.png)
【c】矩阵乘法: @
[Am×pBp×n]ij=∑k=1pAikBkj
![](https://img.haomeiwen.com/i6080695/4c91756fb6f9518b.png)
三、练习
Ex1:利用列表推导式写矩阵乘法
一般的矩阵乘法根据公式,可以由三重循环写出:
![](https://img.haomeiwen.com/i6080695/f8c98b46de0f862d.png)
请将其改写为列表推导式的形式。
![](https://img.haomeiwen.com/i6080695/486753dd45e41d1f.png)
参考datawhale:https://datawhalechina.github.io/joyful-pandas/build/html/%E7%9B%AE%E5%BD%95/ch1.html
网友评论