数据处理
-
Python处理Excel数据的方法
Python处理Excel数据的方法 电子表格格式 1.使用 xlrd 来处理; 2.使用 xlwt 来处理; 3.使用 openpyxl 来处理; 4.使用Pandas库来处理e…
-
光谱异常样本检测分析
以近红外光谱为例,大部分光谱数据在不考虑分类问题时,在构建模型前需要对采集数据进行样本分析,以降低因生产过程异常、人为误操作和其他原因对软测量模型的影响,即异常样本检…
-
h5文件格式详解及h5文件与图片文件之间的相互转换(python实现)
背景:h5文件详解 H5文件是层次数据格式第5代的版本(Hierarchical Data Format,HDF5),它是用于存储科学数据的一种文件格式和库文件。由美国超级计算中心…
-
python处理csv文件
如何使用python处理csv文件 素材准备 csv⽂件其实就是⽂本⽂件,遵循了⼀定的格式,常⻅的csv⽂件⼀般是⽤逗号来隔开列,⽤换⾏符隔开不同的⾏,注意这⾥的符号都是英⽂符…
-
一维信号的频域特征分析python
频域分析是按照频率观察信号特征。在一般情况下,我们分析信号习惯从时域方向开始,因为时域的分析更加直观,但频域的表示更加简洁,从这方面去分析对信号了解更加深刻。通过分析振动信号的频域…
-
python使用numpy保存字典格式的数据
这里写一个保存用的工具函数: def save_dict_by_numpy(filename, dict_vale): if not (os.path.exists(os.path…
-
2、异常值(outliers)检测:业务法、Z-score、3σ准则、箱线图
1.1、业务法 根据对业务的理解,然后对每一个指标设定一个合理的范围,一旦超过这个范围,则认为是异常值。比如收入,一般来说都是正数,如果出现小于0,则认为是异常值;再比如年龄,…
-
深度学习项目示例使用自动编码器进行模糊图像修复
图像模糊是由相机或拍摄对象移动、对焦不准确或光圈配置不当引起的不清晰图像。为了获得更清晰的照片,我们可以使用相机镜头的首选焦距重新拍摄同一张照片,或者使用深度学习知识再现模糊图像。…
-
Pandas中 DataFrame中添加一行/一列
概述 添加行df.loc[]以及df.append()两种方法, 添加列df[]和df.insert()两种方法。 添加行例concat()和reindex()两种方法 1.添加一…
-
一段代码玩转数据增强的N种方法
文@960913 一切要从训练神经网络需要的数据说起 众所周知,即使是目前最先进的神经网络模型,其本质上也是在利用一系列线性和非线性的函数去拟合目标输出。既然是拟合,当然越多的样本就能获得越准确的结果,这也是为什么现在训练神经网络所使用的数据规模…