数据分析与展示---Numpy数据存取与函数

简介

一:数据的CSV文件存取(一维或二维)

(一)写入文件savetxt

(二)读取文件loadtxt

二:多维数据的存取

(一)保存文件tofile

(二)读取文件fromfile

(三)NumPy 的便捷文件存取save/savez或load

三:NumPy的随机数函数(random模块)

rand()均匀分布

randn()标准状态分布

randint()整数数组

seed()随机数种子

shuffle()根据数组第一轴产生一个新的乱序数组(在原数组基础)

permutation()同上改变顺序(不会修改原数组)

choice()在一维数组基础上,抽取元素组成新的数组

uniform()均匀分布数组

normal()状态分布数组

poisson()泊松分布数组

四:NumPy的统计函数

sum()相关元素和

mean()相关元素均值(期望)

average()相关元素均值(可加权)

std()相关元素标准差

var()相关元素方差

五:NumPy的梯度函数

gradient()返回每个维度梯度

一:数据的CSV文件存取(一维或二维)

(一)写入文件savetxt

(二)读取文件loadtxt

二:多维数据的存取

(一)保存文件tofile

补充:

二进制文件会比文本文件占用更小的空间

(二)读取文件fromfile

注意:

该方法需要读取时知道存入文件时数组的维度和元素类型
所以:a.tofile()和np.fromfile()需要配合使用
解决方法:可以通过元数据文件存储额外信息,在加载数据时,配合元数据文件进行还原
元数据(Metadata),又称中介数据、中继数据,为描述数据的数据(data about data),主要是描述数据属性(property)的信息,用来支持如指示存储位置、历史数据、资源查找、文件记录等功能。

(三)NumPy 的便捷文件存取save/savez或load

注意:

若是作为中间数据缓存,save和load是一种十分便捷的方法
若是与其他程序进行交互对接,CSV是一种不错的方法

三:NumPy的随机数函数

注意:上面的概率是谁的数值越大,谁被抽取的概率越大

四:NumPy的统计函数

五:NumPy的梯度函数

梯度:反应了元素的变化率,梯度有助于我们发现图像。声音的边缘,在那些不是很平滑的地方,我们能够很快的发现

总结

原文地址:https://www.cnblogs.com/ssyfj/p/9291265.html

时间: 2024-07-31 05:20:46

数据分析与展示---Numpy数据存取与函数的相关文章

数据分析与展示——NumPy数据存取与函数

NumPy库入门 NumPy数据存取和函数 数据的CSV文件存取 CSV文件 CSV(Comma-Separated Value,逗号分隔值)是一种常见的文件格式,用来存储批量数据. np.savetxt(frame,array,fmt='%.18e',delimiter=None) frame:文件.字符串或产生器,可以是.gz或.bz2的压缩文件. array:存入文件的数组. fmt:写入文件的格式,例如:%d %.2f %.18e. delimiter:分割字符串,默认是任何空格. 范例

Python数据分析与展示(1)-数据分析之表示(1)-NumPy数据存取与函数

NumPy数据存取与函数 数据的CSV文件存取 CSV文件 CSV(Comma-Separated Value,逗号分隔值) CSV是一种常见的文件格式,用来存储批量数据. 将数据写入CSV文件 np.savetxt(frame, array, fmt='%.18e', delimiter=None) -frame: 文件.字符串或产生器,可以是.gz或.bz2的压缩文件 -array: 存入文件的数组 -fmt: 写入文件的格式,例如:%d %.2f %.18e -delimiter:分割字符

NumPy数据存取与函数

一.数据的CSV文件存取 CSV文件: CSV(Comma-Separated Value,逗号分隔值) CSV是一种常见的文件格式,用来存储批量数据. 将数据写入CSV文件的方法是savetxt np.savetxt(frame,array,fmt='%.18e',delimiter=None) frame:文件.字符串或产生器,可以是.gz或.bz2的压缩文件. array:存入文件的数组. fmt:写入文件的格式,例如:%d %.2f %.18e(默认) delimiter:分割字符串,默

数据分析与展示——NumPy库入门

这是我学习北京理工大学嵩天老师的<Python数据分析与展示>课程的笔记.嵩老师的课程重点突出.层次分明,在这里特别感谢嵩老师的精彩讲解. NumPy库入门 数据的维度 维度是一组数据的组织形式.数据维度就是在数据之间形成特定关系表达多种含义的一个概念. 一维数据: 一维数据由对等关系的有序或无序数据构成,采用线性方式组织.对应列表.数组和集合等概念. 列表和数组:一组数据的有序结构. 区别: 列表:数据类型可以不同 数组:数据类型相同 二维数据: 二维数据由多个一维数据构成,是一维数据的组合

数据分析与展示——Pandas数据特征分析

Pandas数据特征分析 数据的排序 将一组数据通过摘要(有损地提取数据特征的过程)的方式,可以获得基本统计(含排序).分布/累计统计.数据特征(相关性.周期性等).数据挖掘(形成知识). .sort_index()方法在指定轴上根据索引进行排序,默认升序 .sort_index(axis=0, ascending=True) In [1]: import pandas as pd In [2]: import numpy as np In [3]: b = pd.DataFrame(np.ar

数据可视化之数据分析与展示

Python数据分析与展 本课程共包括4周内容,分别讲解: (1)Python第三方库NumPy,讲解N维数据的表达及科学计算的基本概念和运算方法: (2)Python第三方库Matplotlib,讲解绘制坐标系.散点图.极坐标图等直观展示数据趋势和特点的方法: (3)Python第三方库Pandas,强大的专业级数据分析和处理第三方库,介绍并讲解Series和DataFrame数据类型的表示和基本使用. 该课程希望传递"理解和运用计算生态,培养集成创新思维"的理念,重点培养学习者运用

python数据分析与展示(二)

数据存取与函数 一.CSV文件 CSV(Comma-Separated Value,逗号分隔值),CSV是一种常见的文件格式,用来存储批量数据. CSV文件只能有效存储一位和二维数组. 写入数组: import numpy as np np.savetxt(frame,array,fmt='%.18e',delimiter=None) # frame:文件.字符串或产生器,可以是.gz或.bz2的压缩文件 # array:存入文件的数组 # fmt:写入文件的格式,例如%d %.2f %.18e

pyhton数据分析与展示

目录 1.NumPy库入门 2.NumPy数据存储与函数 原文地址:https://www.cnblogs.com/WM2019/p/11620053.html

LBS数据分析:使用地图展示统计数据——麻点图与麻数图

作为一个LBS的APP,都获得了用户经纬度,也都使用了友盟统计.google ana等等统计分析系统,不过没有地图展示功能,不能进行直观的展示. 友盟统计.google ana等系统是总体数据统计,无法和业务结合起来,比如淘宝提供每个店.每个商品的用户统计. 当有上述需求时,就需要自己服务器保存一份经纬度,进行统计,这时候如何直观的展示? 查看各个地图开放平台的文档,发现有的提供了“麻点图/点聚合(Marker Cluster)”功能. 原理是:把每个点都画在地图上,缩放时累加聚合. 缺点:只能