Python读取mnist数据集
2023-06-13 09:15:04 时间
在看deeplearning教程的时候遇到了这么个玩意,mnist,一个手写数字的数据集。大概是google为了方便广大程序员进行数字识别而构建的库,里面都是美国中学生手写的阿拉伯数字,但是为了方便存储,他并不是以图片的形式保存的,而是以二进制文件的形式保存的。这就让普通人看着略微蛋疼的了,教程里也并没有提供具体的提取图片的方案。得,读取这个还得自己来。
地址
我用的应该是用python处理过的版本: mnist.pkl.gz,这个好像是为了方便用python读取特意配置过的。
分析
别看他是压缩文件,解压之后并没有用,而是一个很大的文本文件,还得在这里读取。文档里说,这里面有60000个训练图片,10000个测试图片,训练图片又分为了train_set 和valid_set两个集合(不懂是啥意思)。每个集合内都包含了图片和标签两块内容,图片都是28*28的点阵图;而标签,则是0-9之间的一个数字。
说的也挺清楚的,思路也大概晓得了,我们当前的任务应该就是用matplot进行绘图保存即可。
代码
折腾许久也是弄好了,教程中说要用theano来存图,然而theano还不会用。。。0.0
import cPickle, gzip
import numpy as np
import matplotlib.pyplot as plt
def display(data):#显示图片
x=np.arange(0,28)
y=np.arange(0,28)
X,Y=np.meshgrid(x,y)
plt.imshow(data.reshape(28,28),interpolation='nearest', cmap='bone')
plt.colorbar()
plt.show()
return
def save(data,name):#保存图片
x=np.arange(0,28)
y=np.arange(0,28)
X,Y=np.meshgrid(x,y)
plt.imshow(data.reshape(28,28),interpolation='nearest', cmap='bone')
plt.savefig(name)
return
f = gzip.open('mnist.pkl.gz', 'rb')#读取数据
train_set, valid_set, test_set = cPickle.load(f)#分类
f.close()
train_set_image,train_set_num=train_set
token=10 #需要显示的图片个数
for i in range(0,token):
save(train_set_image[i],"./"+str(i)+"-"+str(train_set_num[i]))
我显示了10张图片,打开第一张(0-5.png)看看效果:
这就是美国人写的5。。。
相关文章
- python pandas读取csv文件_pandas将数据写入csv
- python十进制转换_Python 进制转换
- python读取txt中的一列称为_python读取txt文件并取其某一列数据的示例
- python海龟作图红绿灯_海龟作图—用Python绘图
- 使用Python激活成功教程通达信股票数据[通俗易懂]
- python处理通达信 5分钟数据 .lc5文件处理,生成csv文件,期货回测
- 【说站】python数据离散化是什么
- 【说站】python json保存数据的方法
- python读取pkl_Python读取文件的一段内容
- python分析人口出生率代码_国家统计局居然也能用的上Python?人口数据Python脚本了解一下?…[通俗易懂]
- Python主题建模LDA模型、t-SNE 降维聚类、词云可视化文本挖掘新闻组数据集|附代码数据
- Python 生成随机数_python建立随机数列表
- python中使用马尔可夫决策过程(MDP)动态编程来解决最短路径强化学习问题|附代码数据
- 软件测试|Python数据可视化神器——pyecharts教程(五)
- 【Android 逆向】使用 Python 解析 ELF 文件 ( Capstone 反汇编 ELF 文件中的机器码数据 | 完整代码示例 ) ★★★
- 通过实践快速上手python
- Python操作Redis实现数据持久化(python操作redis)
- Python实现MySQL数据库的读取(python读取mysql)
- python用Redis与Python实现大数据收集与分析(redis 联合)