数据存储

读取大量数据

数据存储函数创建一个数据存储,这是太大,以适应在内存中的数据的集合库。数据存储区,您可以读取并存储在多个文件磁盘,远程位置,或数据库作为单个实体上处理数据。如果数据太大,无法在内存中,您可以管理数据的增量导入,创建数组来处理数据,或使用数据存储作为输入mapreduce用于进一步处理。欲了解更多信息,请参阅开始使用数据存储

功能

展开全部

数据存储 对于数据的大集合创建数据仓库
tabularTextDatastore 表格文本文件的数据存储
spreadsheetDatastore 用于电子表格文件的数据存储
imageDatastore 数据存储的图像数据
parquetDatastore 数据存储区的平面文件的集合
fileDatastore 数据存储自定义文件阅读器
arrayDatastore 数据存储在内存中的数据
读取数据存储中的数据
readall 阅读数据存储的所有数据
预习 在数据存储数据的预览子集
hasdata 确定数据是否可用来读取
重启 复位数据存储到初始状态
writeall 写数据存储到文件
洗牌 随机播放数据存储的所有数据
isShuffleable 确定数据存储是否shuffleable
numpartitions 数据存储分区数
划分 分区数据存储
isPartitionable 确定数据存储是否可分区

功能

结合 合并来自多个数据存储数据
变换 变换数据存储

对象

CombinedDatastore 数据存储结合数据从多个数据存储基础阅读
TransformedDatastore 数据存储改造底层数据存储
KeyValueDatastore 用于使用的键-值对数据的数据存储mapreduce
TallDatastore 数据存储的检查点阵列

展开全部

matlab.io.Datastore 基本数据存储类
matlab.io.datastore.Partitionable 向数据存储添加并行化支持万博1manbetx
matlab.io.datastore.HadoopLocationBased Hadoop的万博1manbetx到数据存储支持
matlab.io.datastore.Shuffleable 添加到数据存储支持洗牌万博1manbetx
matlab.io.datastore.DsFileSet 在数据存储文件的收集文件集对象
matlab.io.datastore.DsFileReader 用于数据存储中的文件的文件读取器对象
matlab.io.datastore.FileWritable 添加文件写入到数据存储支持万博1manbetx
matlab.io.datastore.FoldersPropertyProvider 向数据存储添加文件夹属性支持万博1manbetx
matlab.io.datastore.FileSet 在数据存储文件的集合文件集
matlab.io.datastore.BlockedFileSet 阻止的文件设置为文件的块的集

主题

开始使用数据存储

数据存储是用于读取单个文件或多个文件或数据的集合中的对象。

选择数据存储为文件格式或应用程序

根据数据或应用程序的文件格式选择正确的数据存储。

阅读和分析大量表格文本文件

此示例示出了如何创建用于包含表格数据一个大的文本文件的数据存储,然后读取和处理在一个时间的数据的一个块或一次一个文件。

阅读和分析图像文件

这个例子显示了如何创建一个数据存储用于图像的采集,读取图像文件,并且找到具有最大平均色调,饱和度和亮度(HSV)的图像。

阅读和分析MAT文件与关键字数据

此示例示出了如何在MAT-文件,它是的输出创建关键值对数据的数据存储mapreduce

读取并分析Hadoop序列文件

这个示例展示了如何为包含键-值数据的序列文件创建数据存储。

与远程数据,

在亚马逊S3™,Microsoft远程数据工作®Azure®存储Blob或HDFS™。

建立数据存储的处理在不同的机器或集群

安装在计算机上的数据存储即可以加载和其他机器或群集上进行处理。

开发自定义数据存储

为您定制或专有数据完全定制的数据存储。

为DICOM数据开发自定义数据存储

这个例子说明了如何开发自定义的数据存储,支持写入操作。万博1manbetx

自定义数据存储的测试指南

实现您的自定义数据存储后,按照该测试程序符合您的自定义数据存储。