이 페이지의 최신 내용은 아직 번역되지 않았습니다. 최신 내용은 영문으로 볼 수 있습니다.

데이터저장소

대규모의 데이터 읽기

datastore 함수는 데이터저장소를 만듭니다. 데이터저장소는 너무 커서 메모리에 맞지 않는 데이터 모음을 위한 리포지토리입니다. 데이터저장소를 사용하면 디스크상의 여러 파일이나 원격 위치 또는 데이터베이스에 저장되어 있는 데이터를 단일 엔터티로 읽고 처리할 수 있습니다. 데이터가 너무 커서 메모리를 초과하는 경우에는 데이터의 점진적 가져오기 작업을 관리하거나, tall형 배열을 만들어 데이터로 작업하거나, 추가 처리를 위해 데이터저장소를 mapreduce에 대한 입력값으로 사용할 수 있습니다. 자세한 내용은 데이터저장소 시작하기 항목을 참조하십시오.

함수

모두 확장

datastore대규모의 데이터 모음을 저장할 데이터저장소 만들기
tabularTextDatastore테이블 형식 텍스트 파일의 데이터저장소
spreadsheetDatastore스프레드시트 파일용 데이터저장소
imageDatastore이미지 데이터의 데이터저장소
parquetDatastoreDatastore for collection of Parquet files
fileDatastore사용자 지정 파일 읽기 프로그램을 포함한 데이터저장소
read데이터저장소의 데이터 읽어 들이기
readall데이터저장소의 모든 데이터 읽기
preview데이터저장소에 있는 데이터의 서브셋
partition데이터저장소 파티셔닝
numpartitions데이터저장소 파티션 개수
hasdata데이터를 읽을 수 있는지 확인
reset데이터저장소를 초기 상태로 재설정

함수

combineCombine data from multiple datastores
transformTransform datastore

객체

CombinedDatastoreDatastore to combine data read from multiple underlying datastores
TransformedDatastoreDatastore to transform underlying datastore
KeyValueDatastoremapreduce에 사용할 키-값 쌍 데이터의 데이터저장소
TallDatastoretall 배열의 검사 지점 생성을 위한 데이터저장소

클래스

모두 확장

matlab.io.Datastore 기본 데이터저장소 클래스
matlab.io.datastore.Partitionable데이터저장소에 병렬 처리 지원 추가
matlab.io.datastore.HadoopLocationBased Add Hadoop support to datastore
matlab.io.datastore.ShuffleableAdd shuffling support to datastore
matlab.io.datastore.DsFileSet 데이터저장소의 파일 모음을 위한 File-set 객체
matlab.io.datastore.DsFileReader 데이터저장소에 있는 파일에 대한 File-reader 객체

도움말 항목

데이터저장소 시작하기

데이터저장소는 하나의 파일, 또는 여러 파일이나 데이터의 모음을 읽기 위한 객체입니다.

Select Datastore for File Format or Application

Choose the right datastore based on the file format of your data or application.

테이블 형식의 대용량 텍스트 파일 읽어오기 및 분석하기

이 예제에서는 테이블 형식의 데이터가 포함된 대용량 텍스트 파일을 위한 데이터저장소를 생성한 다음, 한 번에 데이터 청크 하나씩 또는 파일 하나씩을 읽어오고 처리하는 방법을 보여줍니다.

Read and Analyze Image Files

This example shows how to create a datastore for a collection of images, read the image files, and find the images with the maximum average hue, saturation, and brightness (HSV).

Read and Analyze MAT-File with Key-Value Data

This example shows how to create a datastore for key-value pair data in a MAT-file that is the output of mapreduce.

Read and Analyze Hadoop Sequence File

This example shows how to create a datastore for a Sequence file containing key-value data.

원격 데이터로 작업하기

Amazon S3™, Microsoft® Azure® Storage Blob 또는 HDFS™의 원격 데이터로 작업합니다.

Set Up Datastore for Processing on Different Machines or Clusters

Setup a datastore on your machine that can be loaded and processed on another machine or cluster.

Develop Custom Datastore

Create a fully customized datastore for your custom or proprietary data.

Testing Guidelines for Custom Datastores

After implementing your custom datastore, follow this test procedure to qualify your custom datastore.