numpartitions

데이터저장소 파티션 개수

구문

n = numpartitions(ds)

n = numpartitions(ds,pool)

설명

n = numpartitions(ds)는 데이터저장소 ds에 대한 디폴트 파티션 개수를 반환합니다.

n = numpartitions(ds,pool)은 pool로 지정된 병렬 풀에서 데이터저장소 액세스를 병렬화할 파티션 개수를 반환합니다. 데이터저장소 액세스를 병렬화하려면 Parallel Computing Toolbox™가 설치되어 있어야 합니다.

예제

파티션 개수

샘플 파일 mapredout.mat에서 데이터저장소를 만듭니다. 이 파일은 mapreduce 함수의 출력 파일입니다.

ds = datastore('mapredout.mat');

디폴트 파티션 개수를 가져옵니다.

n = numpartitions(ds)

n = 
1

기본적으로 ds에는 하나의 작은 파일만 포함되므로 하나의 파티션만 있습니다.

데이터저장소를 파티셔닝하고 첫 번째 파트에 대응하는 데이터저장소를 반환합니다.

subds = partition(ds,n,1);

subds에서 데이터를 읽습니다.

while hasdata(subds)
    data = read(subds);
end

병렬 데이터저장소 액세스를 위한 파티션 개수

현재 병렬 풀에서 데이터저장소 액세스를 병렬화할 파티션 개수를 가져옵니다. Parallel Computing Toolbox가 설치되어 있어야 합니다.

샘플 파일 mapredout.mat에서 데이터저장소를 만듭니다. 이 파일은 mapreduce 함수의 출력 파일입니다.

ds = datastore('mapredout.mat');

현재 병렬 풀에서 데이터저장소 액세스를 병렬화할 파티션 개수를 가져옵니다.

n = numpartitions(ds, gcp);

데이터저장소를 파티셔닝하고 각 파트에서 데이터를 읽습니다.

parfor ii=1:n
    subds = partition(ds,n,ii);
    while hasdata(subds)
        data = read(subds);
    end
end

입력 인수

ds — 입력 데이터저장소

데이터저장소

입력 데이터저장소입니다. datastore 함수를 사용하여 데이터에서 datastore 객체를 만들 수 있습니다.

pool — 병렬 풀

병렬 풀 객체

병렬 풀 객체입니다.

예: gcp

확장 기능

스레드 기반 환경

MATLAB®의 backgroundPool을 사용해 백그라운드에서 코드를 실행하거나 Parallel Computing Toolbox™의 ThreadPool을 사용해 코드 실행 속도를 높일 수 있습니다.

사용법 관련 참고 및 제한 사항:

• 스레드 기반 환경에서는 다음과 같은 데이터저장소에만 numpartitions 함수를 사용할 수 있습니다.

  • ImageDatastore 객체

  • ImageDatastore 객체로부터 combine 또는 transform을 사용하여 생성한 CombinedDatastore, SequentialDatastore 또는 TransformedDatastore 객체

  Parallel Computing Toolbox가 있는 경우 numpartitions 함수를 다른 데이터저장소에도 사용할 수 있습니다. 이렇게 하려면 backgroundPool 또는 ThreadPool을 사용하는 대신 프로세스를 지원하는 병렬 풀을 사용하는 함수를 실행하십시오(ProcessPool 또는 ClusterPool 사용).

자세한 내용은 스레드 기반 환경에서 MATLAB 함수 실행하기 항목을 참조하십시오.

버전 내역

R2015a에 개발됨

참고 항목

datastore | partition

도움말 항목

• Partition a Datastore in Parallel (Parallel Computing Toolbox)