이 페이지의 최신 내용은 아직 번역되지 않았습니다. 최신 내용은 영문으로 볼 수 있습니다.

MapReduce

메모리에 맞지 않는 데이터 세트를 분석하기 위한 프로그래밍 기법

mapreduce는 컴퓨터 메모리를 초과하는 대규모 데이터 세트를 분석하는 데 적합한 프로그래밍 기법입니다. datastore를 사용하여 데이터를 작은 청크 단위로 처리하는 이 기법은 데이터 형식을 지정하거나 예비 계산을 수행하는 Map 단계와 Map 단계에서 얻은 결과의 총합을 구하는 Reduce 단계로 구성됩니다. 자세한 내용은 MapReduce 시작하기 항목을 참조하십시오.

다른 제품에서 mapreduce를 사용하는 방법에 대한 자세한 내용은 Speed Up and Deploy MapReduce Using Other Products 항목을 참조하십시오.

함수

모두 확장

mapreduce메모리에 맞지 않는 데이터 세트를 분석하기 위한 프로그래밍 기법
datastore대규모의 데이터 모음을 저장할 데이터저장소 만들기
addKeyValueStore에 단일 키-값 쌍 추가
addmultiKeyValueStore에 여러 개의 키-값 쌍 추가
hasnextValueIterator에 하나 이상의 사용 가능한 값이 있는지 확인
getnextValueIterator에서 다음 값 가져오기
mapreducermapreduce 또는 tall형 배열의 실행 환경 정의
gcmr현재 mapreducer 구성 가져오기

객체

KeyValueStoremapreduce에서 사용할 키-값 쌍 저장
ValueIteratorAn iterator over intermediate values for use with mapreduce

도움말 항목

MapReduce 시작하기

MapReduce 프로그래밍 기법에 대해 알아보고 예제 계산을 실행합니다.

Write a Map Function

Create a map function for use in a mapreduce algorithm.

Write a Reduce Function

Create a reduce function for use in a mapreduce algorithm.

Build Effective Algorithms with MapReduce

Summary of mapreduce example files.

Speed Up and Deploy MapReduce Using Other Products

Capabilities of other products to speed up and share mapreduce algorithms.

Find Maximum Value with MapReduce

This example shows how to find the maximum value of a single variable in a data set using mapreduce.

Compute Mean Value with MapReduce

This example shows how to compute the mean of a single variable in a data set using mapreduce.

Create Histograms Using MapReduce

This example shows how to visualize patterns in a large data set without having to load all of the observations into memory simultaneously.

Compute Mean by Group Using MapReduce

This example shows how to compute the mean by group in a data set using mapreduce.

Simple Data Subsetting Using MapReduce

This example shows how to extract a subset of a large data set.

Using MapReduce to Compute Covariance and Related Quantities

This example shows how to compute the mean and covariance for several variables in a large data set using mapreduce.

Compute Summary Statistics by Group Using MapReduce

This example shows how to compute summary statistics organized by group using mapreduce.

Using MapReduce to Fit a Logistic Regression Model

This example shows how to use mapreduce to carry out simple logistic regression using a single predictor.

Tall Skinny QR (TSQR) Matrix Factorization Using MapReduce

This example shows how to compute a tall skinny QR (TSQR) factorization using mapreduce.

Compute Maximum Average HSV of Images with MapReduce

This example shows how to use ImageDatastore and mapreduce to find images with maximum hue, saturation and brightness values in an image collection.

문제 해결

Debug MapReduce Algorithms

This example shows how to debug your mapreduce algorithms in MATLAB® using a simple example file, MaxMapReduceExample.m. Debugging enables you to follow the movement of data between the different phases of mapreduce execution and inspect the state of all intermediate variables.

추천 예제