Optimization? Parallel Image, Movie Clip Processing? Machine Learning? Science? Search Engine하둡 에코 ... 병렬/분산 처리 핵심 기술 창시자:더그 커팅분산파일 시스템 HDFS(hadoop distributed file system)와 분산 처리 시스템 MAP/REDUCE 로 구성. 빅 ... 데이터 수집/ 저장/필터링(처리)하둡 기술 요소 4가지: Name node, Data Node, Job tracker, Tasktracker구조적 특징: HDFS
방식(MPP, Massively ParallelProcessing)으로 대용량 데이터를 처리할 수 있는 방법을 제공한다. 맵리듀스는 LISP 프로그래밍 언어에서 맵(map ... 된 수많은 노드(node)에 대용량 데이터 처리를 수행하는 배치 작업을 수행시키고 관리하는 프레임워크로, 주로 HDFS에 저장된 데이터를 분석한다. 맵리듀스 이전에는 주로 MPI등과 같