Notice
Recent Posts
Recent Comments
Link
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | |||||
3 | 4 | 5 | 6 | 7 | 8 | 9 |
10 | 11 | 12 | 13 | 14 | 15 | 16 |
17 | 18 | 19 | 20 | 21 | 22 | 23 |
24 | 25 | 26 | 27 | 28 | 29 | 30 |
Tags
- Sort
- RNN
- recursion
- 딥러닝
- collections
- 텐서플로
- HelloWorld
- scrapy
- LSTM
- 파이썬
- tensorflow
- C
- 그래프이론
- 주식분석
- 코딩더매트릭스
- graph
- C언어
- 알고리즘
- yarn
- effective python
- Java
- 하이브
- codingthematrix
- python
- hadoop2
- hive
- 선형대수
- NumPy
- GRU
- 하둡2
Archives
- Today
- Total
목록빅데이터 (1)
EXCELSIOR
MapReduce 개념
1. 맵리듀스 개념맵리듀스 프로그래밍은 맵(Map)과 리듀스(Reduce)라는 두 가지 단계로 데이터를 처리한다.맵(Map)은 입력 파일을 한 줄씩 읽어서 데이터를 변형(transformation)하며, 리듀스(Reduce)는 맵의 결과 데이터를 집계(aggregation)한다. [출처: http://www.slideshare.net/kwnam4u/hadoop-38481079] 2. 맵리듀스 아키텍처 1) 시스템 구성- 맵리듀스 시스템은 클라이언트, 잡트래커, 태스크트래커로 구성된다. [출처: http://zetawiki.com/] - 클라이언트 : 클라이언트는 사용자가 실행한 맵리듀스 프로그램과 하둡에서 제공하는 맵리듀스 API를 의미 - 잡트래커 : 클라이언트가 하둡으로 실행을 요청하는 맵리듀스 프로..
DataBase/Hadoop
2016. 10. 13. 23:53