Notice
Recent Posts
Recent Comments
Link
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | |||||
3 | 4 | 5 | 6 | 7 | 8 | 9 |
10 | 11 | 12 | 13 | 14 | 15 | 16 |
17 | 18 | 19 | 20 | 21 | 22 | 23 |
24 | 25 | 26 | 27 | 28 | 29 | 30 |
Tags
- Eclipse
- vaadin
- Kotlin
- plugin
- SQL
- react
- NPM
- es6
- Express
- Spring
- mybatis
- GIT
- SSL
- MSSQL
- Android
- tomcat
- table
- hadoop
- IntelliJ
- 보조정렬
- Java
- mapreduce
- SPC
- Python
- xPlatform
- JavaScript
- Sqoop
- 공정능력
- window
- R
Archives
- Today
- Total
반응형
목록mapreduce (7)
DBILITY
hadoop MapReduce 개발 과정 정리
맵리듀스 단계별로 사용할 파라미터를 키와 값의 형태로 설계한다. 매퍼 클래스(org.apache.hadoop.mapreduce.Mapper)를 상속받아, 사용할 Mapper클래스를 구현한다. 리듀스 클래스(org.apache.hadoop.mapreduce.Reducer)를 상속받아,사용할 Reducer클래스를 구현한다. 맵리듀스 잡을 실행할 드라이버 클래스에 잡객체(org.apache.hadoop.mapreduce.Job)를 생성하고 설정한다. 완성된 맵리듀스 클래스를 하둡에서 실행한다. (./bin/hadoop jar 완성된 맵리듀스.jar 메인클래스 아규먼트) 참고서적 : 시작하세요! 하둡프로그래밍 개정2판(위키북스) 정재화 지음
bigdata/hadoop
2016. 9. 9. 13:31
hadoop MapReduce Data Flow
이해하는데 많은 도움이 된다. http://www.admin-magazine.com/HPC/Articles/MapReduce-and-Hadoop Giant Data: MapReduce and Hadoop » ADMIN Magazine Enterprises like Google and Facebook use the map–reduce approach to process petabyte-range volumes of data. For some analyses, it is an attractive... www.admin-magazine.com
bigdata/hadoop
2016. 9. 7. 20:21
반응형