반응형

목록분류 전체보기 (673)

DBILITY

테이블스페이스 백업 및 특정 테이블만 다른 스키마에 복구

특정 tablespace만 export exp 사용자/비밀번호@SID file=파일이름.dmp tablespaces=테이블스페이스명 exp system/비밀번호@oraone file=users.dmp tablespaces=USERS​ 특정 table만 다른 스키마에 import imp 사용자/비밀번호@SID file=파일이름.dmp fromuser=테이블소유자(스키마) touser=대상소유자(스키마) tables=(테이블1,테이블2,테이블N) imp system/비밀번호@oraone file=users.dmp fromuser=scott touser=ktgs tables=(emp,dept,salgrade)​ INSERT INTO 복구대상유저.복구대상테이블 SELECT * FROM 백업유저.백업테이블 WHE..
database/oracle 2016. 12. 2. 11:36
입력한 공항을 도착지로 년도별 최대 지연 도착 항공편 구하기

ASA운항 기록 데이터(약 12G)를 통해 궁금하기도 하고, 연습 삼아 해 보았습니다. Mapper에서 Filtering을 통해 추출하고, Combiner를 통해 Shuffle IO를 줄이도록 하였으며, Paritioner는 2개로 고정하여 2000년 이전과 이후로 분리하여 Reducer로 보내게 하였음. Reducing완료 후 FileUtil.copyMerge를 통해 파일을 합쳤습니다. 별도 정렬,조인 등은 적용되어 있지 않습니다.
bigdata/hadoop 2016. 11. 30. 13:01
hadoop job list, kill

version = 2.3 [hadoop@big-master ..
bigdata/hadoop 2016. 11. 30. 09:55
성별,연령대별 최고연봉 구하기

3개의 Partition으로 나눠 output이 3개 생성되므로, FileUtil.copyMerge를 사용해 결과를 합쳐 보았다. 물론,이게 정상적인 방법인지는 공부를 더 해봐야 확인이 가능하겠다. package com.dbility.hadoop.partitioner; import java.io.IOException; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.conf.Configured; import org.apache.hadoop.fs.FileSystem; import org.apache.hadoop.fs.FileUtil; import org.apache.hadoop.fs.Path; import org.apache.ha..
bigdata/hadoop 2016. 11. 29. 15:47
tutorialpoint-mapreduce

Combiner와 Partitioner 이해에 도움이 됩니다.https://www.tutorialspoint.com/map_reduce/index.htm
reference 2016. 11. 28. 22:28
Prev 1 ··· 113 114 115 116 117 118 119 ··· 135 Next
반응형