Archive/하둡 (2) 썸네일형 리스트형 아파치 스쿱 : 설치 및 수집 1. 개요 - 스쿱은 하둡과 RDBMS 간 데이터 전송을 위해 설계된 도구 - 스쿱을 사용하여 MySQL 또는 Oracle과 같은 RDBMS로부터 HDFS로 데이터를 import하거나, 반대로 RDBMS로 export함 - 스쿱 설치 및 간단한 import 및 export 작업의 수행을 확인하고자 함 - 수집 대상 RDBMS는 mysql을 사용 . mysql server : 5.7.29 버전 사용*1) . sample database : MySQLTUTORIAL 사이트에서 제공하는 MySQL Sample Database인 classicmodels 사용*2) . connector j : mysql-connector-java-5.1.48 2. 스쿱 설치 2.1. 다운로드 - 스쿱 프로젝트 사이트에서 최신 안.. 아파치 하둡 : 단일 노드 설치 1. 개요 - 아파치 하둡의 설치 과정에 대한 이해를 목적으로 함 - 로컬(독립) 모드 및 의사 분산 모드만 기술함 2. 전제 - 가상머신 환경에서 수행 : VirtualBox 6.1 - 운영 체제 : ubuntu 16.04 LST 3. 사전에 설치 필요한 소프트웨어 3.1. java - 권장되는 자바 버전 확인 . https://cwiki.apache.org/confluence/display/HADOOP2/HadoopJavaVersions . https://cwiki.apache.org/confluence/display/HADOOP/Hadoop+Java+Versions - java 설치 (openjdk8 설치함) #apt 패키지 추가 및 업데이트 sudo add-apt-repository ppa:ope.. 이전 1 다음