데이터 엔지니어/hadoop
hadoop 구축 2. 하둡 구성 현황
콜리킴
2023. 12. 17. 22:43
- 가상화 머신을 이용하여 총 4대의 노드 생성
hadoop1(nn01). 액티브 네임노드(ha구성을 위한 액티브), 저널노드
hadoop2(rm01). 스탠바이 네임노드(ha구성을 위한 스탠바이), 리소스 매니저, 저널노드, 데이터노드
hadoop3.(jn01) 저널노드, 데이터 노드
hadoop4(dn01). 데이터 노드
/etc/hosts 에서 ip hostname으로 구성하여 hostname으로 하둡을 운영하였습니다.
-> 제한된 컴퓨터 자원으로 인하여 총 4대의 노드로 구성하였으며,
다른분들이 하둡 구축한 게시글들을 따라서 구성하였기에 ssh 설정, 각각의 설정파일들에 대한 작성하지 않고
구축 순서 제가 겪었던 오류와 해결과정 등에 대해서 작성하도록 하겠습니다.