개인 재정 Apache Oozie를 Hadoop에 설치하는 방법 - 더미

Apache Oozie를 Hadoop에 설치하는 방법 - 더미

비디오: How to install Cloudera QuickStart VM on VMware 2024

비디오: How to install Cloudera QuickStart VM on VMware 2024
Anonim

Apache Oozie는 Apache Bigtop을 포함한 모든 주요 Hadoop 배포판에 포함되어 있습니다. Hadoop 클러스터에서 에지 노드에 Oozie 서버를 설치하십시오. 여기서는 그림과 같이 클러스터의 데이터에 대해 다른 클라이언트 응용 프로그램을 실행합니다.

에지 노드 는 Hadoop 클러스터에 대한 외부 네트워크의 게이트웨이로 설계되었습니다. 따라서 데이터 전송 기술 (예: Flume), 클라이언트 애플리케이션 및 Oozie와 같은 기타 애플리케이션 인프라 스트럭처에 이상적입니다. Oozie는 전용 서버가 필요하지 않으며 Pig 및 Hive와 같은 에지 노드에 이상적으로 적합한 다른 서비스와 쉽게 공존 할 수 있습니다.

Oozie를 배포 한 후에 Oozie 서버를 시작할 준비가되었습니다. Oozie의 인프라는 $ OOZIE_HOME 디렉토리에 설치됩니다. 그곳에서부터 시작하십시오. sh 명령을 사용하여 서버를 시작하십시오. 예상대로 서버를 중지하려면 oozie-stop.sh를 입력해야합니다.

oozie admin -status

명령을 실행하여 Oozie 인스턴스의 상태를 테스트 할 수 있습니다. Oozie 서버를 배포 및 시작한 후, 다양한 작업 흐름, 코디네이터 또는 번들 작업을 카탈로그 화하고 실행할 수 있습니다. Oozie는 작업을 수행 할 때 모든 Oozie 개체 (워크 플로, 코디네이터 및 번들 작업)를 설명하는 데이터와 해당 상태를 전용 데이터베이스에 저장합니다.

Java API:

이 옵션은 Java 응용 프로그램에서 자신의 일정 코드가있는 상황에서 유용하며, Java 응용 프로그램의 실행을 제어해야하는 경우에 유용합니다. 애플리케이션 내의 워크 플로우, 코디네이터 또는 번들이 필요합니다.

  • REST API:

    이 옵션은 Oozie 워크 플로, 코디네이터 또는 번들의 기초로 자신의 일정 코드를 사용하려는 경우, 또는 Oozie 서버를 관리하기 위해 고유 한 인터페이스를 구축하거나 기존 인터페이스를 확장하려고합니다.
  • 커맨드 라인 인터페이스 (CLI): Oozie의 전통적인 리눅스 커맨드 라인 인터페이스입니다.

  • Oozie 웹 콘솔:

  • 여기서는 많은 상호 작용을 할 수 없지만 Oozie 웹 콘솔은 Oozie 서버의 상태를 (읽기 전용) 볼 수 있습니다. Oozie 작업 모니터링에 유용합니다. Hado, Hadoop 관리 인터페이스는 Oozie와 작업하기위한 또 다른 도구를 제공합니다.Oozie 워크 플로, 코디네이터 및 번들은 XML을 사용하여 모두 정의되며 복잡한 상황의 경우 편집이 지루할 수 있습니다. Hue는 워크 플로 및 기타 Oozie 개체를 그래픽으로 작성하는 GUI 디자이너 도구를 제공합니다. 커버 아래에는 Oozie의 임베디드 Tomcat 웹 서버가 포함되어 있습니다.이 서버는 입력 및 출력을 처리합니다.

Apache Oozie를 Hadoop에 설치하는 방법 - 더미

편집자의 선택

행사에서 연설을 신청하는 방법 - 인형

행사에서 연설을 신청하는 방법 - 인형

강연을 제안 할 수 있어야합니다 다른 잠재적 인 연사보다 이벤트 참석자에게 더 많은 가치를 제공 할 수 있음을 입증하십시오. 연설 인재 풀은 가능한 연설 기회 수보다 빠르게 증가하고 있습니다. 당신은 이벤트 기획자에게 당신이 원하는 바를 물어볼 수있었습니다. ...

새로운 온라인 커뮤니티 회원 유치 방법 - 온라인 커뮤니티의 인형

새로운 온라인 커뮤니티 회원 유치 방법 - 온라인 커뮤니티의 인형

회원은 일시적입니다. 많은 사람들은 그들이 특정한 목표를 성취 할 때까지 주변에 머물러 있습니다. 다른 사람들은 관심을 잃고 새로운 행 아웃을 찾습니다. 따라서 정기적으로 신입 회원을 영입하지 않으면 커뮤니티가 사라집니다. 사람들이 교류 할 수있는 장소를 마련하는 데 어려움을 겪고 있습니다.

엄마 블로거로서 언론의 관심을 끄는 방법 - 인형

엄마 블로거로서 언론의 관심을 끄는 방법 - 인형

수십만 (또는 수백만)의 사람들이 엄청난 성과를 거두고 있습니다. 예상대로, 쉽게 성취되지는 않습니다. 뉴욕 타임스에 언급되거나 투데이 쇼에 출연하기 위해서는 많은 시간과 노력과 신뢰가 필요합니다. 아마도 ...

편집자의 선택

Ning 사용자 기고에 대한 코멘트 방법 - 인형

Ning 사용자 기고에 대한 코멘트 방법 - 인형

Ning 계정에 로그인하면 다른 Ning 사용자의 블로그 게시물, 회신 한 이벤트, 사진 및 비디오에 대한 의견을 남깁니다. 회원님의 논평 벽에 남긴 댓글, 순수 텍스트, 다른 웹 사이트 링크 및 퍼간 동영상과 같은 요소가 귀하의 댓글에 포함될 수 있습니다 ...

닝 네트워크의 광고 제어 방법 - 덤프

닝 네트워크의 광고 제어 방법 - 덤프

기본적으로 닝 네트워크는 애드 센스 광고는 오른쪽 열에 있습니다. 누군가 광고를 클릭하면 생성 된 모든 수익이 Ning으로 이동합니다. 네트워크에서 광고를 게재하여 수익을 얻고 싶거나 광고를 전혀 원하지 않는 경우 제어 광고 프리미엄 서비스를 구입해야합니다.

Ning에서 그룹을 만드는 방법 - Dingy

Ning에서 그룹을 만드는 방법 - Dingy

Ning에서 새로운 그룹을 시작하는 것은 가장 멋진 방법 중 하나입니다. 네가 닝 네트워크에서 할 수있는 일. 그룹을 만들 수 있도록 네트워크가 설정되어 있다면 다음 단계를 따르십시오.

편집자의 선택

Canon Rebel T3 시리즈 카메라로 원시 이미지 파일 처리하기 - 더미 파일

Canon Rebel T3 시리즈 카메라로 원시 이미지 파일 처리하기 - 더미 파일

Canon Rebel T3 또는 T3i로 촬영 한 이미지를 원시 데이터로 캡처 할 수 있습니다. Canon 소프트웨어를 사용하는 경우 Raw 파일을 즉시 인쇄 할 수는 있지만 인쇄하기 전에 사진 작업실로 가져 가서 온라인으로 공유하거나 사진 소프트웨어에서 편집 할 수 있습니다.

Canon Rebel T3 시리즈 카메라에서 자동 초점 포인트 설정 - 인형

Canon Rebel T3 시리즈 카메라에서 자동 초점 포인트 설정 - 인형

Canon Rebel T3 또는 T3i를 사용하는 스포츠 모드에서는 카메라가 중심 초점 위치에 초점을 둡니다. Creative 자동 및 A-DEP 모드뿐만 아니라 다른 완전 자동 노출 모드 (장면 인텔리전스 자동, 인물, 풍경 등)에서 카메라의 자동 초점 시스템은 9 개의 자동 초점을 모두 찾습니다 ...