타조 마스터 고 가용성¶

용어¶

• 액티브 마스터: 타조 클라이언트와 타조 워커로 부터의 모든 요청을 처리하는 활성화된 타조 마스터입니다.
• 백업 마스터: 액티브 마스터가 죽거나 동작할 수없는 상태가 되면 활성화되는 타조 마스터입니다. 사용자는 여러 백업 마스터를 설정할수 있고, 이 서버들은 액티브 마스터의 상태를 모니터링하고 있다가 필요시 활성화됩니다.

설정 파일 구성¶

타조 마스터 고 가용성 모드를 사용하려면, 다음과 같이 tajo.master.ha.enable 속성 값을 설정합니다:

<property>
  <name>tajo.master.ha.enable</name>
  <value>true</value>
</property>

고 가용성 모드를 사용하면, 모든 백업 마스터들은 5초마다 액티브 마스터의 상태를 모니터링합니다. 이 주기를 변경하려면, tajo.master.ha.monitor.interval 속성 값을 적절히 설정합니다:

<property>
  <name>tajo.master.ha.monitor.interval</name>
  <value>monitor interval</value>
</property>

백업 마스터 설정 구성¶

start-tajo.sh 로 마스터를 실행하는 경우, conf/masters 에 마스터 목록을 명시합니다. 이 파일에 모든 마스터들의 호스트 명을 한 줄에 하나씩 저장해서 목록을 만듭니다. 최초에는, localhost 하나만 등록되어 있습니다. 즐겨 사용하는 텍스트 편집기를 사용해서 쉽게 호스트 명들을 추가할 수 있습니다.

예:

$ cat > conf/masters
host1.domain.com
host2.domain.com
....

<ctrl + d>

다음 단계는, 백업 마스터 서버들에 tarball을 이용해서 타조를 설치하고, 설정 파일을 구성합니다. .

<property>
  <name>tajo.master.umbilical-rpc.address</name>
  <value>localhost:36001</value>
  <description>The default port is 26001.</description>
</property>

<property>
  <name>tajo.master.client-rpc.address</name>
  <value>localhost:36002</value>
  <description>The default port is 26002.</description>
</property>

<property>
  <name>tajo.resource-tracker.rpc.address</name>
  <value>localhost:36003</value>
  <description>The default port is 26003.</description>
  </property>

<property>
  <name>tajo.catalog.client-rpc.address</name>
  <value>localhost:36005</value>
  <description>The default port is 26005.</description>
</property>

<property>
  <name>tajo.master.info-http.address</name>
  <value>0.0.0.0:36080</value>
  <description>The default port is 26080.</description>
</property>

타조 클러스터 실행¶

그런 다음, start-tajo.sh 를 실행합니다:

$ $TAJO_HOME/bin/start-tajo.sh

고 가용성(HA) 상태 관리¶

강제로 백업 마스터를 액티브 마스터로 활성화시키려면, tajo hadmin -transitionToActive 명령을 실행합니다

$ $TAJO_HOME/bin/tajo haadmin -transitionToActive <target tajo.master.umbilical-rpc.address>

강제로 액티브 마스터를 백업 마스터로 바꾸려면, tajo hadmin -transitionToBackup 명령을 실행합니다

$ $TAJO_HOME/bin/tajo haadmin -transitionToBackup <target tajo.master.umbilical-rpc.address>

마스터 상태 정보는, tajo hadmin -getState 명령을 실행합니다

$ $TAJO_HOME/bin/tajo haadmin -getState <target tajo.master.umbilical-rpc.address>

고 가용성 관련 정보를 초기화하려면, tajo haadmin -formatHA 명령을 실행합니다

$ $TAJO_HOME/bin/tajo haadmin -formatHA

자동 failover 점검 방법¶

타조 마스터의 자동 failover 동작을 확인하려면, 먼저, 타조 클러스터를 배포할 때, 타조 마스터 고 가용성 모드를 활성화시킵니다. 그리고, 타조 웹 UI를 통해, 어느 노드가 액티브 마스터인지 확인합니다.

액티브 마스터 노드를 찾았다면, 이제 해당 노드에 장애 상황을 발생시킵니다. 예를 들면, JVM 동작 중단 상황을 강제로 만들기 위해 kill -9 <pid of TajoMaster> 명령을 실행합니다. 또는 서버 장비를 끄거나 네트워크 연결을 끊습니다. 그런 후, 백업 마스터가 5초 안에 액티브 상태로 활성화되는지 확인하면 됩니다. 장애 감지와 failover 작동관련 시간 주기는 tajo.master.ha.monitor.interval 변수의 설정 값을 따릅니다. 실행 중인 질의가 있었다면, 타조 클라이언트는 타조 워커로 부터 직접 결과를 얻기 때문에 마스터 상태와 상관없이 성공적으로 완료될 것입니다. 그러나, 원래 마스터의 메모리에 가지고 있었던 과거 질의 내역은 다른 마스터에서는 접근할 수 없기 때문에 잃게 됩니다. 이제 실행 중인 질의가 없다면, 자동 failover는 성공적으로 동작할 것입니다.