[HBase] HBase - HDFS 통신 매커니즘
·
카테고리 없음
**본 글은 제미나이로 작성됨** 1. HBase는 HDFS의 '클라이언트'HBase의 RegionServer는 HDFS 입장에서는 수많은 데이터를 읽고 쓰는 HDFS Client 중 하나이다.통신 방식: HBase는 HDFS의 NameNode와 통신하여 데이터의 위치(메타데이터)를 확인하고, 실제 데이터(Block)를 주고받을 때는 DataNode와 직접 통신.파일 형식: HBase는 데이터를 HFile이라는 특수한 포맷으로 변환하여 HDFS 상의 특정 경로(/hbase/data/...)에 저장.2. 주요 통신 발생 시점HBase가 HDFS와 주요 통신하는 시점은 크게 세 가지① WAL(Write Ahead Log) 기록 (실시간 쓰기)내용: 데이터 유실을 막기 위해 메모리(MemStore)에 적재하기..