Hbase 세미나 후기

1년전 논문으로 맛만 보았던 google의 Bigtable을 다시 오늘 맛보았다.그 구현체는 Hbase라는 놈을 통해서 였는데, NHN에 다니시는 김형준님이 아주 맛깔나게 세미나를 해주셨다. 사실 개인적으로는 Hadoop기반으로 Hbase가 돌아간다고 했는데 솔직히 두개가 어떻게 맞붙어서 돌아갈까 하는 의문을 가지고 참석을 했다. 그러다가 이날 1시간이 넘는 세미나를 하고 나서 정확히 어떻게 돌아가는지 알게 되었다. 역시나 Hadoop는 분산 프로세싱에만 관여를 하는것이였고, […]

계속 읽기

BigTable의 Tablet Serving과 Compaction 그리고 Lucene의 Incremental Indexing

김형준님의 강의를 바탕으로 논문을 보고 있는데, 강의 들으면서 낯설지 않은 부분이 Tablet Serving과 Compaction 부분이였다. 한번 정리해 본다. 논문에 나온 그림 새로운 데이터가 들어올때. BigTable의 DB 무결성을 유지하기 위해서 메모리기반의 버퍼를 유지하고 또한 그 버퍼의 Copy를 이용해서 계속 서비스를 유지하게 하면서 minor compaction을 수행한다. 물론 minor compaction이 완료가 되면 메모리를 지운다. 그 강의에는 나오지 않았지만, […]

계속 읽기

Google BigTable에 대한 번개 세미나

오늘 typos님이 주최하신(?) 비공식 BigTable 모임에 참가를 했었다. 이 모임에 맨주먹 불끈쥐고 참가할 수 없어서 잠깐 BigTable논문을 어제 학교 다녀오면서 쬐금 봤었는데 수박 겉핧기로 알고 자리에 참석을 했다. (시간이 없다는 핑계~~~ ㅡㅡ;) XXW0t8lzhe.pdf 한 두어시간 정도 B.T.B 맥주집에서 typos님과 나와, 이름을 밝힐 수 없는 어느분과 http://jaso.co.kr의 운영자이신 김형준님과 함께 자리를 함께 했다. 주로 검색쪽보다는 대용량 […]

계속 읽기