구글이 20 petabyte의 데이터를 얼마만에 처리할까?

구글이 MapReduce를 어떻게 사용하는지 상당히 구체적으로 제시한 재미있는 글이다. 20,000 테라바이트의 웹데이터를 하루하루 처리한다는데 엄청나구나. 그것을 처리하기 위해 100,000 개의 MapReduce jobs를 이용한다고 하고 말이다. 이 논문에도 나와 있는데 ACM에 접근해서 받아보기 힘들어서 첨부한다. XEuFb8k3ap.pdf 2004년도 이전 논문에 비하면 비슷하지만 내용상의 최신 내용이 조금 있는거 같다. 위의 내용도  약간 초록에 나와 있다. Yahoo의 Hadoop 클러스터 […]

계속 읽기

Java를 첫 언어로 선택한 죄악?

어릴적에 Basic, C 언어 공부를 했지만 실무를 시작하면서 Java를 처음 쓰기 시작했었다. 이전의 언어와는 다르게 Java는 프로그래밍의 편리성을 가져다 주었고 이미 고전적으로 고민해야 했던 많은 구현단의 이슈들을 강력한 라이브러리로 해결해 주었다. 게다가 이런것을 속성과정으로 가르치는 학원도 나왔고 나 역시 그런 학원 중 한곳에서 열심히 Java를 배웠었다. Java 이후에 Delphi, C, Python , C++ 을 거치면서 […]

계속 읽기

인사이트 출판사 방문

몇일전 인사이트 출판사 사장님께 집필 및 번역에 대해 이야기 해보자는 메일을 받고 오늘 바로 인사이트 출판사를 찾았다. 물론 내가 번역을 제안하는 책은 딱 두권이였으나 사장님은 번역보다는 집필을 유도하시는 듯 했다. 집필은 아직 살짝 부담이 되는 부분이 없지 않아 있어서 망설였지만 나름 집필을 통해서 내가 더 많이 배울 수도 있겠구나 하는 생각이 들어서 긍정적인 생각으로 방향을 […]

계속 읽기

꿈이 있는 아내는 늙지 않는다.

꿈이 있는 아내는 늙지 않는다. 약 한달전에 여자친구에게 선물해 준 책의 제목이다. 요즘 여자들의 인생을 일깨우는 책들이 서점에 상당히 많이 나오고 있는것을 알 수 있는데, 여성들이 사회생활을 하면서 인생을 능동적으로 영위하고자 하는 그런 욕구의 결과가 이런 책이 베스트셀러에 오르는 큰 역할을 하지 않았을까 생각한다. 정말 베스트셀러 목록을 보면 많은 사람들의 요즘 관심사를 엿볼 수 있는 […]

계속 읽기

휴가…

마이너스를 면하지 못하는 휴가를 올해는 좀 아껴 쓸라고 했는데…. 오늘 어쩔수 없이 휴가를 썼다. 그것도 예상치 못한 것 때문에 말이다.이런건 아무리 다이어리에 계획을 세우고 난리를 쳐도 이렇게 될 수 밖에 없는 상황이더라. 논문 제본을 했던것에서 교수님께 도장 받은 페이지가 원본이여야 한다고 해서 그 사본 페이지를 원본 페이지로 뜯어 고치려고 아침에만 학교를 두번이나 왔다 갔다 했다. […]

계속 읽기

2007년 결산 및 2008년 새해 계획

항상 이맘때면 새해 계획을 세우고 한해를 정리하곤 했다. 이번에도 한번 올해를 뒤돌아 보고 정리를 해보자. 2007년에 목표로 했던 것들을 되돌아 보면.. 1. Lisp 배우기Lisp을 배울 기회하고 동기가 부여되지 않아서 배우지 못했다.대신 enlang과 D Language를 배웠다.D Language를 사용해서 논문 실험 프로그램을 작성했었다. 또한 이 언어 덕분에 C++에 대한 새로운 관점이 생기는 좋은 계기가 되었다. 2. 철학공부 […]

계속 읽기

시간관리에 대한 책

내년의 개인적인 화두는 시간활용이다. 이 시간 활용을 어떻게 하느냐에 따라 내년의 성패가 결정되리라 생각한다. 따라서 그 방법을 알기위해 여러 책을 뒤적여 봤다. 브라이언 트레이시의 “Time Power“라는 책하고, 프랭클린 플래너를 잘 쓰기 위해 본 “프랭클린 플래너를 쓰는 사람의 시간은 다르다“라는 책이다. “프랭클린 플래너…. ” 이 책은 토요일날 하루 확~ 잡아서 읽어버리고 정리까지 했다.회사에서 플래너를 받고 그 […]

계속 읽기

논문 출판하다.

논문 완제본을 끝냈다.사실 학교 일반 대학원에 다니는 친구의 관심이 아니였으면 휴가라도 내어서 했어야 하는 일이였는데 친구가 정말 많이 신경 써줬다. 오늘 논문 제본된 놈들이 도착했는데, 사실 파일로 봤을땐 별루 였지만 이렇게 실제 받아보니 제법 그럴싸 하다. ㅋ 내부 목차를 공개하자면 아래와 같다. 이전에 학술 대회에 냈던 논문하고의 내용상 차이점은 약간 실험 결과가 다르게 나왔다는 것과 […]

계속 읽기

Google의 MapReduce 와 Hadoop

오늘 businessweek지에서 상당히 흥미로운 기사를 봐서 포스팅 해본다. The Two Flavors of Google 이라는 글인데, 요즘(?) MapReduce기술을 기반으로 각광 받고 있는 cloud computing 분야에서 두가지 기술적인 조류를 이루고 있는 Google의 mapreduce와 Hadoop에 대해서 이야기 하고 있다. 이 글을 보고 Hadoop이 구글의 기술을 99% 배껴서 만들어 졌다는 편견을 말끔히 해소할 수 있었다. 구글에서 Hadoop에 컨트리뷰트 하고 […]

계속 읽기

야후 무료백신이 나왔군요..- 사용기 –

무료백신이라면 갠적으로 고려대학교와 라이센스 계약이 맺어진 안철수 연구소의 유료 백신을 써왔다. 불편함은 없었으며 심하게 많은 파일을 P2P에서 다운로드 받아서 프로그램을 실행하지 않는 일반적인 개인 유저입장에서 봤을때 크게 불편없는 백신이라 생각한다. 그 뒤로 알약이 배포되어 알약을 주로 쓰고 있었으며, 이것도 또한 무료 실시간 감시 기능이 있는 백신 치고는 참 괜찮은 백신이라 생각했고 또한 실제 크게 불편함이 […]

계속 읽기