대용량 데이터의 사용과 저장을 위한 첫걸음

지금은 정보의 홍수시대라고 말하고 있다.

Web 2.0시대의 슬로건인 AAA(Anyone can say Anything about Any topic). "누구든지 어느 주제에 대해 무엇이든 말할 수 있다."

트위터의 사용이 활발해지면서 개인의 생각을 웹상에 표출하는 것이 더욱더 활발해진 것 같다.

 

이렇게 많은 데이터가 지금 이순간에도 쏟아져 나오고 있을 것이다.

시스코는 ‘글로벌 모바일 데이터 트래픽 예측’을 통해 2010년부터 2015년까지 전세계 데이터트래픽이 매달 6.3EB(exabytes)씩 증가할 것으로 예상했다. 또한 모바일 데이터 트래픽은 연 평균 92%씩 성장할 것으로 예상했다.

국내에서는 향후 4G LTE(Long Term Evolution)의 가입자가 늘어날수록 모바일 데이터 트래픽의 증가에 가속이 붙지 않을까 예상해본다.

이렇게 많은 데이터를 어떻게 저장하고 사용할 것인가에 대해서 이제라도 진지하게 생각해 봐야 할 것 같다. 

지금까지는 데이터의 무결성에 중점을 뒀다면 이제는 데이터의 처리 속도에 중점을 둬야 할 것이다. 
이런 관점에서 본다면 NoSQL(Not Only SQL)을 가장 쉽게(?) 떠올려 볼 수 있다.

물론 SQL과 NoSQL이 공존하며 각각의 역할에 맞게 설계해야 할 것이다.

제일 HOT한 이슈는 몽고디비일것이다. 여기에 최근 구글이 발표한 레벨디비도 조만간 수면위로 떠오를 것이다.

구글의 검색엔진의 뛰어남을 프리미엄으로 가지고 있는 상태에서 아직 NoSQL을 접해보지 않았다면 구글쪽으로 흘러가는 개발자들이 많지 않을까 생각된다.

레벨디비는 오픈소스이고 완전한 독립형 저장기술 보다는 좀더 수준높은 저장시스템에 포함될수 있는 요소기술이라고 설명하고 있는점에서는 개발자의 역량이 많이 필요할 것으로 보인다.

각 디비들의 성능이나 안정성은 아직 경험해보지 못했기에 뭐라 말할 수는 없지만 현재 내가 알고 있는 유일한 대안이기에 점차 앎의 영역을 넓혀보고자 한다.

또한 내가 사용할 데이터 저장 기술들이 점점 많아지고 있기에 어떻게 이들의 장점만을 뽑아서 솔루션을 완성하는가는 개발자로서의 숙제인것 같다.

개발자로서 살아가고 있는 나에게 지금이라도 다시 초창기의 재미를 위한 개발을 하라고 소리치고 싶다.

---

E-Biz 사업본부 / 기획개발팀 이형준팀장 @allje_lhj
Tel. 02-514-9948 Fax. 02-514-9902 E.mail lhj@allje.com