'열풍' 빅데이터의 뜬 구름을 걷어내라

한국 빅데이터가 새로운 전기를 맞고 있다. 말 그대로 열풍이다. 기업이고 공공기관이고, 너나할 것 없이 빅데이터를 외쳐댄다. 더미 속에 묻혔던 데이터에서 미래의 경쟁력을 찾아내기 위해 혈안이다.

국내외 시장조사전문업체들은 올해 10대 IT 이슈 중 ‘빅데이터의 도입과 활용’을 1순위로 꼽았다. 지난해까지 검토단계였던 빅데이터가 올해부터 본격적인 활용단계로 이어질 것이란 전망도 나왔다.

현실은 녹록지 않다. 각 기업은 빅데이터에 대한 정보와 이해 부족으로 사업에 적용하긴 커녕 시도조차 주저한다. 이에 빅데이터가 과거의 CRM과 다를 게 없다는 반론도 흘러나온다. 전과 다를 게 없다고 단순한 ‘버즈워드’로 폄훼하는 목소리도 만만치 않다. 빅데이터에 대한 가장 큰 오해다.

■빅데이터가 혼란스러운 이유

데이터는 과거에도 오늘도 있었다. 사람이 컴퓨터란 것을 만든 태초부터 데이터는 쌓였다. 그동안 해왔듯 표본 속에서 찾아내는 가치와, 전수조사에서 찾아내는 가치가 같을 수 없다. 빅데이터는 표본조사와 전수조사의 작업시간과 비용이 엇비슷해지며 가능해졌다.

빅데이터를 처음 활용하겠다고 생각했던 사람은 익히 알려진 IT솔루션업체가 아니었다. 구글, 야후, 아마존 같은 인터넷 서비스업체들이 빅데이터를 한발 앞서 다루기 시작했다. 이들은 IT를 생명줄로 삼아온 서비스업체들이다.

인터넷 서비스 회사들은 빅데이터란 말이 유행하기 이전부터 데이터에 새롭게 접근하는 과정에서, 직접 기술을 개발하고 방법론을 만들었다. 절실한 생존 욕구를 해결해줄 방책을 마련하기 위해 스스로의 경쟁력을 만들어내 성공한 회사들이다.

빅데이터는 선도적인 서비스업체들의 데이터에 대한 새로운 시각과 도전정신이 수많은 시행착오와 축적된 경험과 결합돼 빛을 발했다.

특정 기술을 빅데이터로 축소시키는 건 불가능하다, 빅데이터는 데이터에 대한 새로운 패러다임이다. 데이터의 양(Volume), 데이터 생성 속도(Velocity), 형태의 다양성(Variety), 가치(Value) 등을 가리키는 4V는 중요치 않다. 아주 작은 데이터라도 새로운 시각으로 접근한다면, 그게 빅데이터다.

새로운 걸 찾아내려면 지속적으로 시도할 수 있는 끈기와 환경이 필요하다. 또, 다양한 방법을 동원할 수 있는 개방적인 플랫폼이 있어야 한다. 투자대비수익(ROI) 측면과 개방성 때문에 빅데이터의 표준처럼 자리잡은 게 ’하둡‘이다.

일반적인 IT 프로젝트는 특정 목적을 향해 추진된다. 사업명에 나오듯 XXX시스템 구축 등의 형식이다. 이 목표는 프로젝트가 완료되면 그 자체가 성과다. 반면, 빅데이터는 시스템 구축이 끝이 아니다. 시스템 마련은 단지 진정한 프로젝트를 시도하기 위한 준비과정에 불과하다.

■고객도 몰랐던 것을 미리 발견하려면

새로운 접근법, 패러다임의 전환은 많은 변화를 요구한다. 이미 굳어버린 습관과 선입견, 고정된 조직체계, 경직된 문화, 그리고 폐쇄적인 기술은 빅데이터 활용을 가로막는 주범이다. 그리고 빅데이터에 혼란을 느끼게 되는 이유기도 하다.

빅데이터는 데이터를 소유한 사람의 자세가 변해야만 비로소 가능성을 보여준다. 태도를 바꾸고 여러 실패를 발판삼아 돌파하면 ‘고객도 모르는 미래의 행동’을 제법 정확하게 예측해낼 수 있게 해준다.

과거 스티브 잡스는 “고객은 자기가 원하는 것을 알지 못한다”고 말했다. 고객을 깜짝 놀라게 할 서비스나 필요로 할 상품을 기업이 먼저 찾아야 한다는 지적이었다.

이에 지디넷코리아는 다음달 17일 서울 잠실롯데호텔에서 'Big Data: Value & Hidden Insight’란 주제로 '제9회 어드밴스드컴퓨팅컨퍼런스(ACC)'를 개최한다. 국내외 빅데이터 전문가를 초청해 최신 기술과 비즈니스에 최적화된 구현방법, 기술적 이슈 등 빅데이터 관련 정보가 종합적으로 소개될 예정이다.