최근 빅데이터 분석에서 실시간(real-time) 처리에 대한 요구가 부쩍 늘었다. 주요 빅데이터 기술로 널리 사용하는 하둡(Hadoop)은 배치 처리에 기반해, 하둡 맵리듀스 동작 시간을 최대한 줄일 수는 있어도 실시간 처리에는 한계가 있기 때문이다.
물론 기존 데이터베이스를 활용하면 실시간 분석에 대한 요구를 만족시킬 수 있다. 하지만 빅데이터 시대에 관계형 DB는 데이터 양과 시스템 규모, 비정형 데이터 처리에 적합치 않다. 않다. 이에 따라 CEP(Complex Event Processing) 기술이 최근들어 주목받고 시작했다. 업체간 경쟁도 심해지는 양상이다.
최근 지디넷코리아가 빅데이터를 주제로 개최한 제10회 ACC 행사에서는 빅데이터와 실시간 처리에 대한 주제 발표도 진행됐다.
팁코소프트웨어 이석진 상무는 실시간 빅데이터를 위한 플랫폼 전략이란 주제 발표에서 하둡 맵리듀스는 빅데이터 기술의 핵심이지만 배치 프로세스에 초점이 맞춰져 있어, 복잡한 이벤트 프로세싱을 제공하려면 다른 정보 관리와 프로세싱 기술이 필요하다는 점을 분명히 했다.
팁코는 빅데이터에 실시간성을 부여하는 CEP 플랫폼을 제공한다. 팁코가 제공하는 CEP 플랫폼은 기업내 메시징 시스템, SNS, B2B 시스템, 워크플로우 등에 내재된 모든 이벤트를 통합 처리한다. 정보 표준화를 위한 미들웨어, 이벤트처리 플랫폼, 패턴을 알아차리기 위한 분석 엔진 등을 아울러 구현한 시스템이 팁코의 '엔터프라이즈 이벤트 서버'다.
이석진 상무는 고객들에게 경쟁력있는 경험을 제공하려면 실제 돌아가는 프로세스에 개입할 필요가 있다. 그렇게 하려면 네트워크와 IT시스템들에 걸쳐 모든 이벤트를 분석할 수 있어야 한다고 거듭 강조했다. 에러로 이어질 수 있는 잠재적인 이벤트들에 대해서도 알려줄 수 있어야 한다고 덧붙였다.
관련기사
- 빅데이터와 소셜미디어로 주가 예측하면?2013.11.25
- [제10회 ACC]테라데이타 "고급 빅데이터 분석 필요"2013.11.25
- [제10회ACC]"빅데이터, 효과 보려면 조직내 민주적 협업 이뤄져야"2013.11.25
- [제7회 ACC]팁코 "빅데이터, 쌓이기 전에 움직여라"2013.11.25
팁코소프트웨어가 제공하는 실시간 빅데이터 플랫폼은 7개의 핵심 콤포넌트로 구성된다. 통합, 이벤트, MDM, BPM, 어낼리틱스, 클라우드, 소셜이 바로 그것이다.
팁코소프트웨어는 이번 ACC 행사에서 CEP는 제조, 금융 서비스, 통신, 유틸리티, 항공/물류, 유통 분야에서 주목받는 트렌드라며 이와 관련한 레퍼런스들도 소개해 눈길을 끌었다.