[도안구 테크수다 기자 eyeball@techsuda.com] 태블로 소프트웨어(이하 태블로)는 빅데이터 업계 분석에 기반해 2017년 빅데이터 분야의 주요 분석 및 솔루션 동향에 대해 예측한 ‘2017년 상위 10대 빅데이터 트렌드’ 보고서를 발표했다.

• [download id="8657"]

태블로는 이번 보고서를 통해 사물인터넷(IoT) 및 클라우드 환경으로부터 생성되는 모든 유형의 데이터 형식에 대한 분석을 지원하는 시스템이 계속 증가할 것이라고 전망했다. 특히, 기업들의 머신러닝 및 스마트 시스템 도입이 증가함에 따라, 이런 데이터에 대한 최종 사용자의 접근성을 높여주는 셀프 서비스 도구에 대한 요구가 증대될 것이라고 분석했다.

또한 비즈니스 사용자가 하둡상의 다양한 데이터 유형 및 형식을 처리할 수 있도록 데이터 준비에 소요되는 시간과 복잡성을 줄일 수 있는 셀프 서비스 도구가 부상할 것이라고 예상했다.

빅데이터 분석 플랫폼이 기업의 빠르고 반복적인 데이터 활용과 탐색적 분석을 지원
보고서에 따르면, 비즈니스 사용자들은 더 빠르고 반복적인 KPI 대시보드 분석뿐 아니라 탐색적 분석에 하둡상의 빠른 대화형 SQL을 핵심 요소로 꼽고 있다. 이로 인해 하둡 속도 향상을 위한 데이터베이스, 쿼리 가속 기술, SQL 및 OLAP 등의 옵션들이 향후 지속적으로 확장될 것이다. 그러나 현재 기업의 탐색적 분석에 필요한 데이터는 하둡뿐 아니라 레코드 시스템 및 클라우드 웨어하우스 등에 이르는 다양한 환경에 산재해 있다. 이에 하둡에만 격리된 BI 솔루션이 아닌 데이터나 원본에 구속되지 않는 플랫폼이 발전할 것으로 예측된다.

실시간 스트림 처리, 머신러닝 및 광범위한 데이터 원본에 대한 연결을 제공하는 분석 도구가 빅데이터 가치를 제고하는 플랫폼으로 각광
기업들은 빅데이터에 투자하는 가장 큰 이유로 빅데이터의 다양성을 지목하고 있으며, 이런 동향은 기업들이 다양한 종류의 빅데이터 분석에 집중함에 따라 더욱 강화될 것이다. 또한 대화형 애플리케이션 또는 실시간 스트림 처리를 위해 페타바이트(PB) 수준의 데이터를 처리하는 모델 및 애플리케이션의 개발이 증가할 것으로 예측되고 있다.

이에 따라 이질적인 데이터 원본에 라이브 연결을 제공하는 분석 플랫폼의 능력이 중요해지고, 대량의 실시간 데이터에 대한 접근성을 향상시키는 셀프 서비스 분석 기술에 업계의 관심이 집중될 것이다. 뿐만 아니라 점차 더욱 많은 양의 IoT 기기 데이터가 클라우드 서비스에 제공되고, 다양한 데이터베이스 시스템에 저장되고 있다. 광범위한 데이터 원본에 대한 탐색 및 시각화를 지원하는 셀프 서비스 분석 도구가 기업들의 IoT 분야 투자 기회를 증대시킬 것이다.

셀프 서비스 데이터 준비 및 데이터 거버넌스 및 보안 기능들이 엔터프라이즈 시스템상의 분석 확대 지원
민첩한 셀프 서비스 데이터 준비 도구는 비즈니스 사용자의 하둡 데이터에 대한 접근성을 개선시키고 있다. 이러한 도구는 하둡을 늦게 도입한 업체 및 후발 업체에 대한 진입 장벽을 낮추고 있으며, 향후 쉽고 빠른 데이터 탐색을 위해 그 사용이 지속될 전망이다.

하둡이 엔터프라이즈 IT 환경의 핵심 요소로 자리매김해가고 있으며, 향후 엔터프라이즈 시스템 관련 보안 및 거버넌스에 대한 기업들의 투자가 늘어나고 지속적으로 도입 장벽이 사라질 예정이다. 또한 분석 가치가 있는 데이터를 찾고 이해하고자 하는 기업들의 셀프 서비스 탐색에 대한 요구 증가로 인해 향후 셀프 서비스 분석이 더욱 확대될 것이다. <테크수다 Techsuda>

[toggle title="도안구 기자의 간단평" state="open"]

국내 빅데이터 시장은 초기부터 잘못된 개념이 광범위하게 유포되면서 완전히 망가졌다.

기존 데이터 분석을 위한 DW 기반의 상용 데이터베이스 업체들이 구글과 야후, 아마존, 페이스북 등 인터넷 서비스 업체들이 필요해 의해 만들어진 기술들에 대한 이해없이 자사의 제품을 팔아먹기 위해 적극적이었다. 또 일부 시장 전문가라는 이들도 이에 동조했다.

그 사이 하둡은 전세계 빅데이터 플랫폼 생태계의 대표주자로 확실히 자리잡았고 그 생태계는 갈수록 더욱 커지고 있다. 특히 2016년 11월, 아마존웹서비스(AWS)가 리인벤트 2016에서 선보인 아테나의 경우 이제 빅데이터 플랫폼을 내부에 구축하지 않아도 플랫폼을 서비스로 이용할 수 있게 됐다.

데이터 서비스를 제공하려는 이들이나 기업들에게는 무척 반가운 소식이다. 이번 태블로의 10대 트렌드에서는 이 대목이 빠져 아쉽다. 이제 빅데이터의 거대한 호수와 그 호수에서 정재해서 건져놓은 데이터마트나 데이터웨어하우스 그리고 다양한 분석 툴들의 결합은 더욱 긴밀해질 것으로 보인다.

스파크가 뜨니 하둡은 필요없다는 멍청한 이야기는 올해 국내 빅데이터 소식에서는 듣지 않기를 희망한다. 거대한 생태계를 보지 못하고 하나의 툴로만 바라보기 때문이다. <도>

[/toggle]