맵알테크놀러지스, 아파치 드릴에 아파치 스파크 통합 데이터 파이프라인 간소화

2014.11.12 소프트웨어 편집.취재팀 기자 :

빅데이터 배포판 아파치 하둡 전문 기업인 맵알테크놀러지스(지사장 김점배, www.mapr.com)가 다양한 데이터 소스에서 즉각적인 자가 데이터 탐색을 제공하는 아파치 드릴(Apache Drill)과 빠른 처리, 손쉬운 프로그래밍 및 실시간 프로세싱 향상을 제공하는 인메모리 처리 프레임워크인 아파치 스파크(Apache Spark)를 통합해 지원한다.


아파치 드릴은 최소한의 IT 자원으로 스키마리스(schema-less) 데이터, 중첩 데이터 및 빠르게 진화 중인 스키마를 지닌 데이터 등 기본 포맷의 복잡한 데이터를 즉각적으로 처리하는 유연성을 제공한다. SQL 쿼리는 다양한 파일 포맷에서 직접 실행할 수 있기 때문에 라이브 데이터는 몇 주가 소요되는 스키마 준비 및 관리와 ETL 작업 설정 없이 들어오는 대로 실행이 가능하다.

 

또한, 아파치 드릴은 사용자들이 SQL 스킬 및 비즈니스 인텔리전스(BI) 툴에 대한 기존 투자를 쉽게 활용할 수 있도록 표준 SQL(ANSI SQL)을 지원한다.

 

아이온 스토이카(Ion Stoica) 데이터브릭스 CEO는 "지속적으로 확대되고 있는 스파크의 혁신을 통해 사용자들이 빅데이터로부터 더욱 빠르게 가치를 이끌어 낼 수 있게 돼 기쁘다"며, "데이터브릭스는 맵알을 통해 기업들의 처리 옵션이 확장되고, 이들이 데이터를 통해 한층 깊이 있는 통찰력을 빠르게 얻을 수 있을 것으로 기대한다"고 전했다.

 

M.C. 스리바스(M.C. Srivas) CTO 겸 공동설립자는 "아파치 드릴과 스파크의 결합은 데이터 파이프라인의 개발을 간소화하고, 인메모리 데이터 상에서 드릴 SQL 기반의 애드혹(ad-hoc) 쿼리를 가능하게 한다"며, "이러한 폭넓고 깊이 있는 기술적 자원의 결합을 활용하는 데이터브릭스와의 협업은 혁신을 가속화시키고 고객들에게 상당한 이점을 제공할 것"이라고 말했다.

 

김종렬 기자 obtain07@noteforum.co.kr

 

[디지털 모바일 IT 전문 정보 - 노트포럼]
Copyrights ⓒ 노트포럼, 무단전재 및 재배포 금지

 

동영상리뷰

HOT REVIEW

LASTEST REVIEW

NOTEFORUM
노트포럼 대표 김원영 사업자번호 : 635-02-00945 주소 : 서울시 용산구 효창원로 94, B1 등록번호 : 서울 아04916 제호 : 영테크
발행·편집인 : 김원영 등록 : 2018.01.09 발행 : 2018.01.09 청소년 보호 책임자 김원영 이메일 : master@noteforum.co.kr
2006-2025 NOTEFORUM. Co. All Rights Reserved.

02-711-2075

월-금 09:00-18:00 / 주말,공휴일 휴무
News 52,634 Review 3,424
2006-2025 NOTEFORUM.