맵알테크놀러지스가 오픈소스 프로젝트간의 호환성을 강화하는 맵알 에코시스템 팩(MapR Ecosystem Pack) 버전 2.0을 발표했다.
맵알 에코시스템 팩 프로그램은 다양한 오픈 소스 에코 프로젝트 간 호환성을 보장하면서 맵알 컨버지드 데이터 플랫폼에서 실행되는 대용량 데이터 애플리케이션을 구현할 수 있다. 이러한 향상된 기능은 유연한 데이터 액세스 기능을 추가하고 스트리밍 응용 프로그램을 위한 새로운 기능을 제공한다.
윌 오찬다레나(Will Ochandarena) 맵알테크놀러지스 제품 관리 부문 수석 디렉터는 “맵알은 항상 고객이 빅데이터 환경에서 성공적인 결과를 이끌어 낼 수 있도록 필요한 최신의 툴에 대해 즉시 활용이 가능하도록 노력하고 있다”며, "스파크(Spark)와 드릴(Drill)은 오픈소스 에코시스템 프로젝트 중 가장 널리 채택되고 사용되고 있는 툴로 이번 맵알 에코시스템 팩 2.0 버전을 통해 고객들은 보다 쉽고 안정적으로 고객의 프로덕션 환경에 스파크와 드릴을 쉽게 적용할 수 있게 됐다" 라고 전했다.
맵알 에코시스템 팩은 다양한 오픈소스 커뮤니티 프로젝트와 각 툴의 버전을 관리해야 하는 복잡성으로부터 고객들을 자유롭게 해준다.
맵알은 아파치 드릴(Apache Drill), 스파크(Spark), 파케이(Parquet), 하이브(Hive), 미리어드(Myriad) 등과 같은 오픈소스 에코시스템 프로젝트의 개발, 테스트 및 통합을 지원하고 있으며, 새로운 맵알 에코시스템 팩 버전 2.0에 추가된 기능은 다음과 같다.
• 카프카(Kafka) REST API 및 카프카 커넥트(Kafka Connect) 지원: 카프카 REST API와 카프카 커넥트에 대한 지원을 통해 맵알 스트림(MapR Streams)의 이벤트 데이터에 접근할 수 있는 새로운 방법을 제공한다. 맵알 스트림용 카프카 REST 프록시(Kafka REST Proxy)를 사용하면 다양한 개발언어 및 HTTP를 지원하는 모든 환경에서 다양한 스트리밍 데이터를 활용할 수 있다.
맵알 스트림용 카프카 커넥트는 맵알 스트림과 사용빈도가 높은 스트리밍 이벤트 데이터 소스 및 대상 간의 표준화 된 액세스를 위한 프레임 워크를 제공한다. 이러한 기능을 통해 고객은 마이크로 컨트롤러와 같은 임베디드 디바이스가 REST를 사용하여 실시간으로 데이터를 수집 처리 분석하고 RDBMS 및 검색 엔진과 같은 다른 시스템과 데이터를 통합함으로써 맵알 스트림을 기반으로 글로벌 규모의 IoT 환경을 지원하는 빅데이터 환경을 구축 할 수 있다.
• 스파크 2.0.1 지원: 실행 성능 향상을 목적으로 하는 단일 자바(Java) 함수로 여러 연산자를 통합하는 “Whole-Stage Code Generation”과 같은 새로운 기능을 추가하여 프로그램 실행 속도를 높이고 보다 빠르게 실행 결과를 제공한다. 또한 메모리 내 컬럼 기능은 데이터를 RAM에 최적화된 형식으로 저장하여 더욱 빠른 분석 쿼리를 가능하게 한다.
• 드릴 1.9 지원을 통해 로우레이턴시(Low latency) 쿼리[1] 및 최적화된 BI 환경 및 다이나믹(Dynamic) UDF 적용이 가능한 환경을 제공한다. 주요 개선 사항으로는 대규모 I/O 집약적인 분석 쿼리를 최대 33 %까지 가속화시키고, 고급 필터링 및 푸시 다운 기능을 통해 TPC-H 쿼리에 대해 최대 70 %까지 I/O를 획기적으로 줄였다. 새로운 버전은 메타 데이터 쿼리 성능을 향상시키고 업계 표준 BI 도구로 드릴 사용이 최적화된 유연한 JOIN 신택스(Syntax)를 제공하여 고객들로 하여금 최적화된 BI 환경을 경험하게 한다.
• 맵알 인스톨러 스탄자(MapR Installer Stanzas): 클라우드 또는 온프레미스 환경에서의 API 기반의 맵알 클러스터 구축 환경을 지원한다. 이번 버전에 포함된 맵알 인스톨러 스탄자는 맵알 컨버지드 데이터 플랫폼 프로젝트의 하나인 스파이글라스에 포함된 하나의 기능으로 프로그래밍 방식으로 클러스터를 프로비저닝할 수 있다. 엘라스틱 환경이 필요한 온프레미스 및 클라우드 배포 환경에서 클러스터 생성을 자동화하여 신속한 구축이 필요한 환경에 효과적인 기능을 제공한다.
