글로벌 엔터프라이즈 데이터 클라우드 전문 기업 클라우데라(한국지사장 강형준)는 오늘 클라우데라 데이터 플랫폼(Cloudera Data Platform, CDP)이 엔비디아의 아파치 스파크 3.0용 RAPIDS 가속기(Accelerator)를 통합 지원할 예정이라고 밝혔다.
엔비디아(NVIDIA) 컴퓨팅 플랫폼에 적용된 아파치 스파크 3.0용 RAPIDS 가속기는 코드의 변경없이 기업의 데이터 파이프 라인을 가속화하고 머신 러닝의 작업 성능을 높여준다. 이를 통해 기업은 인공지능(AI)을 신속히 도입하거나 더 나은 비즈니스 결과를 도출할 수 있다.
이미 올해 초에 클라우데라 데이터 플랫폼(CDP)에 적용된 머신 러닝 AMP(Applied ML Prototype)과 엔비디아의 강력한 컴퓨팅 성능으로 패키지된 머신 러닝(ML)을 미국연방국세청(IRS), 영국통계청(ONS), 독일 코메르츠뱅크(Commerzbank) 등에서 적용한 바 있다. 뿐만 아니라 온프레미스, 퍼블릭 클라우드, 하이브리드 클라우드에서 보다 저렴한 비용으로 데이터 처리와 머신 러닝 모델 훈련을 더 빠르게 수행할 수 있다.
이번 클라우데라와 엔비디아의 통합 지원으로 기업의 데이터 엔지니어들은 공급망 모델 변환, 금융 부정행위 대응, 새로운 제품군 개발 등 이전에는 볼 수 없었던 규모의 데이터 세트를 활용할 수 있게 됐다. 데이터 과학자의 경우 방대한 양의 데이터로 인해 발생하는 병목현상을 줄여 운영의 비용과 속도를 개선하게 한다. 이번 통합 지원은 기업에 새로운 비즈니스 과제에 신속하게 대응하고 통찰력 있는 분석 능력을 제공한다.
방대한 데이터 세트로 어려움을 겪고 있는 회사에서 오픈소스 기반 GPU 가속 데이터 과학 파이프 라인은 머신 러닝 모델 훈련의 가능 여부를 결정한다. 이 파이프 라인은 기업의 능력을 강화해 인공지능(AI)을 활용할 수 있게 한다. GPU 가속 아파치 스파크(Apache Spark 3.0)는 CDP에서 원활하게 실행되며, 조직이 머신 러닝을 위한 안전하고 확장 가능한 개방형 플랫폼을 사용해 연구에서 생산에 이르기까지 고성능컴퓨터(HPC), AI, 데이터 과학 등의 요구사항을 지원할 수 있다.
클라우데라 프라이빗 클라우드의 스파크 3.0용 RAPIDS 가속기는 올 여름부터 사용 가능하다. 5월에 선보일 클라우데라 퍼블릭 클라우드의 딥 러닝 및 머신 러닝 가속을 시작으로, 클라우데라와 엔비디아는 지속적인 가속 기능을 클라우데라 데이터 플랫폼에서 선보일 예정이다. 이번 주 엔비디아 GTC에서 클라우데라와의 협업에 대한 자세한 정보를 알아볼 수 있다.
|
[영상] 엔비디아에 대응하는 인텔 가우디3/AMD MI300/범클라우드 진영의 NPU/,그리고 AI 하드웨어 개발 흐름과 추세는? 
