클라우데라가 오늘 하이브리드 스트리밍 워크로드를 처리하기 위한 데이터 플로우 클라우드 네이티브 서비스인 퍼블릭 클라우드용 클라우데라 데이터플로우를 출시했다고 밝혔다.
클라우데라 데이터 플랫폼(CDP)을 통해 사용할 수 있는 클라우데라 데이터플로우(이하 CDF)는 복잡한 데이터 플로우 운영을 자동화하고 오토스케일링 기능으로 스트리밍 데이터 플로우 운영 효율성을 높이며 짐작에 의한 인프라 규모 확장 작업을 제거해 클라우드 비용을 절감할 수 있다.
IDC의 ‘2021-2025 글로벌 데이터스피어(DataSphere) IoT 장치 및 데이터 예측’ 보고서에 따르면, 데이터 인 모션의 규모는 최대 79ZB까지 기하급수적으로 증가할 것으로 예상된다. 이미 많은 기업은 아파치 NiFi를 활용해 코드없는 데이터 플로우를 시각적으로 설계해 하이브리드 클라우드 아키텍처 전반에서 데이터를 수집, 처리하고 있다. 클라우드는 대용량 저장과 처리에 용이하지만, 다수의 정교한 데이터 플로우를 단일 클러스터에 구현하면 운영 및 모니터링 문제가 발생할 수 있으며, 여러 NiFi 플로우가 동일한 리소스를 사용하면 성능에 문제가 생길 수 있다. 또한, IT 관리자가 필요보다 더 큰 인프라 규모를 선택하는 경우에는 비용이 커지는 문제가 발생한다.
디네시 찬드라세카르(Dinesh Chandrasekhar) 클라우데라 데이터 인 모션 제품 마케팅 책임자는 "클라우데라 데이터플로우(CDF)는 쿠버네티스의 클라우드 기반 데이터 플로우를 자동화하고 관리하는 서비스이다"라며 "이제 고객들은 퍼블릭 클라우드에서 스트리밍 워크로드의 운영 효율성을 손쉽게 높이고 인프라 비용을 절감할 수 있다"라고 말했다.
마리벨 로페즈(Maribel Lopez) 로페즈 리서치 창립자 겸 수석 연구원은 "기업은 스트리밍 워크로드를 확장하면서 끊임없이 효율과 성능 사이의 균형을 조정하며 비용을 절감하고 있다"라며 덧붙여 “하이브리드 클라우드 채택은 기업에게 또 다른 도전을 불러오고 있다. 기술 책임자는 클라우드에서 워크로드 실행과 관리 프로세스를 간소화하는 지능형 툴이 필요하다"라고 말했다.
한편, 글로벌 기술분석 전문기업인 기가옴(GigaOm)의 최근 ‘클라우드 데이터 웨어하우스 성능 테스트’ 조사에서 상용 데이터 웨어하우스 제품 중 클라우데라 데이터 웨어하우스(DW)가 업계 표준 벤치마크 테스트에서 가격 대비 최고의 성능 효율성을 갖춘 제품으로 선정한 바 있다.
기가옴 리서치는 해당 조사에서 클라우데라 데이터 웨어하우스(CDW)와 주요 경쟁사인 아마존 레드시프트, 애저 시냅스 애널리틱스, 구글 빅쿼리, 스노우플레이크에서 쿼리를 실행하고 성능을 비교했다. 성능 테스트는 업계 표준인 TPC Benchmark DS(TPC-DS)로 진행됐으며, 30TB 규모의 99개 쿼리를 분석 후 발생한 가격을 비교하는 방식으로 진행됐다.
다니엘 핸드(Daniel Hand) 클라우데라 APAC 필드 CTO는 “비용은 이용 시간과 양에 비례하기 때문에 가성비는 클라우드 데이터 웨어하우스를 선정하기 위한 중요한 요소 중 하나다”라며 “클라우데라 데이터 웨어하우스와 같은 고성능 플랫폼은 사용자에게 더 빠른 결과물을 제공할 뿐 아니라 비용 절감의 효과도 기대할 수 있다. 클라우데라 데이터 웨어하우스의 클라우드 기반 아키텍처는 하이브리드 클라우드에 최적화돼 있다”라고 말했다.
[AIS 2021] 국내 최대 인공지능•머신러닝 정보보호 컨퍼런스에 여러분을 초대합니다!
-인공지능•머신러닝 적용 정보보호 기술과 위협 정보 공유의 장
-2021년 9월 16일 온라인 개최
-공공•금융•기업 정보보호 관계자라면 누구나 무료참석
-보안교육7시간 이수증 발급
-사전등록: 클릭
★정보보안 대표 미디어 데일리시큐!★
