Snowflake Ventures, AI 데이터 클라우드 내 데이터 품질 모니터링 개선 위해 Anomalo에 투자

오늘날의 데이터 중심 환경에서 정확한 분석 및 머신러닝 모델을 구현하려는 조직에게는 무엇보다 고품질의 데이터가 필요합니다. 하지만 격차나 불일치 혹은 오류가 있는 저품질의 데이터는 정교한 데이터 및 AI 이니셔티브에도 영향을 미칠 수 있습니다. Snowflake와 공동으로 진행한 MIT Technology Review Insights의 새 보고서에 따르면 설문조사 응답자의 절반 이상이 최우선 과제로 데이터 품질을 꼽았습니다. Snowflake Ventures가 Anomalo에 투자하는 이유도 바로 이 때문입니다. Snowflake의 파트너인 Anomalo는 인공지능 및 머신러닝을 사용하여 엔터프라이즈 데이터상의 문제를 자동으로 감지하고 설명하는 최첨단 데이터 품질 모니터링 플랫폼입니다. Anomalo는 기업들이 의사 결정과 모델에 사용하는 데이터를 신뢰할 수 있도록 보장합니다. 

Anomalo의 자동화된 AI 기술은 고객의 데이터 테이블, 뷰, 파이프라인에서 업스트림 데이터의 품질 문제를 감지합니다. 내장되어 있는 근본 원인 분석(RCA) 기능으로 문제의 근원을 빠르게 파악하여 비즈니스 범위 전반에서 데이터 운영에 미치는 영향을 완화합니다. Anomalo는 새로운 비정형 데이터 품질 모니터링 제품을 출시하여 엔터프라이즈 데이터의 품질을 계속 혁신하면서 생성형 AI를 위한 데이터 기반을 마련해 나가고 있습니다. 2024년 12월 기준, Anomalo 고객의 60% 이상이 Snowflake를 사용하고 있으며, Discover Financial Solutions나 Block 등의 대규모 엔터프라이즈 고객도 여기에 포함됩니다. 

Discover Financial Solutions(이하 Discover)의 데이터 및 분석 엔지니어링 부문 선임 이사 Prakash Jaganathan은 “Discover에서는 고객에게 다양한 디지털 뱅킹 및 결제 서비스 제품군을 제공한다”면서, “이러한 제품과 서비스는 모든 트랜잭션과 의사 결정에 기반하여 페타바이트 규모의 데이터를 생성한다”고 말하고, “이런 데이터가 계속 지속되고 우리 조직의 시스템을 통해 이동할 때 품질과 무결성을 유지하는 것은 운영과 규정 준수 측면에서 매우 중요하다”고 지적했습니다. 이어, “자동화된 데이터 품질에 대한 Anomalo의 ML 우선 접근 방식은 우리가 Snowflake AI 데이터 클라우드에서 계속 성장함에 따라 엔터프라이즈의 규모와 복잡성을 원활하게 처리할 수 있는 동종 최고의 솔루션이라는 사실을 입증했다”고 강조했습니다.

AI 데이터 클라우드는 이미 고객이 데이터 지표 함수(DMF)를 통해 완전성, 정확도, 고유성 및 유효성을 비롯한 여러 차원에서 데이터 품질 지표를 지속적으로 모니터링할 수 있도록 지원하고 있습니다. Anomalo의 자동화된 AI 데이터 품질 소프트웨어를 통해 고객은 감독되지 않는 ML을 사용하여 한 단계 더 나아갈 수 있습니다. 

이 파트너십은 혁신을 촉진하고 공동의 고객에게 혁신적인 기능을 제공하겠다는 Snowflake의 굳건한 의지와 노력을 방증합니다. 이번 투자를 계기로 Snowflake와 Anomalo는 주요 Snowflake 기술 전반에 걸친 통합을 통해 협업을 강화할 것입니다. 여기에는 Snowflake DMF를 Anomalo의 자동화 모니터링 플랫폼에 통합하고, Snowflake Cortex AI를 활용하여 Anomalo의 AI 기능을 향상시키고, Snowflake Native App 프레임워크와 Snowpark Container Services에 추가적으로 투자하여 Snowflake 고객에게 원활한 통합 경험을 제공하는 것이 포함됩니다.

Anomalo는 Instacart에서 직장 동료로 함께 일했던 Elliot Shmukler와 Jeremy Stanley가 의기투합하여 2018년에 설립한 회사입니다. 전 직장에서 함께 일하면서 수많은 데이터 품질 문제를 겪은 두 사람은, 데이터 웨어하우스 정보를 검증하고 문서화하기 위한 노코드 플랫폼인 Anomalo를 만들었습니다. 

Anomalo는 이미 몇 년 전부터 Snowflake 고객들이 Snowflake 테이블이나 뷰를 쉽게 모니터링할 수 있도록 지원해 왔습니다. 그리고 지난해에는 Snowpark Container Service 내에 완전히 컨테이너화된 자체 Snowflake Native App을 Snowflake Marketplace를 통해 제공하게 되었습니다. 이 배포 모드는 대형 엔터프라이즈 구성에 적합합니다. 데이터 품질 문제를 모니터링할 때 모든 데이터가 고객의 Snowflake 환경에 그대로 유지될 수 있도록 보장하기 때문입니다. Anomalo는 Snowflake Partner Network(SPN)의 Premier 파트너로서, Snowflake Horizon과 원활하게 통합하면서 Snowflake Ready Validation을 수행합니다.

Snowflake는 이처럼 한층 긴밀해진 파트너십을 통해 고객에게 보다 향상된 기능을 제공할 수 있기를 기대하고 있습니다. Snowflake Marketplace에서 제공되는 Anomalo의 Snowflake Native App을 사용해 데이터 품질 모니터링을 시작해 보시기 바랍니다.