Ask On Data

Ask On Data는 생성형 AI를 활용하여 데이터 파이프라인 생성을 단순화하고 가속화하는 혁신적인 오픈 소스 데이터 엔지니어링 도구입니다. 채팅 기반 인터페이스를 도입하여 사용자가 평이한 영어로 데이터와 상호 작용하고 복잡한 워크플로우를 구축할 수 있도록 합니다. 이 접근 방식은 기술적 장벽을 효과적으로 제거하여 비즈니스 분석가, 데이터 과학자부터 숙련된 데이터 엔지니어에 이르기까지 광범위한 사용자를 위해 데이터 엔지니어링을 민주화합니다. 이 플랫폼은 차세대 데이터 스택으로 설계되어 데이터 처리를 직관적이고 빠르며 비용 효율적으로 만듭니다.

Ask On Data의 핵심은 높은 비용, 가파른 학습 곡선, 전문 엔지니어에 대한 의존도와 같은 기존 ETL(추출, 변환, 로드) 프로세스의 일반적인 병목 현상을 해결하는 것입니다. 데이터 작업을 위한 AI 어시스턴트를 제공함으로써 기존 도구에 비해 개발 시간을 최대 92%까지 크게 단축하고 팀이 데이터 준비 요구 사항을 자체적으로 해결할 수 있도록 지원합니다.

Ask On Data 사용 방법

Ask On Data를 사용하는 것은 대화하는 것만큼 간단합니다. 워크플로우는 직관적으로 설계되었으며 사전 코딩 지식이 필요하지 않습니다.

1. 데이터 소스 연결: 플랫 파일(CSV, Excel), API, 데이터베이스(MySQL, PostgreSQL, Firebird 등), 데이터 레이크 및 데이터 웨어하우스(Amazon Redshift, Snowflake 등)를 포함한 다양한 소스에서 데이터를 연결하는 것으로 시작합니다.
2. 채팅으로 변환: 채팅 인터페이스를 사용하여 자연어로 명령을 내립니다. 예를 들어, "A 테이블과 B 테이블을 user_id 열로 조인해줘", "중복 행을 제거해줘" 또는 "각 지역의 총 매출을 계산해줘"와 같은 지침을 입력할 수 있습니다.
3. 실시간 미리보기: 각 명령을 내릴 때마다 Ask On Data는 변환된 데이터의 즉각적인 미리보기를 제공합니다. 이를 통해 파이프라인의 각 단계를 검증하고 작업이 예상대로 수행되는지 확인할 수 있습니다.
4. 검증 및 세분화: 더 많은 제어가 필요한 고급 사용자를 위해 플랫폼은 SQL 또는 Python으로 직접 코드를 보거나 편집하고 작성할 수 있는 기능을 제공합니다. 또한 기본 YAML 구성 파일을 검사하여 전체 워크플로우를 이해하고 미세 조정할 수 있습니다.
5. 스케줄링 및 자동화: 데이터 파이프라인이 완료되면 특정 주기(예: 매일, 매시간)로 실행되도록 예약할 수 있습니다. 전체 로드, 증분 로드 또는 잘라내기 및 로드 작업과 같은 작업 세부 정보를 구성할 수 있습니다.
6. 실행 취소 및 검토: 플랫폼은 수행된 모든 작업의 포괄적인 기록을 유지합니다. 실수를 한 경우 실행 취소 기능을 사용하여 쉽게 변경 사항을 되돌릴 수 있습니다.

Ask On Data의 핵심 기능

• 생성형 AI 기반 채팅 인터페이스: 코딩 없이 평이한 영어로 지침을 입력하여 데이터 파이프라인을 구축하고 관리합니다.
• 데이터 파이프라인 마스터리: 데이터 통합, 정리, 랭글링 및 변환을 위한 엔드투엔드 데이터 파이프라인을 원활하게 생성, 관리 및 최적화합니다.
• 광범위한 데이터 소스 지원: 파일, API, 데이터베이스, 데이터 레이크 및 데이터 웨어하우스를 포함한 다양한 데이터 소스에 연결합니다.
• 실시간 데이터 미리보기: 변환 결과를 즉시 확인하여 빠른 검증 및 반복이 가능합니다.
• 코드 제어 및 투명성: 향상된 제어를 위해 사용자는 SQL 및 Python을 작성하거나 파이프라인의 YAML 파일을 편집하여 엣지 케이스를 처리하는 데 적합합니다.
• 작업 스케줄링 및 오케스트레이션: 지정된 주기로 작업을 예약하고 상세한 로딩 옵션을 제공하여 데이터 워크플로우를 자동화합니다.
• 작업 기록 및 실행 취소: 포괄적인 작업 기록과 간단한 실행 취소 버튼으로 변경 사항을 쉽게 추적하고 실수를 되돌릴 수 있습니다.
• 유연한 배포: 완전 관리형 클라우드 서비스 또는 무료 자체 호스팅 오픈 소스 버전으로 제공됩니다.

Ask On Data의 사용 사례

Ask On Data는 다재다능하며 광범위한 사용자 및 시나리오에 혜택을 줍니다.

• 데이터 과학자 및 ML 엔지니어: 데이터 엔지니어링 팀을 기다리지 않고 머신러닝 모델을 위한 데이터 세트를 독립적으로 준비하고 전처리합니다.
• BI 사용자 및 데이터 분석가: 보고서 및 대시보드를 위해 데이터를 직접 액세스, 정리 및 변환하여 진정한 셀프 서비스 분석을 가능하게 합니다.
• 데이터 엔지니어: 복잡한 ETL/ELT 파이프라인 개발을 대폭 가속화하여 보다 전략적인 작업에 집중할 시간을 확보합니다.
• 비즈니스 사용자: 비기술 사용자는 코딩 지식 없이도 데이터와 상호 작용하고 기본적인 데이터 준비 작업을 수행할 수 있습니다.
• 데이터 마이그레이션: MySQL이나 Firebird와 같은 온프레미스 데이터베이스에서 Snowflake나 Redshift와 같은 클라우드 데이터 웨어하우스로 데이터를 효율적으로 마이그레이션합니다.

Ask On Data의 장점

Ask On Data는 몇 가지 주요 장점으로 두드러집니다.

• 학습 곡선 제로: 직관적인 채팅 인터페이스는 기술 배경에 관계없이 누구나 접근할 수 있게 합니다.
• 비교할 수 없는 속도: 데이터 파이프라인 개발 시간을 며칠 또는 몇 주에서 단 몇 분으로 단축하여 상당한 시간과 비용을 절감합니다.
• 비용 효율성: 기존 라이선스 ETL 도구에 비해 80% 이상의 비용 절감을 제공하며, 관대한 무료 및 오픈 소스 플랜을 제공합니다.
• 데이터 민주화: 조직 내 모든 사용자가 데이터를 다룰 수 있도록 하여 사일로와 병목 현상을 해소합니다.
• 유연성 및 제어: 최대의 유연성을 위해 노코드의 단순성과 선택적인 코드 기반 제어의 균형을 맞춥니다.

가격 및 플랜

Ask On Data는 다양한 요구에 맞는 여러 플랜을 제공합니다.

• 오픈 소스: 모든 데이터베이스 지원, 스케줄링 기능 및 커뮤니티 지원을 포함하는 완전 무료 자체 호스팅 버전입니다. 사용자는 수동 패치 및 업그레이드를 책임집니다.
• 무료(관리형 클라우드): 소규모 사용에 이상적인 무료 관리형 클라우드 호스팅 플랜입니다. Excel 및 CSV 파일(최대 5MB 제한)을 지원하며 자동 업그레이드를 포함하지만 작업 스케줄링 기능은 없습니다.
• 엔터프라이즈: 기업을 위한 프리미엄 관리형 클라우드 플랜입니다. 모든 데이터 소스 지원, 스케줄링, 엔터프라이즈급 지원, 자동 업그레이드, 백업 및 모니터링을 포함합니다. 가격은 맞춤형이며, 관심 있는 당사자는 지원팀에 문의해야 합니다.