데이터브릭스, 'Genie Code'로 데이터 엔지니어링 혁신 예고

데이터브릭스(Databricks)는 오늘 복잡한 데이터 엔지니어링 및 분석 작업을 자동화하기 위해 설계된 인공지능 에이전트 'Genie Code'를 공개했다. 이 발표는 소프트웨어 엔지니어링에서 시작된 에이전트의 급속한 진화를 기업 데이터 워크플로우 분야로 확장하는 움직임의 일환이다.

데이터 사이언스 플랫폼 제작자 데이터브릭스는 Quotient AI라는 초기 단계 스타트업을 인수한다고도 발표했다. 이 스타트업은 AI 에이전트에서 발생하는 오류를 평가하고 진단하는 데 특화되어 있다.

Genie Code는 데이터 팀에 단순한 코드 도움을 넘어서 인간의 감독 하에 데이터 작업을 자율적으로 계획하고 실행하는 시스템을 가져다준다는 목표를 갖고 있다. 데이터브릭스의 제품 관리 담당 수석 이사인 켄 웡에 따르면, 이 시스템은 기존의 코딩 보조 도구와 데이터 작업에 특화된 시스템 간의 근본적인 차이점을 해결한다.

처리할 수 있는 코드 문제를 해결하는 데 중점을 둔 코딩 에이전트와 달리, Genie Code는 기업의 데이터 시스템과 통합되어 데이터 문맥과 이전의 쿼리 패턴, 사업 정의를 해석하여 사용자의 의도를 생산 데이터 워크플로우를 위한 정의로 변환한다.

데이터브릭스는 이번 발표를 통해 AI 에이전트가 데이터 전문가들의 역할을 변화시키고 있으며, 이들은 코딩 작업에서 AI 에이전트를 감독하고 조율하는 역할로 이동하고 있다고 설명했다. 이는 미래의 데이터 시스템 운영 및 유지 관리에서도 큰 생산성 향상을 이끌 것이라고 예상된다.

한편, Quotient AI의 기술은 에이전트 기반 시스템의 신뢰성과 성능을 개선하는 데 도움이 될 것으로 보인다. Quotient AI는 GitHub의 코파일럿 개발자들이 설립한 스타트업으로, 에이전트 활동을 분석하고 프로세스 오류점을 파악하는 강화 학습 모델을 사용한다. 데이터브릭스는 향후 이 기술을 Genie Code 및 기타 에이전트 플랫폼에 통합할 계획이다.