AI 고속 도로를 안내하는 데이터베이스, Alibaba Cloud, 새로운 오픈 소스 기술 PilotScope 출시

출처 Xinyan Technology

|

기사 | 지아 닝규

12월 20일, 최고의 국제 데이터베이스 컨퍼런스인 VLDB2024에서는 Alibaba Cloud의 신기술 PilotScope가 성공적으로 최종 후보에 올랐음을 발표했습니다. 이 플랫폼 기술은 데이터베이스에 AI 알고리즘의 "원클릭 배포"를 실현하여 애플리케이션을 크게 줄일 수 있습니다. 데이터베이스의 AI 알고리즘을 임계화하여 데이터베이스 인텔리전스의 새로운 길을 열어줍니다. 12월 20일, 데이터베이스에 관한 국제 최고 컨퍼런스 VLDB2024에서 새로운 논문이 발표되었으며, Alibaba Cloud의 신기술 PilotScope가 성공적으로 목록에 올랐습니다. 이 플랫폼의 기술은 데이터베이스에서 AI 알고리즘의 "원클릭 배포"를 달성하여 비용을 크게 줄일 수 있습니다. 데이터베이스에서 AI 알고리즘의 적용 임계값을 높이고 데이터베이스 인텔리전스를 위한 새로운 길을 열어줍니다.

Alibaba Cloud는 같은 날 모든 PilotScope 기술을 무료로 오픈 소스화할 것이라고 발표했습니다

데이터베이스를 지능화하는 것이 왜 어려운가요?

데이터베이스는 국가경제와 국민생활에 필수적인 소프트웨어 기초기술입니다. 데이터베이스 기술의 지속적인 업데이트는 디지털 시대의 모든 계층에 중요한 영향을 미칩니다. 개척 영역 중 하나는 데이터베이스 인텔리전스(AI4DB, 즉 데이터베이스 인텔리전스)

입니다.

현재 데이터베이스 시스템은 매우 복잡하고 안정성 요구 사항이 매우 높습니다. AI 알고리즘을 데이터베이스와 일치시키고 디버깅하는 것만으로도 양측의 엔지니어가 몇 주, 심지어 몇 달 동안 긴밀하게 작업해야 하는데 이는 비효율적이고 비효율적입니다

더 일반적인 상황은 AI 엔지니어가 데이터베이스 세부 사항을 이해하지 못하고, 데이터베이스 개발자가 AI를 이해하지 못하고, 두 분야가 프로그래밍 언어조차 이해하지 못하는 것입니다(AI 개발은 주로 Python을 사용하고, 데이터베이스는 주로 C/를 사용합니다). Java)로 인해 쉽게 분리될 수 있습니다.

일반적으로 업계 기업은 지능형 쿼리 최적화 모듈과 같은 데이터베이스의 특정 기능 모듈을 대체하기 위해 일부 AI 알고리즘을 데이터베이스에 직접 내장하는 것을 선택합니다. 그러나 이러한 맞춤형 접근 방식은 개발, 유지 관리 및 업그레이드 비용이 매우 높습니다. AI 알고리즘이 업그레이드되고 교체될 때마다 개발 프로세스를 다시 수행해야 합니다. 동시에 데이터베이스의 코드베이스를 변경하면 추가적인 위험도 따르게 됩니다

이 때문에 인공지능의 급속한 발전에도 불구하고 데이터베이스 분야에서 관련 결과의 실제 적용은 여전히 ​​인기가 없습니다

유니버설 플랫폼 기술, 인공지능 알고리즘을 데이터베이스에 더 효과적으로 적용할 수 있을까?

이것은 Alibaba PilotScope 프로젝트 팀의 생각의 출발점이 되었습니다

PilotScope 프로젝트 리더 Zhu Rong은 다음과 같이 말했습니다. "AI4DB, AI 및 DB에는 사람들이 양쪽 끝에서 작업하지만 이 연결의 브리지는 제대로 완료된 적이 없습니다. 두 당사자 간의 커뮤니케이션을 보다 원활하게 하기 위해서는 AI 알고리즘과 데이터베이스 사이에 공개 브리지를 구축해야 합니다. "

0에서 1까지의 교차 기술 혁신

Zhu Rong은 PilotScope를 데이터베이스의 "최고 관리자"라고 설명했습니다. AI PilotScope 플랫폼을 사용하면 AI 엔지니어는 다양한 데이터베이스를 배포하고 적용하기 위한 일반 AI 알고리즘 설계에만 집중하면 됩니다. 데이터베이스 사용자는 API를 호출하는 것처럼 편리하고 효율적으로 AI를 사용할 수 있습니다.

이 아이디어는 개념에서 구현까지 진행됩니다. 2 년. Zhu Rong은 "알고리즘과 시스템의 교차점, AI와 데이터베이스의 교차점, 연구 개발의 교차점, 학계와 산업의 교차점을 포함합니다. 그의 소개에 따르면 이는 진정한 교차 기술입니다."라고 말했습니다. 프로젝트 팀은 많은 작업을 거쳐 마침내 새로운 미들웨어 시스템 플랫폼을 개발했습니다. 데이터베이스 및 AI 시스템 수준에서 모듈 및 인터페이스 정의를 추상화하고 일반화함으로써 AI 알고리즘을 "원클릭 배포"할 수 있습니다. 이것이 현재 PilotScope입니다

재작성된 내용은 다음과 같습니다: Alibaba Cloud PilotScope 아키텍처 다이어그램의 주석

PilotScope는 매개변수 조정, 인덱스와 같은 주류 데이터베이스 작업을 위한 10개 이상의 AI 알고리즘을 제공합니다. 추천, 카디널리티 추정 및 쿼리 최적화 그리고 PostgreSQL 및 Spark와 같은 두 가지 주류 오픈 소스 데이터베이스에 성공적으로 적용되었습니다. 1. 기존의 "하드 임플란트" 방식과 비교하면 2배 정도 다릅니다. 또한 PilotScope 자체로 인한 추가 배포 비용은 기본적으로 미미하며 성능도 뛰어납니다

사진 설명: PilotScope 렌더링

PilotScope는 데이터베이스에 "미세 침입"을 수행하고 지능형 탐지, 롤백, 격리를 도입합니다. 및 기타 메커니즘. AI 환상의 위험을 줄이고 데이터베이스 안정성을 보장하면서 지능적인 개선을 달성합니다

Zhu Rong은 과거에는 인공 지능 엔지니어와 데이터베이스 개발자가 지속적으로 협력하고 개선해야 했으며 안정성을 보장하는 데 몇 주 또는 몇 달이 걸릴 수도 있다고 말했습니다. "PilotScope를 사용하면 테스트를 위해 온라인에 접속하는 데 몇 시간 또는 수십 분 밖에 걸리지 않습니다. 이러한 1대1 기술 혁신은 개발 효율성을 크게 향상시킵니다.

오픈 소스가 AI4DB의 산업화 프로세스를 주도합니다

PilotScope 논문 결과가 VLDB에 포함되었습니다. VLDB 리뷰는 애플리케이션 시나리오를 기반으로 한 PilotScope의 선구적인 시스템 설계가 데이터베이스 인텔리전스의 새로운 방향을 열 것이라고 믿습니다

우리가 이해한 바에 따르면 VLDB는 3대 국제 데이터베이스 컨퍼런스 중 하나이며 데이터베이스에 중요한 영향을 미치는 논문만 포함하고 있습니다. 학계와 산업현장에서 매년 새로운 결과가 나옵니다. 데이터베이스 기술의 권위 있는 지표입니다. 제50회 VLDB 컨퍼런스는 2024년 8월 중국 광저우에서 개최될 예정입니다

그림: VLDB2024, 최고의 데이터베이스 컨퍼런스

Zhu Rong은 PilotScope 관련 기술이 GitHub에 배포되었다고 말했습니다. 및 Modelscope 커뮤니티의 무료 오픈 소스입니다. 팀은 오픈 소스 커뮤니티의 힘을 통해 더 많은 AI 알고리즘과 더 광범위한 데이터베이스를 PilotScope에 통합하고 개발자와 함께 더 많은 AI4DB 혁신을 탐색하기를 희망합니다

동시에 PilotScope는 Alibaba Cloud 내에서 파일럿 애플리케이션을 시작했습니다. Zhu Rong은 AI4DB가 실제 생산 환경에서만 가치를 창출할 수 있다고 말했습니다. 우리는 PilotScope가 이를 실제로 실현하고 모든 계층의 데이터베이스가 지능적인 효율성과 효과를 달성하도록 도울 수 있기를 바랍니다

오픈소스 주소를 첨부해주세요:

https://github.com/alibaba/pilotscope

위 내용은 AI 고속 도로를 안내하는 데이터베이스, Alibaba Cloud, 새로운 오픈 소스 기술 PilotScope 출시의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!