두나무 머신러닝팀, BIRD-SQL 글로벌 리더보드 1위

텍스트-SQL 변환 모델, 글로벌 평가지표 1위 달성
정확도, 효율성에서 모두 높은 점수 획득

2024-01-25 08:55 출처: 두나무

두나무 머신러닝팀, BIRD-SQL 글로벌 리더보드 1위

서울--(뉴스와이어)--두나무의 인공지능(AI) 모델이 정확성과 속도 측면에서 글로벌 리더보드 1위에 올랐다.

블록체인 및 핀테크 전문 기업 두나무(대표 이석우)는 자사 머신러닝팀이 연구·개발한 텍스트-SQL 변환 모델이 글로벌 AI 모델 평가지표인 BIRD-SQL에서 글로벌 리더보드 1위를 달성했다고 25일 밝혔다.

텍스트-SQL 변환 모델은 사람의 언어를 데이터 관리 프로그래밍 언어인 SQL로 변환하는 AI 모델로, 생성형 AI의 등장 이후 큰 관심을 받고 있는 연구 분야다.

두나무 머신러닝팀이 이번에 개발한 텍스트-SQL 모델은 사용자가 자연어로 질문을 입력하면 SQL 변환이 필요한 데이터를 빠르고 정확하게 추출해 챗GPT의 성능을 한층 강화하는 것이 특징이다.

특히 AI 모델 성능 측정 벤치마크인 BIRD-SQL (A Big Bench for Large-Scale Database Grounded Text-to-SQLs)의 글로벌 리더보드에서 정확도 점수 65.4%, 효율성 점수 71.3%를 각각 받으며 모두 1위에 올랐다. 이는 GPT-4의 정확도(54.8%)와 효율성(60.7%)을 각각 10% 이상 웃도는 수치다. 2위 모델과도 정확도 항목에서 4.7%, 효율성에서 3.6%의 높은 성능 격차를 기록했다. 처음 1위에 오른 1월 14일 이후 현재까지도 계속 선두를 지키고 있다.

이번 연구를 통해 증권플러스가 제공하는 인공지능 대화형 서비스 ‘우디’의 자연어를 통한 종목 스크리닝 성능을 크게 향상시킬 수 있을 것으로 기대된다.

이동준 두나무 머신러닝팀장은 “챗GPT로 촉발된 생성형 AI 기술 개발이 활발해지면서 두나무는 더 정교하게 자연어를 이해하고, 누구나 쉽게 기술을 활용할 수 있도록 연구하고 있다”며 “명령어에 따라 성능이 크게 달라지는 거대언어모델(LLM)의 한계점을 개선하는 데 초점을 맞춰 두나무의 다양한 서비스 향상에 기여하도록 노력하겠다”고 말했다.

한편 두나무 머신러닝팀은 주식과 디지털 자산 시장에서 활용되는 AI 모델을 연구·개발하고 있다. 현재 AI 모델링 및 튜닝, 모델 평가 매트릭 설정 등 다양한 데이터를 발굴해 두나무의 다양한 서비스에 활용하고 있다.

두나무 소개

2012년 설립된 두나무는 가장 신뢰받는 디지털 자산 거래소 ‘업비트’, 국민 증권 애플리케이션 ‘증권플러스’, 국내 대표 비상장 주식 거래 플랫폼 ‘증권플러스 비상장’, NFT 거래 플랫폼 ‘업비트 NFT’, 메타버스 플랫폼 ‘세컨블록’ 등을 서비스하고 있다. 두나무는 디지털 자산, 증권, 자산 관리 각 분야에서 최고의 서비스를 제공하고 있으며 전문 인력, 혁신 서비스, 뛰어난 기술로 국내는 물론 글로벌 시장에서도 주목받고 있다. 블록체인 전문 기업인 자회사 람다256을 통해 블록체인 생태계를 만드는 데 앞장서고 있으며, 2024년까지 1000억원 규모의 투자 계획을 발표하는 등 ESG 경영을 위한 활동에도 적극적으로 나서고 있다.

웹사이트: http://www.dunamu.com
이 뉴스는 기업·기관·단체가 뉴스와이어를 통해 배포한 보도자료입니다. 배포 안내 >
뉴스와이어 제공