DMind AI, Web3 특화 LLM 벤치마크 연구 공개

AI 요약

싱가포르 오픈소스 AI 연구기관 DMind AI는 아시아 연구진과 공동 개발한 DMind Benchmark 논문이 8월 9일부터 13일까지 제주에서 열리는 국제학술대회 KDD 2026 Datasets & Benchmarks 트랙에 채택됐다고 밝혔습니다. DMind Benchmark는 블록체인 기초 개념, 인프라, 스마트 컨트랙트, DeFi, DAO, NFT, 토크노믹스, 밈 코인, 보안 취약점 등 9개 도메인과 스마트 컨트랙트 디버깅·온체인 수치 추론 등 실사용 과제를 포함해 GPT-5 시리즈, Claude, Gemini, DeepSeek, Grok, Qwen 등 31개 모델을 비교했으며 GPT-5 Medium이 전체 평균 77.63점을 기록했고 토크노믹스와 보안 분야에서 모델별 성능 차이가 컸다고 설명했습니다. 연구진은 주요 AI 모델들이 Web3 전문 과제에서 한계를 보였고 DMind의 32B 파라미터 오픈소스 모델이 일부 과제에서 대형 범용 모델 대비 낮은 비용으로 유사한 성능을 보였으며 연구 성과는 AI 금융 플랫폼 Minara에 적용되는 등 디지털 금융 서비스 개발과 Web3 평가 체계 마련에 활용되고 있다고 밝혔습니다.