KRX 한국거래소(이사장 정은보)는 국내 자본시장에 AI 사용을 활성화하고 KRX의 미래 성장동력 발굴을 위해『제3회 KRX 데이터 경진대회(금융 LLM 성능 평가대회)』를 10월 14일부터 개최합니다.

이번 대회는 거래소에서 실시하는 제3회 대외 데이터 경진대회로, KRX가 만든 자체 벤치마크(Benchmark)를 활용해 금융에 특화된 대형언어모델(LLM)의 성능을 평가하기 위해 실시됩니다.

KRX가 만든 벤치마크(Benchmark)는 언어 모델의 성능을 평가하기 위한 표준 데이터 테스트를 뜻하며, KRX는 원라인AI와 함께 금융에 특화된 언어 모델을 평가할 수 있는 KRX-Bench를 개발 완료한 상태입니다.

파일다운로드

더불어 KRX가 주최하는 이번 대회에는 아마존웹서비스(AWS)와 코스콤이 주관사로, 원라인AI가 대회 운영사로 참여합니다.

아마존웹서비스는 이번 대회를 위해, 클라우드 컴퓨팅 자원과 대형언어모델 LLM 개발에 필요한 클라우드 서비스를 지원하게 됩니다.

특히, 이번 대회는 KRX 미래사업본부 출범과 연계하여, AI 기술을 기반으로 한 KRX 비즈니스 역량 고도화에 크게 기여할 것으로 기대되고 있습니다.



참가자는 오픈소스 언어 모델과 공공 데이터를 활용하여 금융에 특화된 대형언어모델 LLM을 개발하고 대회 홈페이지에 제출하면, KRX가 자체 벤치마크로 LLM의 성능을 평가하는 방식으로 진행됩니다.

KRX의 자체 벤치마크(KRX-Bench)는 LLM의 지식수준과 추론 능력, 충실도 등을 종합적으로 평가하게 됩니다.

예선은 KRX-Bench 점수와 학습계획서 1차 평가로 상위 30팀을 선발하고, 본선은 KRX-Bench 점수와 학습계획서 2차 평가 및 현장 발표로 상위 5팀(최우수상 1팀, 우수상 2팀, 장려상 2팀)을 선정할 계획입니다.



참가자격은 개인(학생, 직장인 등), 법인 구분 없이 누구나 참여 가능하며, 팀은 4인 이하로 구성 가능합니다.

이번 대회는 일반 데이터 경진대회와 달리, LLM 학습·추론에 필요한 컴퓨팅 자원(GPU)과 LLM 개발도구를 지원하고, 본선 진출자에게 LLM 개발을 위한 Cloud 교육 프로그램을 제공하여 참가자의 Cloud 서비스 활용 능력을 배양할 계획입니다.



참가방법은 대회 전용 홈페이지(https://krxbench.koscom.co.kr)에서 참가신청 후 산출물(LLM, 학습 계획서, 발표자료 등) 제출하면 됩니다.

특히 사업성이 높다고 판단되는 산출물의 경우, 해당 참가팀과 협업해 KRX의 신규 데이터사업 서비스로 고도화시킬 예정으로
KRX는 이번 경진대회를 통해, 신뢰할 수 있는 AI에 기반한 데이터 상품?서비스를 발굴하고, 자본시장 데이터의 새로운 가치를 발견할 수 있기를 기대하고 있습니다.