Nan Jia와 Haojin Yang이 이끄는 연구진은 작업 공간의 각 단계를 검증해 분석 작업을 만드는 프레임워크 DataPraxis를 선보였다. 연구진은 이 프레임워크를 활용해 여러 분야에 걸친 검증된 분석 작업 수행 과정 5,000개를 모은 DataPraxis-5K를 구축했다. 또 DataPraxis-27B와 DataPraxis-35B-A3B 두 모델을 훈련했으며, 두 모델은 DABStep 벤치마크에서 55.11점, JobBench에서 51.9점을 기록해 비슷한 수준의 최첨단 모델과 대등하거나 더 나은 성능을 보였다.
왜 중요한가
이 데이터셋은 실제 분석 업무를 수행할 수 있는 AI를 개발하는 데 연구자들이 활용할 수 있는 신뢰도 높은 학습 자료를 제공한다.