국내외 과학기술 정책에 대한 간략한 정보
단신동향
해외단신
AI-보조 vs. 사람 기반 리뷰의 유용성과 신뢰성 분석 원문보기 1
- 국가 영국
- 생성기관 과학혁신기술부(DSIT)
- 주제분류 핵심R&D분야
- 원문발표일 2025-04-23
- 등록일 2025-05-02
- 권호 286
○ 과학혁신기술부(DSIT)와 문화미디어스포츠부(DCMS)는 증거 검토 과정에 생성형 AI를 활용하는 것의 유용성(robustness) 및 신뢰성을 확인하고자 행동인사이트팀(Behavioural Insights Team)에 분석을 의뢰함
- 해당 보고서는 사례 연구로, 2명의 연구자에게 동일한 주제(기술 확산이 영국의 성장과 생산성에 미치는 영향)를 대상으로 리뷰를 작성하도록 함
- 두 연구자는 같은 연구 범위를 대상으로 했으며, 한 연구자는 본인이 직접 작성한 반면 다른 연구자는 ChatGPT 4, Claude 2, Elicit & Consensus 등 AI 보조 도구를 활용함
○ 결과는 크게 속도와 연구의 질을 중심으로 분석되었음
- AI가 보조한 연구는 수행 기간이 23% 적게 들었으며, 특히 연구의 분석과 통합과정에서는 거의 56%에 가까운 시간을 줄일 수 있었음
- 두 연구의 결론은 매우 유사했으며, 질적인 측면에서도 큰 차이가 없는 것으로 확인됨
○ 해당 보고서는 각 단계에서 두 연구자가 들인 시간과 접근법, 최종 참고자료, 그리고 연구의 주요 내용을 비교한 결과도 함께 제시함
- 해당 보고서는 사례 연구로, 2명의 연구자에게 동일한 주제(기술 확산이 영국의 성장과 생산성에 미치는 영향)를 대상으로 리뷰를 작성하도록 함
- 두 연구자는 같은 연구 범위를 대상으로 했으며, 한 연구자는 본인이 직접 작성한 반면 다른 연구자는 ChatGPT 4, Claude 2, Elicit & Consensus 등 AI 보조 도구를 활용함
○ 결과는 크게 속도와 연구의 질을 중심으로 분석되었음
- AI가 보조한 연구는 수행 기간이 23% 적게 들었으며, 특히 연구의 분석과 통합과정에서는 거의 56%에 가까운 시간을 줄일 수 있었음
- 두 연구의 결론은 매우 유사했으며, 질적인 측면에서도 큰 차이가 없는 것으로 확인됨
○ 해당 보고서는 각 단계에서 두 연구자가 들인 시간과 접근법, 최종 참고자료, 그리고 연구의 주요 내용을 비교한 결과도 함께 제시함
