Reliability evaluation of commercial AI cephalometric landmarking and optimization of human review
연구 내용
상용 AI의 두부계측 랜드마크 결정 오차 양상을 분석하고, 인간 검토자의 전문성·검토 방식이 AI 성능에 미치는 영향을 규명하는 연구
상용 AI가 자동으로 산출하는 두부계측 랜드마크가 임상에서 요구되는 정확도·분류 일치성을 만족하는지 평가합니다. Bland-Altman 방식으로 체계적·무작위 오차를 구분하고, 인체 계측자의 재현성 지표와 비교하여 AI-인간 간 상호교환성 가능 조건을 검토합니다. 또한 AI 결과를 인간 검토자가 재확인하고 필요 시 조정하는 워크플로를 적용하여 랜드마크 오차를 줄이는 접근을 제안합니다. 이를 통해 초보자 사용 가능성 및 검토 필요 조건을 도출하는 차별성을 확보하고 있습니다.
관련 연구 성과
관련 논문
2편
관련 특허
0건
관련 프로젝트
0건
연구 흐름
초기 연구에서는 상용 AI가 수동 랜드마킹을 대체할 수 있는지 여부를 랜드마크 변수별 오차와 분류 신뢰성 관점에서 확인하는 데 집중했습니다. 이후 후속 연구에서는 인간 검토자의 경험 수준이 AI 성능에 미치는 영향을 함께 분석하여, 검토가 오차 감소로 연결되는 조건을 규명했습니다. 최근에는 단순 자동화 성능 평가를 넘어, AI 결과에 대한 사람의 검토·수정 절차를 포함하는 실사용 프로토콜을 제시하는 방향으로 연구를 확장하고 있습니다.
활용 가능성
활용 가능성은 알앤디써클 특화 AI 에이전트가 생성한 내용으로, 실제 연구 가능 여부는 연구실과의 논의가 필요합니다.
관련 논문
구분
제목
Commercial artificial intelligence lateral cephalometric analysis: part 2—effects of human examiners on artificial intelligence performance, a pilot study
Commercial artificial intelligence lateral cephalometric analysis: part 1—the possibility of replacing manual landmarking with artificial intelligence service