RnDCircle Logo
이성주 연구실
한국과학기술원 전기및전자공학부 이성주 교수
온디바이스 AI
모바일 센싱
웨어러블 센싱
연구 영역
기본 정보
논문·특허
과제
구성원

이성주 연구실

한국과학기술원 전기및전자공학부 이성주 교수

이성주 연구실은 전기및전자공학부 기반으로 모바일과 웨어러블 센싱에서 도메인 이동을 고려한 온디바이스 AI 모델을 설계하고, 자기지도학습·대조학습·연합학습·개인화 적응 기법을 조합해 성능을 안정화하는 연구를 수행합니다. 동시에 스마트폰 기반 디지털 웰빙과 콘텐츠 모더레이션에서 개입 단위(피처 수준)와 텍스트 수정 전략이 사용자 행태와 정신적 부담에 미치는 영향을 사용자 연구로 분석합니다. 더불어 보이스피싱 탐지, IoT 도감청 방어, UWB 기반 충돌 예측, 애드혹 라우팅 강화학습 등 모바일 보안과 안전 인식 기술도 함께 개발합니다.

온디바이스 AI모바일 센싱웨어러블 센싱도메인 적응 학습자기지도학습
대표 연구 분야
연구 영역 전체보기
도메인 적응형 온디바이스 모바일·웨어러블 센싱 모델 연구 thumbnail
도메인 적응형 온디바이스 모바일·웨어러블 센싱 모델 연구
Domain-Adaptive On-Device Mobile/Wearable Sensing Models
연구 분야 상세보기
연구 성과 추이
표시된 성과는 수집된 데이터 기준으로 산출되며, 일부 차이가 있을 수 있습니다.
주요 논문
5
논문 전체보기
1
Article
|
·
인용수 2
·
2025
"I know my data doesn't leave my phone, but still feel like being wiretapped": Understanding (Mis)Perceptions of On-Device AI Vishing Detection Apps
Subin Park, Hyungjun Yoon, J. Kim, Hyoungshick Kim, Sung-Ju Lee
https://doi.org/10.1145/3706599.3719784
Computer science
Phone
Perception
Internet privacy
World Wide Web
Psychology
2
Article
|
인용수 2
·
2025
HateBuffer: Safeguarding Content Moderators' Mental Well-Being through Hate Speech Content Modification
Subin Park, Jeonghyun Kim, Jeanne Choi, Joseph Seering, Uichin Lee, Sung-Ju Lee
Proceedings of the ACM on Human-Computer Interaction
혐오 표현은 온라인 플랫폼에서 지속적이며 아직 해결되지 않은 과제로 남아 있다. 혐오 표현으로부터 시청자를 보호하기 위해 사용자 생성 콘텐츠를 검토하는 일선에서 근무하는 콘텐츠 조정자들은, 공격적인 언어에 지속적으로 노출되면서도 종종 그로 인한 정신적 부담으로부터 보호받지 못한 상태에 놓이게 된다. 조정자의 정신 건강을 보호하기 위해 우리는 HateBuffer를 설계했는데, 이는 혐오 표현의 대상(대상자)을 익명화하고 공격적인 표현을 덜 공격적인 형태로 바꾸어(의역하여) 제시하며, 조정자가 원할 경우에는 원래 표현을 보여준다. 80명의 참여자를 대상으로 한 사용자 연구에서는, 가상의 뉴스 플랫폼에서 혐오 표현 조정 시뮬레이션 과제를 수행하게 한 뒤 반구조화 면담을 진행하였다. 참여자들은 HateBuffer를 사용할 때 댓글의 혐오 심각도를 더 낮게 평가했지만, 우리의 예상과 달리 대조군에 비해 감정 개선이나 피로도 감소를 경험하지는 못했다. 그러나 면담에서는 참여자들이 HateBuffer를 감정의 전염과 혐오 표현 속 편향된 의견의 정상화에 대한 효과적인 완충장치로 묘사했다. 특히, HateBuffer는 조정 정확도를 손상시키지 않았으며, 오히려 회상을 약간 증가시키는 데 기여했다. 우리는 HateBuffer가 지각된 이점과 정신적 웰빙에 대한 측정된 영향 사이에 존재하는 불일치에 대한 가능한 설명을 탐색한다. 또한 텍스트 기반 콘텐츠 수정 기법이 더 건강한 콘텐츠 조정 환경을 위한 도구로서 지닌 가능성도 강조한다.
https://doi.org/10.1145/3757609
Offensive
Moderation
Content (measure theory)
Safeguarding
Normalization (sociology)
Set (abstract data type)
Content analysis
Mental health
Deception
3
Article
|
·
인용수 0
·
2025
From Vision to Motion: Translating Large-Scale Knowledge for Data-Scarce IMU Applications
Hyungjun Yoon, Hyeongheon Cha, Hoang Nguyen, Taesik Gong, Sung-Ju Lee
IF 9.2 (2025)
IEEE Transactions on Mobile Computing
자기지도 학습을 통해 획득된 사전학습 표현은 학습 데이터가 적은 과제에서도 높은 정확도를 달성할 수 있다. 시각 및 자연어 처리 영역과 달리, IMU 기반 응용 분야에 대한 사전학습은 일반화 가능한 표현을 학습하기에 충분한 규모와 다양성을 갖춘 공개 데이터셋이 거의 없다는 점에서 어렵다. 이러한 문제를 해결하기 위해, 우리는 대규모 이미지로부터 사전학습된 표현을 다양한 IMU 센싱 과제로 적응시키는 IMG2IMU를 제안한다. 우리는 센서 데이터를 시각적으로 해석 가능한 스펙트로그램으로 변환하여, 모델이 시각 분야에서 얻은 지식을 활용할 수 있게 한다. 또한 IMU 센싱 응용을 위해 특히 유의미한 지식을 획득할 수 있도록 하는 이미지의 센서-인지 사전학습 방법을 제시한다. 이는 센서 데이터의 특성에 맞게 커스터마이즈한 증강 세트에 대해 대조학습을 수행하는 것을 포함한다. 네 가지 서로 다른 IMU 센싱 과제를 대상으로 한 평가는, IMG2IMU가 센서 데이터로 사전학습된 기준선보다 평균 9.6%p F1-score만큼 더 우수함을 보여주며, 제한된 학습 데이터만 사용할 수 있는 IMU 센싱 응용에서 시각 지식을 유용하게 통합할 수 있음을 입증한다.
https://doi.org/10.1109/tmc.2025.3556998
Computer science
Inertial measurement unit
Scale (ratio)
Computer vision
Artificial intelligence
Motion (physics)
최신 정부 과제
37
과제 전체보기
1
2025년 3월-2028년 12월
|1,384,000,000
(2세부)알려지지 않은 신종 보이스피싱 탐지·예측 기술개발
o 최종목표: 신종 보이스피싱 대응 차세대 보이스피싱 탐지 기술 개발 및 실증·상용화 o 최종 연구개발 목표 달성을 위한 세부목표 11종 ① 보이스피싱 ATT&CK 프레임워크 기반 변종·신종 시나리오 개발 ② 보이스피싱 탐지 결과 설명 및 근거 제시를 위한 XAI 기반 시각화 기술 개발 ③ 신종 보이스피싱 대응 한국어 음성 인식 기술 개발 ④ 신종 보이스피...
보이스피싱 탐지
단말 내 인공지능
인공신경망 경량화
딥페이크 탐지
악성앱 탐지
2
2025년 3월-2028년 12월
|1,540,667,000
(2세부)알려지지 않은 신종 보이스피싱 탐지·예측 기술개발
o 최종목표: 신종 보이스피싱 대응 차세대 보이스피싱 탐지 기술 개발 및 실증·상용화 o 최종 연구개발 목표 달성을 위한 세부목표 11종 ① 보이스피싱 ATT&CK 프레임워크 기반 변종·신종 시나리오 개발 ② 보이스피싱 탐지 결과 설명 및 근거 제시를 위한 XAI 기반 시각화 기술 개발 ③ 신종 보이스피싱 대응 한국어 음성 인식 기술 개발 ④ 신종 보이스피...
보이스피싱 탐지
단말 내 인공지능
인공신경망 경량화
딥페이크 탐지
악성앱 탐지
3
2025년 3월-2028년 12월
|1,300,000,000
(세부1) 지능형홈 특화 경량형 AI 모델 개발 및 서비스 실증
본 연구의 최종 목표는 지능형홈 특화 서비스를 안전하게 제공하기 위한 멀티모달 sLLM기반의 사용자 맞춤·공감형 온디바이스 AI 솔루션 기술을 개발하고 서비스를 실증하는 것임. 본 연구의 주요 산출물은 다음과 같음. 첫째, 지능형홈 특화 대규모 멀티모달 데이터셋을 개발할 것임. 음성, 영상, 생체정보, 환경정보, 지시 동작 등 5가지 모달리티 데이터를 수집...
다중모달 언어모델
경량 인공지능
개인화 인공지능
다중 시나리오 실증
데이터 비식별화
최신 특허
특허 전체보기
상태출원연도과제명출원번호상세정보
공개2024보이스 피싱 어플리케이션을 탐지하는 방법 및 이를 지원하는 전자 장치1020240109297
공개2023앱 사용 제한방법 및 장치1020230169786
등록2023동적 리소스 적응형 딥러닝 모델 추론 방법 및 상기 방법을 수행하는 딥러닝 모델 추론 장치1020230060780
전체 특허

보이스 피싱 어플리케이션을 탐지하는 방법 및 이를 지원하는 전자 장치

상태
공개
출원연도
2024
출원번호
1020240109297

앱 사용 제한방법 및 장치

상태
공개
출원연도
2023
출원번호
1020230169786

동적 리소스 적응형 딥러닝 모델 추론 방법 및 상기 방법을 수행하는 딥러닝 모델 추론 장치

상태
등록
출원연도
2023
출원번호
1020230060780