분류
2026년 2월
작성일
2025.10.15
수정일
2025.10.15
작성자
허석용
조회수
19

배리어프리 전시 서비스를 위한 대화형 수어 질의응답 거대언어모델 연구

Recent advancements in deep learning have shown significant potential in developing barrier-free environments for the hearing-impaired. However, the lack of diverse and specialized datasets limits the development of high-level services such as interactive museum exhibitions. In this paper, we introduce KSL-Ex, a Korean Sign Language (KSL) dataset designed to support real-world interactive exhibition services. Our dataset comprises 29,574 sign language video samples, including isolated words, continuous KSL sentences, question- answer pairs, and detailed annotations. In addition, we propose an interactive sign language question answering framework that leverages state-of-the-art large language models which have demonstrated outstanding performance in question an- swering tasks. The proposed framework consists of four key components: The sign language recognition (SLR) model, the answering module, the refinement module, and the 3D sign lan- guage animation module. These components effectively process sign language queries, generate proper answers, and produce sign language animations to provide interactive communication interfaces for the hearing-impaired. Experimental results show the effectiveness of both KSL-Ex and the proposed framework, demonstrating their potential in providing real-world interac- tive sign language services.

학위연월
26년 2월
지도교수
박진선
키워드
LLM, RAG, Dataset, Sign Language Recognition & Translation
소개 웹페이지
https://sites.google.com/view/heosy/
첨부파일
첨부파일이(가) 없습니다.
다음글
지식 그래프 기반의 LLM 수학 추론 성능 향상 기법
박재현 2025-10-15 13:52:53.343
이전글
Long-Axis Guided Diffusion Autoencoder for Through-Plane Super Resolution of Cardiac cine MRI
김준희 2025-10-15 12:12:25.733
RSS 2.0 807
게시물 검색
석사학위논문
번호 제목 작성자 작성일 첨부파일 조회수
807 격자기반 양자내성암호 ML-KEM 하드웨어 설계 및 검증 새글 강은세 2025.10.15 0 28
806 지식 그래프 기반의 LLM 수학 추론 성능 향상 기법 새글 박재현 2025.10.15 0 11
805 배리어프리 전시 서비스를 위한 대화형 수어 질의응답 거대언어모델 연구 새글 허석용 2025.10.15 0 19
804 Long-Axis Guided Diffusion Autoencoder for Through 새글 김준희 2025.10.15 0 12
803 데이터 증강을 활용한 전이 학습 기반 RT 용접 결함 분류 성능 개선 새글 강명현 2025.10.15 0 26
802 RAG와 CoT 프롬프팅을 활용한 중소형 LLM의 한국어 수학추론 성능 향상 기법: 최적 새글 조아라 2025.10.15 0 22
801 자기 검증과 외부 지식 활용의 통합을 통한 대형 언어 모델에서의 환각 현상 완화 새글 박예린 2025.10.14 0 29
800 Adversarial Attack on CAN IDS Leveraging Multi DDQ 새글 황연정 2025.10.14 0 30
799 이종 모델 간 지식 증류를 통한 경량 시계열 예측 모델의 설계 및 구현 새글 나상진 2025.10.14 0 24
798 Transformer-ACGAN 기반 CAN-FD 침입 탐지 프레임워크 새글 윤지원 2025.10.14 0 39
797 End-to-End Framework for Condition-Specific Gene R 새글 이수빈 2025.10.13 0 24
796 RA-TI CRAFT: 문서 레이아웃 4클래스 동시 분할 새글 김덕용 2025.10.13 0 43
795 기하학적 정보를 담고 있는 슈퍼픽셀 기반의 라이다-카메라 캘리브레이션 새글 김진완 2025.10.13 0 40
794 리뷰 기반 의도 정보와 암묵적 선호도를 통합하는 그래프-시퀀스 추천 새글 이소혜 2025.10.13 0 37
793 신뢰 실행 환경 기반 블록체인 스마트 컨트랙트 오프체인 보안 기법 새글 강하영 2025.10.13 0 36
792 A Deep Learning Framework for Multi-x-objective Co 새글 김정무 2025.10.12 0 59
791 딥페이크 생성 방지를 위한 확산 모델 맞춤형 방어 기법 연구 새글 고영민 2025.10.11 0 61
790 Dual Visual-Structural Graph Construction for Open 새글 최비결 2025.10.10 0 46
789 단일광자단층촬영영상 기반 파킨슨병 진단 딥러닝 모델 해석을 위한 임상 개념 기반 해석 기법 유일해 2025.10.03 0 60
788 RAG-sLLM 기반 계약 리스크 자동 분석 프레임워크 제안 : 조선업을 중심으로 윤시록 2025.04.07 0 338