1. 멀티모달 센서 융합 기법의 개념17
2. 생물학적으로 동기화된 센서 융합 모델27
2.1 인지 능력을 위한 생물학적 센서 융합 모델28
2.2 청각 인지 기능을 이용한 센서 융합 접근방법30
2.3 시각 인지 기능을 이용한 센서 융합 접근방법32
2.4 데이터 융합 자동화33
3. 청각 인지 능력을 위한 센서 융합 기법37
3.1 이상음향 탐지 기법37
3.1.1 이상음향 탐지를 위한 동종센서 융합 기법37
3.1.2 이상음향 검지 기법41
3.1.3 모델기반 OONA 거절 기법45
3.1.4 이상음향 탐지 기능 평가 실험49
3.2 신원 인증 기술52
3.2.1 음성 발화 확인을 통한 신원 인증 기술 개요52
3.2.2 음성기반 암호 인증 기술57
3.2.3 음성기반 암호 인증기술 실험평가70
3.3 대화식 인지 방법을 위한 이종센서 융합 기법80
3.3.1 음성기반 사용자 인터페이스81
3.3.2 먼 거리에서의 음성인식을 위한 전처리 기술81
3.3.3 음성인식 인터페이스 모달리티83
3.3.4 음성합성 인터페이스 모달리티87
3.3.5 시스템 적용 시 유용성 고려사항89
3.3.6 구조적/알고리즘적 최적화 방법91
4. 시각 인지 기능을 위한 센서 융합 기법97
4.1 시각 검지 및 추적 기법 개요97
4.1.1 단일 센서 사용 시 데이터 분석 기법97
4.1.2 다중 오브젝트 검지 및 추적 시 고려 사항99
4.1.3 영상처리를 위한 저 수준 단계 데이터융합 기법102
4.2 움직임을 갖는 오브젝트 검지 기법106
4.2.1 움직임을 갖는 오브젝트의 행동 패턴106
4.2.2 움직임을 갖는 블러브 검지109
4.2.3 속성 데이터 융합을 위한 특징벡터 선택 기법112
4.2.4 폐색 예측을 위한 시간적 집중 기법116
4.2.5 오브젝트 연관을 위한 공간적 집중 기법119
4.3 데이터 연관 기법을 이용한 다중 표적의 추적 기법123
4.4 시각 검지 및 추적 기법 실험평가130
4.4.1 검지 및 추적 실험평가130
4.4.2 실험 결과 및 토의137
5. 멀티모달 센서 융합 프레임워크139
5.1 사용자 인터페이스를 위한 분산 센서 융합 기법140
5.1.1 사용자 인터페이스 모델140
5.1.2 분산센서 간의 통신 인터페이스143
5.2 응용프로그램 독립적 센서 융합 모델144
5.2.1 멀티모달 사용자 인터페이스 모델144
5.2.2 음향 탐지를 위한 통신 프로토콜 디자인148
5.2.3 대화형 모듈을 위한 통신 프로토콜 디자인151
5.2.4 시각 사용자 인터페이스를 위한 통신 프로토콜 디자인155
5.3. 멀티모달 융합 프레임워크157
5.3.1 센서 기반 융합 규칙157
5.3.2 인터페이스 모달러티로부터의 데이터 융합 규칙159
5.3.3 청각 및 시각 인지기능을 위한 멀티 센서 융합 기법160
6. 결 론163
7. 참고 문헌165