#### 1. **정보 이론의 기초** (~10,000단어) - **1.1 기원 및 역사적 맥락** - 1940년대 클로드 섀넌의 기초 연구 탐구 - 초기 커뮤니케이션 시스템의 배경과 정량화 가능한 정보 측정의 필요성 - "정보"와 "엔트로피"의 수학적 정의 소개 - **1.2 핵심 개념 및 정의** - **엔트로피**: 시스템의 불확실성을 측정하는 엔트로피에 대한 자세한 설명 - **정보 내용 및 중복**: 중복성이 정보 전송에 미치는 영향 이해 - **상호 정보**: 변수 간 공유 정보의 척도로서 상호 정보에 대한 설명 - **채널 용량**: 커뮤니케이션 채널을 통한 최대 정보 전송에 대한 설명 - 섀넌의 엔트로피 공식, 쿨백-라이블러..
수학
2024. 11. 8. 14:08
