Вопрос:

2. Как связана неопределённость нашего знания с получением информации?

Ответ:

Информация уменьшает неопределённость знания. Чем меньше мы знали о предмете или событии, тем больше новой информации получаем, когда узнаём о нём что-либо. Если сообщение не содержит ничего нового, оно почти не уменьшает неопределённость.