Vì vậy, Shannon lấy loga của khối lượng trong không gian thông điệp bị chiếm giữ bởi một thông điệp và nhân nó với xác suất mà thông điệp đó được gửi từ nguồn.
Shannon quả quyết rằng tin nhắn đó là từ một nguồn tiêu cực.