熵及其在空间数据不确定性研究中的应用
史玉峰1,2
×í2?
255049
3.
香港理工大学土地测量与地理资讯系地球资讯科技研究中心 4. 山东科技大学校长办公室
总结了熵的产生
讨论了熵与不确定性的关系
提出了应用混合熵作为统一测度来度量空间数据不确定性的设想
熵
信息熵
Abstract
Key words
24
2005年12月
December 2005
1000
0036
A
中图分类号
最初熵是建立在热力学第二定律基础之上的
但这一定义仅能描述宏观过程的
不可逆性
Boltzmann 给出了如下形式的熵函
数W 为与某一宏观状态所对应的微观状态数
在
宏观与微观之间假设了一座桥梁
又给出了熵函数的统计解释(微观意义
)
D??￠ì?μ?????ê?óéD??￠??μ?′′ê?è?Shannon
于1948
年提出的它规定
信息量等于消除的不确定性的数量
对于取值离散的样本空间
则事件a i 的所含有的信息
量(
自信息)用I(a i )表示
在事件
a i
发生以前
事件a i 发生以后
不宜用
作整个样本空间信息的度量
即
=
(2)
信息熵具有下列主要性质１
p i =1
即H(X)=0
可加性
1
0≤≤q j 1
1
=∑=s
j j
q
?ò113éáao?D??′
(XY)
则联合信源(XY)的信息熵
11
()(
)log ()(
)()
r
s
i j i j i j H XY P p H X H Y a b a b ===?=+∑∑ (3)
基金项目
香港特区项目
（１．３４．３７．Ａ２２２）
作者简介1965
?ìêú????êy?Y2?è·?¨D?oí????êy?Y·???μè
?ìêú
收稿日期
shyf@https://www.doczj.com/doc/4c18378935.html,
万方数据