216
个编辑
更改
→McGill 交互信息(多重互信息、共信息、协同)
'''负信息问题'''
'''负信息问题'''
对单变量的信息熵而言，信息熵始终非负，但在McGill的交互信息框架中却会出现多变量间交互信息可能为负值的情况，这种反直觉的事实意味着，McGill的多变量信息框架存在缺陷，这一问题使得后续的工作者发展出更完备的多变量信息理论，PID就是其中一种。
对单变量的信息熵而言，信息熵始终非负，但在McGill的交互信息框架中却会出现多变量间交互信息可能为负值的情况，这种反直觉的事实意味着，McGill的多变量信息框架存在缺陷，这一问题使得后续的工作者发展出更完备的多变量信息理论，PID就是其中一种。