大数跨境

Benfords定律 | 揭开数字时代数字的秘密

Benfords定律 | 揭开数字时代数字的秘密 Ai商情
2024-07-01
1

Benfords定律

Benfords定律,也称为首位数字定律,是关于许多实际数值数据集中的首位数字频率分布的观察。根据这一定律,在许多自然发生的数字集合中,首位数字倾向于较小。具体来说,数字1作为首位数字的出现频率约为30%,而较大的数字作为首位数字的出现频率则逐渐降低。

1: 30.1%

2: 17.6%

3: 12.5%

4: 9.7%

5: 7.9%

6: 6.7%

7: 5.8%

8: 5.1%

9: 4.6%

根据该定律,可以使用以下公式计算每个前导数字的概率:P(d) = \log_{10}(1 + \frac{1}{d}),其中d是前导数字 (1, 2, ..., 9)。

Benfords定律的应用

欺诈检测:

Benfords定律常用于法务会计和审计中以检测异常或潜在的欺诈。例如,在税务申报、财务报表或选举结果中,偏离预期分布的情况可能表明有操纵或不规则现象。   

科学研究:

研究人员使用Benfords定律来验证经验数据的真实性。例如,生物学、物理学和经济学等领域的数据集通常会根据Benfords分布进行测试以确保数据的完整性。

图像分析:

在数字图像取证中,Benfords定律有助于通过分析像素强度的分布来识别被篡改的图像。

理论背景

Benfords定律基于对数尺度,可以通过数学推导得出。该定律在跨越几个数量级且没有最小或最大值限制的数据集上应用效果最佳。这意味着它对大型、异质的数据集效果显著,如人口数量、财务数据和自然现象测量值。

限制和考虑因素

非适用性:Benfords定律对人为限制的数据集适用性较差,例如电话号码,它们是均匀分布的。

误解:并非所有偏离Benfords定律的情况都表明欺诈或错误。由于特定的基本因素,合法的数据集有时也会自然偏离。

延伸阅读

书籍:

《Benfords定律:法务会计、审计和欺诈检测的应用》,"Benford's Law: Applications for Forensic Accounting, Auditing, and Fraud Detection",作者Mark J. Nigrini。

《异常数字法则》,"The Law of Anomalous Numbers",作者Frank Benfords。   

研究论文:

《显著数字现象》,"The Significant-Digit Phenomenon",作者Frank Benfords。

《使用Benfords定律检测数据集中的欺诈》,"Detecting Fraud in Data Sets Using Benford's Law",作者Mark J. Nigrini 和 Steven J. Miller。

关联阅读

报告 | AI算力不断迭代,液冷大势所趋
智利 | 数据中心项目投资活跃
解读 | 欧盟通用数据保护条例(GDPR)
报告 | 数据要素建设加速人工智能闭环
斯坦福 | 13张图了解AI产业现状
报告 | 2024年中国AI大模型产业发展报告
月度盘点 | AI 行业洞察(2024.5)
※※※※※※※※※※※※※
以下内容与本文密切相关
中国数字产业、AI产业
法律、政策、规划、标准集
报告、研究进展跟踪
••••••
※※※※※※※※※※※
更多行业报告、资讯

请加小编微信 Kurgerlion

【声明】内容源于网络
0
0
Ai商情
1234
内容 248
粉丝 0
Ai商情 1234
总阅读1
粉丝0
内容248