更改
跳到导航
跳到搜索
←上一编辑
下一编辑→
规模法则 新
(查看源代码)
2025年7月6日 (日) 17:18的版本
删除12字节
、
2025年7月6日 (日) 17:18
→AI的演化
第82行:
第82行:
==== 涌现能力 ====
==== 涌现能力 ====
−
<nowiki>大语言模型在参数超过某一临界值 [math]\displaystyle{ N_{\text{crit}} }[/math] 后,会突然展现出此前未具备的能力,称为</nowiki>
'''
涌现能力(Emergent
Abilities)'''。其概率可用逻辑斯蒂函数建模:
+
<nowiki>大语言模型在参数超过某一临界值 [math]\displaystyle{ N_{\text{crit}} }[/math] 后,会突然展现出此前未具备的能力,称为</nowiki>涌现能力(Emergent
Abilities)。其概率可用逻辑斯蒂函数建模:
<nowiki>[math]\displaystyle{ P_{\text{success}}(N) \approx \frac{1}{1 + e^{-\kappa (\log N - \log N_{\text{crit}})} } }[/math]</nowiki>
<nowiki>[math]\displaystyle{ P_{\text{success}}(N) \approx \frac{1}{1 + e^{-\kappa (\log N - \log N_{\text{crit}})} } }[/math]</nowiki>
第99行:
第99行:
[math]\displaystyle{ N(t) \approx N_0 e^{\lambda t}, \quad \lambda \approx 0.35 \ \text{(year}^{-1}) }[/math]
[math]\displaystyle{ N(t) \approx N_0 e^{\lambda t}, \quad \lambda \approx 0.35 \ \text{(year}^{-1}) }[/math]
−
每一技术周期内,主流性能指标误差都以幂律方式随 [math]\displaystyle{ N }[/math] 与 [math]\displaystyle{ D }[/math]
下降。这种'''指数级资源增长
+
幂律性能提升'''的组合,构成当前
AI 技术发展的主要。
+
每一技术周期内,主流性能指标误差都以幂律方式随 [math]\displaystyle{ N }[/math] 与 [math]\displaystyle{ D }[/math]
下降。这种指数级资源增长
+
幂律性能提升的组合,构成当前
AI 技术发展的主要。
== 参考文献 ==
== 参考文献 ==
相信未来
5,443
个编辑
导航菜单
个人工具
登录
名字空间
页面
讨论
变种
视图
阅读
查看源代码
查看历史
更多
搜索
导航
集智百科
集智主页
集智斑图
集智学园
最近更改
所有页面
捐赠我们
帮助
工具
特殊页面
可打印版本