《关闭小说畅读模式体验更好》
Transformer层数:96层
隐藏层维度:12,288
上下文视窗:1,048,576tokens
词汇量:262,144
数值计算精度:BF16/FP8
神经讯号编码器:时空图Transformer
记忆系统架构:分层情景记忆系统
……
前面的基础架构倒还算常规,勉强符合一个超大规模生成式AI模型的配置表,但分层情景记忆系统是个什麽构架?後面还列出了一堆神经记忆解码引数:
神经讯号输入通道数,神经讯号解析度,神经讯号嵌入维度,神经连线组图谱节点数,神经连线组图谱边数,记忆向量嵌入维度,情景记忆记录总数,情感状态表徵维度……
内容未完,下一页继续阅读