DeepSeek v3因为是后发，透顶不错遁藏前东说念主走的坑，用更高效样式避坑，也等于“站在巨东说念主的肩膀上”。真实逻辑应该是：榨干同等算力去掠夺10倍收益。就比如o1的教师本钱远超GPT-4，而o3的教师本钱不祥率远超o1。从前沿探索角度看，教师所需算力只会越来越多。诈骗生态越鼎沸，只会让教师参加的支付才能更强；而算力通缩开yun体育网，只会让同等参加买到更多教师Flops。

　　领先教师归并代模子所需算力每隔N个月等于指数级裁减，这内部有算法跳动、算力自己通缩、数据蒸馏等等要素，这亦然为什么说“模子后发更省力”。征引下星球内一则挑剔：“就好像看过几遍谜底，水平很一般的学生也能在1小时内把高考数学卷整出满分”。 DeepSeek v3因为是后发，透顶不错遁藏前东说念主走的坑，用更高效样式避坑，也等于“站在巨东说念主的肩膀上”。因此幻方在GPT4o发布7个月后，用1/10算力完毕简直同等水平，是合理的，致使不错行为将来对同代模子教师本钱下落速率的展望。但这内部已经有几个认识上的歪曲。

　　领先是“教师”范围上的禁止。幻方的论时髦确诠释了：“上述本钱仅包括DeepSeek-V3 的考究教师，不包括与架构、算法、数据相干的前期照管、消融现实的本钱。” 也等于星球内一位算法工程师说的“有点以文害辞，幻方在训这个模子之前，用了他们我方的r1模子（对标openai o1）来生成数据，这个部分的反复尝试要不要算在本钱里呢？单就在教师上作念降本增效这件事，这不代表需求会下落，只代表大厂不错用性价比更高的样式去作念模子极限才能的探索。诈骗端惟有有增长的逻辑，推理的需求已经是值得期待的。”

　　跟着Ilya说的“公开互联网数据穷尽”，将来合成数据是冲破数据天花板的困难起首，且天花板表面上饱和高。荒谬于畴昔的预教师范式从卷参数、卷数据总量，到了卷数据质料，卷新的Scaling因子（RL、测试时候臆想等），而算力只不外换了个所在，不时被其他教师步调榨干。

　　从现在各大现实室的骨子情况看亦然，OpenAI、Anthropic于今仍处于缺卡情状，服气幻方亦然。看教师算力是否下落，不应该只看某代模子某次教师这种切面，而应该从“总量”以及“从上至下”去看，这些现实室的教师算力总需求是下落了吗？反而一直在飞腾。预教师的经济效益下落，那就把卡挪给RL post train，发现模子完毕同等提高所需卡减少了，那就减少参加了吗？不会，真实逻辑应该是：榨干同等算力去掠夺10倍收益。就比如o1的教师本钱远超GPT-4，而o3的教师本钱不祥率远超o1。从前沿探索角度看，教师所需算力只会越来越多。诈骗生态越鼎沸，只会让教师参加的支付才能更强；而算力通缩，只会让同等参加买到更多教师Flops。

　　就好比幻方此次发布的模子，已经是LLM道路下，将MoE压榨到了极致。但服气幻方我方的推理模子r1（对标o1）也在探索r2/r3，这显着需要更多算力。而r2/r3训完，又被用来消费大批算力为deepseek v4合成数据。发现没，pre-train scaling、RL scaling、test-time compute scaling三条线致使还有正反应。因此，只会在可取得最大资源的前提下，用最高效的算法/工程技艺，压榨出最大的模子才能提高。而不会因为后果提高而减少参加，个东说念主以为这是个伪逻辑。

　　关于推理，不消多说了，一定是飞腾。援用下星球内洪博的挑剔：DeepSeek-V3的出现（可能还包括轻量版V3-Lite），将维持独到部署和自主微调，为卑劣诈骗提供纷乱于闭源模子时期的发展空间。将来一两年，不祥率将见证更丰富的推理芯片居品、更鼎沸的LLM诈骗生态。

　　著作起首：信息平权，原文标题：《教师算力真的下落了吗？》

海量资讯、精确解读，尽在新浪财经APP

包袱剪辑：丁文武 开yun体育网