suspend 在 大家知道OpenAI的luna模型参数量大概多大吗 中发帖

据说Sol和Opus参数量大概2T,模型各种任务都能做的很好,但是luna这样的小模型在编码榜单分数也不低,像qwen3-27b分数就很高,但是模型参数太小了,知识受限理解问题的视角就很窄,这点从国产模型和opus/sol的使用上可以体会出来。 
所以大家也不想用像qwen3-27b这种在编程领域特化的小模型,qwen这个不是moe模型,但OpenAI的luna应该是moe模型,有一些杂七杂八的日常任务要处理,用量不小,一些中转站提供0.2或0.3倍率的luna还是挺想试一试的
 
 
Back to Top