跟 LLM 一样，预训练的数据越多，理解的底层模式越多，学习新东西越快。当然，需要持续通过实践来消除幻觉，避免局部过拟合和同真实世界校正，因为无论数据量有多大，跟真实始终无法完全对齐，这个缝隙是永远存在的。学无止境学海无涯…
发布于 广东
散修ZKH
跟 LLM 一样，预训练的数据越多，理解的底层模式越多，学习新东西越快。当然，需要持续通过实践来消除幻觉，避免局部过拟合和同真实世界校正，因为无论数据量有多大，跟真实始终无法完全对齐，这个缝隙是永远存在的。学无止境学海无涯…