3月开始,我司审稿组分成多个小组,并行微调三个模型,今天之前的两三周 踩了各种坑 排查了各种问题,始终没调成功
结果今天一天全齐活了
上午 apple把llama2 70B调通,5K数据
下午 不染把mixtral 8x7B调通,1.5K数据
晚上 鸿飞把Mistral instruct 0.2调通,1.5K数据
接下来,都会用15K数据再调一下
发布于 湖南
3月开始,我司审稿组分成多个小组,并行微调三个模型,今天之前的两三周 踩了各种坑 排查了各种问题,始终没调成功
结果今天一天全齐活了
上午 apple把llama2 70B调通,5K数据
下午 不染把mixtral 8x7B调通,1.5K数据
晚上 鸿飞把Mistral instruct 0.2调通,1.5K数据
接下来,都会用15K数据再调一下