一直就像学一学深度学习,今年刚好趁着疫情的原因,有了大把时间可以好好研究研究。刚开始我还花了一笔大洋报了一个培训班,之后竟然在公众号上看到百度飞桨PaddlePaddle免费七日训练营的报名推送。抱着有羊毛不薅白不薅的心态,果断报了名。训练营时间是3.3-3.9,今天正好结束,那就把最近学的总结一下。

#学到了啥

其实七天的时间太短了,真要想把深度学习、PaddlePaddle框架完全掌握,真的是不现实。但是在这七天里,让我这个深度学习的小白,还是踏进了深度学习的门:

1、跑demo

七天里,跑了手写数字识别、波士顿房价预测、飞机识别、水果识别、ERNIE情感分析的demo。

paddlenlp uiex PaddleNLP uie训练_深度学习


paddlenlp uiex PaddleNLP uie训练_深度学习_02


2、调参数

有一天的作业是调整模型的参数,使预测集的准确率能够达到80%以上。

模型的训练集Auc能达到99%,测试集刚开始才能达到70%。为了提交测试集的Auc,当时调整了模型的batch(从16到512反复去试)、学习率(0.1-0.0000001)、增加正则项、增加dropout、调整数据提供器reader每次抽取的数据量。最终还是没能把测试集提高到80%,有点遗憾。

paddlenlp uiex PaddleNLP uie训练_深度学习_03