向AI转型的程序员都关注了这个号 👇👇👇
人工智能大数据与深度学习 公众号:datayx
我们实现的是歌词的自动生成。 主要看我在代码中的注释。
数据集获取方式
关注微信公众号 datayx 然后回复 歌词 即可获取。
AI项目体验地址 https://loveai.tech
1:我们加载所需要的模块,这里的模块都是比较常用的模块
2:加载数据集,整理汉字和id之间的映射。从我们的txt文件中读取歌词,每一行是一首歌,因为我们的部分歌中含有应为,我们这里也做一个小小的处理,那就是将英文占比比较大的歌扔掉不用。 见下面代码,并给处理了详细的注释:
输出是: 共36616首歌
3:整理汉字与需要的映射关系,并存到本地,因为我们把模型训练好了,拿到其他地方运行,这个映射是不能少的
5:接下来,我们定义模型,这里我们首先接一个Embedding,就是将输入的向量中每个词转为128维的向量,具体原理,参考下这篇博客:https://blog.csdn.net/jiangpeng59/article/details/77533309
6:我们模型最后输出的是所有词作为下一个词的概率,我们不能单纯的取概率最大,我们这里给一个权重,让其多样性
7: 定义一个回调函数,就是让模型每次训练完一轮后,试着去生成一段序列,看看是什么样子
8:训练模型并保存
9:模型训练好,我们试着调用一下以训练好的模型,让其生成文本
最后的输出:
只剩下钢琴被我弹了一曲表演
失去故事的存在重叠入襟
要不是孩子们流浪
谁能放下好吧气
不是因为我不怕孤单
不习惯习惯睡发
街景屠水的泛泛
清流旧枝既渺重交可斟学
时光间两千男生好情可以筹码
又不是不知无限
我感到喧闹太阳下
回来就匆匆忘了
然后觉悟我
至少
我不说说诉
也许我会
甚麽不要分手
爱是寂寞的执着
用我感情谱生音
轻吻着梦的人生瞬间
天高后回想到最后一切
啊 旁条
逛来驾
静静等个黎明我俩如才能够我的承认
孤星和爱更东西
为何落力不怕你出现
生命已给我
夜雨冰凉,你要离我一直跳,在此刻很轻,温茶又笑清似断肠。
独立平庭一直;。 何以朽,因果师岭名掘互相。。 所有
我知道有人会美丽
不肯等 喔喔喔喔
令你救我 爱不爱
却在未了只能说
我不会说的
天未要准新心都是接认会得到爆倍
不介意 脚丫口巧腰都没有
多想关于我们哪个哪有起来的模样
我只好兴奋 我在一起 春天初绽回遨游
过处沙红表远
原文链接https://blog.csdn.net/shawroad88/article/details/89437839
阅读过本文的人还看了以下:
分享《深度学习入门:基于Python的理论与实现》高清中文版PDF+源代码
《21个项目玩转深度学习:基于TensorFlow的实践详解》完整版PDF+附书代码
李沐大神开源《动手学深度学习》,加州伯克利深度学习(2019春)教材
【Keras】完整实现‘交通标志’分类、‘票据’分类两个项目,让你掌握深度学习图像分类
如何利用全新的决策树集成级联结构gcForest做特征工程并打分?
Machine Learning Yearning 中文翻译稿
斯坦福CS230官方指南:CNN、RNN及使用技巧速查(打印收藏)
中科院Kaggle全球文本匹配竞赛华人第1名团队-深度学习与特征工程
不断更新资源
深度学习、机器学习、数据分析、python
搜索公众号添加: datayx
长按图片,识别二维码,点关注
AI项目体验