项目地址:https://top.aibase.com/tool/dreamtalk
生成式AI占据着2023年诸多头条新闻，2024年大概也会如此。
6. Transformer架构的替代方案将得到真正的采用。
DeWave的训练流程主要分为三个阶段:1）自监督编码器预训练（仅原始EEG脑磁波)，这一阶段会先训练一个脑电波自编码模型，输入原始EEG波形，通过重建实现自监督。这样可以提取有用的时域和频域特征。
这个项目的开源意味着更多的开发者和研究人员可以使用这项技术，为其添加新的功能或者进行改进。DreamTalk的开源将为语音合成技术的发展带来新的动力。