神经网络常用模型与应用

上手AI的一个捷径就是了解和使用各种网络模型,结合实际场景去打造自己的应用。神经网络模型是人类的共同财富。

神经网络

神经网络可以分为三种主要类型:前馈神经网络、反馈神经网络和图神经网络。

前馈神经⽹络(feedforward neural network)是⼀种简单的神经⽹络,也被称为多层感知机(multi-layer perceptron,简称 MLP),其中不同的神经元属于不同的层,由输⼊层-隐藏层-输出层构成,信号从输⼊层往输出层单向传递,中间无反馈,其目的是为了拟合某个函数,由⼀个有向无环图表示。前馈神经⽹络中包含激活函数(sigmoid 函数、tanh 函数等)、损失函数(均⽅差损失函数、交叉熵损失函数等)、优化算法(BP 算法)等。常⽤的模型结构有:感知机、BP 神经⽹络、全连接神经⽹络、卷积神经⽹络、RBF 神经⽹络等。

反馈神经网络(feedback neural network)的输出不仅与当前输入以及网络权重有关,还和网络之前的输入有关。它是一个有向循环图或是无向图,具有很强的联想记忆能力和优化计算能力。常⽤的模型结构有:RNN、Hopfield⽹络、受限玻尔兹曼机、LSTM 等。

图(graph)是⼀种在拓扑空间内按图结构组织来关系推理的函数集合,包括社交⽹络、知识图谱、分⼦图神经⽹络等。图神经网络通常有以下几种网络模型:图卷积网络、图自编码器、图生成网络、图时空网络、图注意力网络。

图像识别

AlexNet、GoogLeNet、VGG、ResNet、ResNeXt、DenseNet和SENet。

文本分类

Tf-Idf、Word2Vec和BERT。

语音识别

  • ASRT:基于深度学习的中文语音识别系统,采用卷积神经网络(CNN)和连接性时序分类(CTC)方法,使用大量中文语音数据集进行训练,将声音转录为中文拼音
  • DeepSpeechRecognition: 使用CNN+DNN+CNN
  • end2end_chinese_speech_recognition:一个开源小模型
  • Wenet:工业开源落地做的比较成熟的模型
  • whisper:openai的语音模型
  • pycorrector:语音纠错
  • pyttsx3:文本转语音
  • 阿里的Paraformer

参考文献

TODO

相关推荐
AmazingKO25 分钟前
制作像素风《饥荒》类游戏的整体蓝图和流程
人工智能·python·游戏·docker·visual studio code·竹相左边
CV-杨帆28 分钟前
trl的安装与单GPU多GPU测试
人工智能
_一条咸鱼_38 分钟前
AI 大模型的 Prompt Engineering 原理
人工智能·深度学习·面试
huang_xiaoen1 小时前
试一下阿里云新出的mcp服务
人工智能·阿里云·ai·云计算·mcp
Jamence1 小时前
多模态大语言模型arxiv论文略读(二十一)
人工智能·语言模型·自然语言处理
小白学C++.1 小时前
大模型论文:Language Models are Unsupervised Multitask Learners(GPT2)
人工智能·语言模型·自然语言处理
Steve lu1 小时前
PyTorch逻辑回归总结
人工智能·pytorch·python·深度学习·逻辑回归·原力计划
Steve lu2 小时前
pytorch实现逻辑回归
人工智能·pytorch·python·深度学习·机器学习·自然语言处理·逻辑回归
xcSpark2 小时前
Python基础入门(二)
开发语言·人工智能·python
驼驼学编程2 小时前
目标检测与分割:深度学习在视觉中的应用
人工智能·深度学习·目标检测·计算机视觉