术语/词组 | 解释 |
|---|---|
Heterogeneous systems | 异构系统。指由不同类型计算单元(如CPU、GPU等)组成的计算机系统。TensorFlow专为此设计。 |
Back-propagation | 反向传播。神经网络训练的核心算法,用于计算损失函数对网络权重的梯度。 |
Data generating distribution | 数据生成分布。指假设中产生观测数据的潜在概率分布,是机器学习模型试图逼近的目标。 |
Natural language | 自然语言。指人类使用的语言(如中文、英文),与编程语言相对。 |
Multiple object recognition | 多目标识别。计算机视觉任务,指在一张图像中识别出多个不同物体。 |
Visual attention | 视觉注意力机制。一种模拟人类视觉注意力的技术,使模型能够聚焦于输入图像的关键部分。 |
Conditional computation | 条件计算。一种神经网络优化技术,根据输入数据动态激活网络的不同部分,以提高计算效率。 |
Differentiable sparse coding | 可微稀疏编码。将传统的稀疏编码(一种表示学习方 法)改造成可微分的版本,从而能用梯度下降法进行优化。 |
Latent variable models | 潜变量模型。一类包含未观测变量(潜变量)的统计模型,用于描述观测数据的底层结构。 |
Factor analysis | 因子分析。一种经典的潜变量模型,用于发现观测变量背后的潜在因子。 |
Internal representations | 内部表示。指神经网络中间层学习到的数据表示。 |
Dimensionality reduction | 降维。将高维数据映射到低维空间的技术,旨在保留数据的主要结构。 |
Data representation | 数据表示。数据在计算机中的表示形式,好的表示是机器学习成功的关键。 |
Joint distributions | 联合分布。多个随机变量的概率分布。 |
Sequence prediction | 序列预测。预测序列中下一个或多个元素的任务,常用于语言模型和时间序列分析。 |
Sequence recognition | 序列识别。对序列数据进行分类或识别的任务,如语音识别。 |
Probabilistic language models | 概率语言模型。用概率分布来建模语言(单词序列)的模型。 |
Deep architectures | 深度架构。即深度学习模型,指包含多个隐藏层的神经网络架构。 |
Energy-based models | 基于能量的模型。一类用能量函数来定义概率分布的模型。 |
Boltzmann machines | 玻尔兹曼机。一种基于能量的随机递归神经网络,是深度信念网络的基础。 |
Regularized auto-encoders | 正则化自编码器。一类经过正则化以防止过拟合的自编码器,能学习到有意义的数据表示。 |
Generative stochastic networks(GSNs) | 生成随机网络。一种能学习生成数据的深度生成模型。 |
Hidden Markov models(HMMs) | 隐马尔可夫模型。一种经典的统计模型,用于描述含有未知参数(隐状态)的马尔可夫过程。 |
Principal component analysis(PCA) | 主成分分析。一种经典的线性降维方法。 |
Protein secondary structure prediction | 蛋白质二级结构预测。生物信息学中的一项重要任务,用深度学习预测蛋白质的结构。 |
Laplacian eigenmaps | 拉普拉斯特征映射。一种非线性降维方法,基于图拉普拉斯算子。 |
Stochastic recurrent networks | 随机循环神经网络。内部状态或输出具有随机性的循环神经网络。 |
Variational generative stochastic networks | 变分生成随机网络。结合了变分推断和生成随机网络的模型。 |
Neural machine translation(NMT) | 神经机器翻译。使用端到端神经网络直接进行机器翻译的方法。 |
Recurrent neural networks(RNNs) | 循环神经网络。一类用于处理序列数据的神经网络,具有内部循环连接。 |
Threshold logic | 阈值逻辑。早期神经网络模型(如感知机)的基础,模拟神经元的“激活”或“抑制”状态。 |
TensorFlow | 由Google开发的开源机器学习框架。 |
Theano | 一个早期的开源数值计算库,深度学习的先驱框架之一,已停止开发。 |
VLSI(Very Large-Scale Integration) | 超大规模集成电路。指在单个芯片上集成大量晶体管的技术,与硬件实现相关。 |