MaggicQ's Blog

路漫漫其修远兮

文本摘要简述

本文目录 文本摘要 分类 评价指标 数据集 抽取式摘要 传统方法 Lead-3 TextRank 聚类 基于深度学习的方...

文本表示模型

本文目录 文本表示模型 词袋模型 N-gram模型 主题模型 潜在语义分析(Latent Semantic Analysis) 概率潜在语义分析(Probabilistic Latent Semantic Analysis) 隐狄利克雷模型(Latent Dirich...

注意力机制

本文目录 注意力机制 分类 计算流程 应用 指针网络 自注意力模型 Transformer 参考 注意力机制 根据通用近似定理,前馈网络和循环网络都有很强的能力。但由于优化算法和计算能力的限制,在实践中...

集成学习

本文目录 集成学习 Boosting Adaboost 梯度提升决策树 Bagging 随机森林 结合策略 平均法 投票法 ...

优化算法

本文目录 常见优化算法 常见损失函数 0-1损失函数 Hinge损失函数 Logistic损失函数 交叉熵损失函数 平方损失函数与绝对损失函数 梯度下降法 牛顿法和拟牛顿法 EM算法 ...

经典分类算法

本文目录 经典分类算法 感知机 K-近邻算法 朴素贝叶斯 数学推导 参数估计 支持向量机 原理 要点 拓展 ...

降维算法

本文目录 降维算法 主成分分析 基于最大可分性的推导 核化线性降维 线性判别分析 数学原理 PCA与LDA的比较 降维算法 机器学习中的降维就是指通过某种数学变换,将原...

特征工程与模型评估

本文目录 特征工程 为什么需要对数值类型的特征做归一化? 常用的归一化方法有哪些? 归一化和标准化的区别? 在对数据进行预处理的时候,怎么处理类别型特征? 什么是组合特征?如何处理高维组合特征? 怎么有效地找到组合特征 都有哪些文本表示模型?他们各有什么优缺点? 在图像分类任务中,训...

神经网络基础

本文目录 神经网络 神经元模型 感知机和多层网络 误差逆传播算法 神经网络的训练技巧 Dropout Batch Normalization 常用激活函数 Sigmoid激活函数 ...

潜在语义分析

本文目录 潜在语义分析(Latent Semantic Analysis) 参考 潜在语义分析(Latent Semantic Analysis) 传统向量空间模型使用精确的词匹配,即精确匹配用户输入的词与向量空间中存在的词。由于一词多义(polysemy)和一义多词(synonymy)的存在,使得该模型无法提供给用户语义层面的检索。比如用户搜索”automobile”,即汽...