机器学习
-
YouTube深度学习推荐模型最全总结
作为全球最大的视频分享网站,YouTube 平台中几乎所有的视频都来自 UGC(User-Generated Content),这样的内容产生模式有两个特点:(1)商业模...
2020-03-26 22:18:14 -
二值神经网络(Binary Neural Networks)最新综述
神经网络二值化能够最大程度地降低模型的存储占用和模型的计算量,将神经网络中原本 32 位浮点数参数量化至 1 位定点数,降低了模型部...
2020-03-26 22:17:00 -
常用 Normalization 方法的总结与思考:BN、LN、IN、
我们将输入的 feature map shape 记为,其中N表示batch size,即N个样本;C表示通道数;H、W分别表示特征图的高度、宽度。这几个方法主要的区别...
2020-03-26 22:16:48 -
浅谈模型压缩之量化、剪枝、权重共享
深度学习模型的应用必然要面对模型压缩的问题,训练出来的原始模型直接放到服务器或终端上跑是不明智的,因为有大量的算力可以省略...
2020-03-26 22:16:39 -
胶囊网络显神威:Google AI和Hinton团队检测到针对
对抗攻击(Adversarial Attack,指的是通过恶意输入欺骗模型的技术)正越来越多地被有quot;防御意识quot;的新攻击打破。实际上,大多数声称检...
2020-03-26 22:16:29 -
二阶梯度优化新崛起,超越 Adam,Transformer 只需一
常见的最优化器,如 Adam、AdaGrad、SGD+Momentum 等,都是一阶的。但是二阶梯度的收敛速度相比它们就快了太多。近日,谷歌研究者联合普林斯...
2020-03-26 22:16:17 -
图神经网络三剑客:GCN、GAT与GraphSAGE
2019 年号称图神经网络元年,在各个领域关于图神经网络的研究爆发式增长。本文主要介绍一下三种常见图神经网络:GCN、GAT 以及 GraphSAGE。...
2020-03-26 22:16:06 -
深度学习预训练模型可解释性概览
近年来预训练模型(ELMo, GPT, BERT, XLNet, ALBERT 等)给许多 NLP 任务带来了显著的改进,但是有一个问题一直困扰着大家:被当做黑盒的神经网...
2020-03-26 22:15:52 -
超越BN和GN!谷歌提出新的归一化层:FRN
目前主流的深度学习模型都会采用BN层(Batch Normalization)来加速模型训练以及提升模型效果,对于CNN模型,BN层已经上成为了标配。但是BN层...
2020-03-26 22:15:08 -
新冠肺炎“识别”战,AI算法落地有多难?
人工智能从来没有像现在这么重要过!这段时间的疫情猛烈,AI每一次在医疗领域的落地都在帮助白衣天使拯救生命。从疫情预测到检测体温...
2020-03-26 22:14:47 -
LSTM之父发文:2010-2020,我眼中的深度学习十年简
在最近十年,大部分AI都是关于长期短期记忆(LSTM)的神经网络。世界本质上是序列性的,而LSTM彻底改变了序列数据处理,例如语音识别、...
2020-03-26 22:13:56 -
搞定千亿参数,训练时间只用1/3,微软全新工具
GPU 显存一直是训练先进深度学习模型的最大瓶颈——大规模训练经常会碰到模型参数太多,显存无法容纳的情况。最近,微软提出的全新方...
2020-03-26 22:13:41 -
微软新作,ImageBERT虽好,千万级数据集才是亮点
继 2018 年谷歌的 BERT 模型获得巨大成功之后,在纯文本之外的任务上也有越来越多的研究人员借鉴了 BERT 的思维,开发出各种语音、视觉、...
2020-03-26 22:13:22 -
机器学习工程师和数据科学家之间的区别
如今,数据科学家的工作已经变得越来越通用,以至于机器学习可能完全包含在其中。...
2020-03-26 22:12:44 -
2020年机器学习领域的五个潮流
机器学习的影响很引人入胜,它引起了许多公司的关注,不管是哪种行业。最重要的是,机器学习真正改变了各行各业的基础,让它们变得...
2020-03-18 23:59:37 -
发布 TensorFlow Quantum:用于量子机器学习的开源库
机器学习(Machine Learning)虽然不能准确地模拟自然界中的系统,但可以学习系统模型并预测系统的行为。在过去的几年中,经典的机器学习...
2020-03-10 17:18:42 -
在云端的优秀机器学习服务
云中的一些优秀机器学习服务可以使用户能够更好地分析数据,并获得新的见解。用户通过云计算访问这些服务在成本和工作时间方面往往...
2020-03-04 22:14:07 -
谷歌刚刚发布了2500万个免费数据集,了解一下
最近,谷歌发布了免费工具datasetsearch,它可以搜索2500万个公开可用的数据集。搜索工具包括过滤器,可基于许可证(免费或付费)、格式(cs...
2020-03-03 23:26:06 -
基于RGB视频数据的深度行为分类模型发展综述之
理解视频中的人体行为在视频监控、自动驾驶以及安全保障等领域有着广泛的应用前景...
2020-02-10 15:39:54 -
深度学习火了那么多年,到底怎么搞?使用Numpy快速入门
人工智能越来越火,甚至成了日常生活无处不在的要素。人工智能是什么?深度学习、机器学习又与人工智能有什么关系?作为开发者如何...
2020-02-06 22:42:16 -
从工具选择到团队沟通,看ML工程师一步步打造生产级机器学习
为了让机器学习为用户带来真正的价值,我们需要将其部署到生产系统中。人工智能销售软件开发公司 Toucan AI 的 ML 工程师 Marifel 介绍了他...
2020-02-06 22:38:12 -
火爆的图机器学习,2020年将有哪些研究趋势?
本文转自雷锋网,如需转载请至雷锋网官网申请授权。 2019年绝对是图机器学习(GML)大火的一年,凡是学术会议,图神经网络的会场总会爆...
2020-02-06 22:35:42 -
请别再把深度学习与机器学习混为一谈了!
【51CTO.com快译】众所周知,虽然同属于人工智能的范畴,但是深度学习是一种特殊的机器学习形式。从流程上说,机器学习和深度学习都是...
2020-02-06 22:34:08 -
构建生产机器学习系统的一些考虑
随着数据和计算能力的崛起,机器学习(ML)和深度学习(deep learning)这两个术语已经热议了好几年。虽然追随ML的潮流似乎很酷,但公司的第一...
2020-02-06 22:32:56 -
如何使用5种机器学习算法对罕见事件进行分类
机器学习是数据科学界的王冠,而监督学习是机器学习界这顶王冠上的宝石。 背景 几年前《哈佛商业评论》发表过一篇题为《数据科学家:...
2020-02-06 22:31:21 -
机器学习是否可以准确预测股市?
自从股市诞生,人们就一直在与这套系统博弈,并试图战胜市场。 多年来,人们尝试了数千项理论和实验,但没有一项能够长久地在股票市...
2020-02-06 22:29:10 -
为什么你觉得Matplotlib用起来困难?因为你还没看过这个思维导图
前言 Matplotlib是一个流行的Python库,可以很容易地用于创建数据可视化。然而,设置数据、参数、图形和绘图在每次执行新项目时都可能变得...
2020-02-06 22:19:15 -
如何找到好的主题模型量化评价指标?这是一份热门方法总结
基于统计学的主题模型诸如 LDA(Latent Dirichlet Allocation),Biterm 的应用使得针对大量文本进行信息的总结提取成为可能。但是提取的主题到底质...
2020-02-06 22:12:43 -
人工智能的下一个拐点:图神经网络迎来快速爆发期
01 GNN:从尝鲜进入快速爆发期 今年以来,图神经网络技术(Graph Neural Network, GNN)得到了学术界极大的关注与响应。各大学术会议纷纷推出 ...
2020-02-06 22:09:23 -
避免神经网络过拟合的5种技术
本文介绍了5种在训练神经网络中避免过拟合的技术。 最近一年我一直致力于深度学习领域。这段时间里,我使用过很多神经网络,比如卷积...
2020-02-06 22:08:08 -
如何在Keras中创建自定义损失函数?
Dhruv Deshmukh 发布在 Unsplash 上的照片 我们使用损失函数来计算一个给定的算法与它所训练的数据的匹配程度。损失计算是基于预测值和实际值...
2020-02-06 22:03:37 -
一文搞懂神经网络
人工智能是这几年非常火的技术,上至九十九下至刚会走都对人工智能或多或少的了解。神经网络是人工智能的核心,也就是说没有神经网...
2020-02-06 21:59:21 -
深度神经网络可解释性方法汇总,附Tensorflow代码实现
理解神经网络:人们一直觉得深度学习可解释性较弱。然而,理解神经网络的研究一直也没有停止过,本文就来介绍几种神经网络的可解释...
2020-02-06 21:57:24 -
一文理清深度学习前馈神经网络
Index 多层感知机(MLP)介绍 深度神经网络的激活函数 深度神经网络的损失函数 多层感知机的反向传播算法 神经网络的训练技巧 深度卷积神...
2020-02-06 21:52:52 -
性能提升25倍:Rust有望取代C和C++,成为机器学习
我们可以花很多时间讨论机器学习开发中使用的各种工作流,但如果说我们通常是以一种 探索性 的方式来训练模型,这通常是没有争议的。...
2020-02-06 21:30:58