可思数据-人工智能媒体资讯平台!可思数据-人工智能媒体资讯平台!

数据采集标注
  • 新冠肺炎“识别”战,AI算法落地有多难?

    日期:2024-09-18 09:41:27 点击:109

    人工智能从来没有像现在这么重要过!这段时间的疫情猛烈,AI每一次在医疗领域的落地都在帮助白衣天使拯救生命。从疫情预测到检测体温再到药物开发,人工智能争分夺秒,蓄势待发...

  • 2021年进入AI和ML领域之前需要了解的10件事

    日期:2021-05-01 21:44:35 点击:144

    用新奇的人工智能算法解决复杂的问题,再加上一份不错的薪水,听起来很有吸引力。很多公司都加入了宣传的行列,现在提供在不到一年的时间里学习数据科学/AI/ML的新兵训练营。在...

  • Facebook新AI模型SEER实现自监督学习,LeCun大赞最有

    日期:2021-04-16 22:02:58 点击:19

    无需标签,自我分析数据!Facebook的新AI模型在革计算机视觉的命?刚刚,Facebook宣布了一个在10亿张图片上训练的AI模型——SEER,是自监督(Self-supervised)的缩写。该模型包含10亿个参数...

  • 来自Facebook AI的多任务多模态的统一Transformer:向

    日期:2021-04-16 22:02:49 点击:16

    Transformer架构在自然语言处理和其他领域的机器学习(ML)任务中表现出了巨大的成功,但大多仅限于单个领域或特定的多模态领域的任务。例如,ViT专门用于视觉相关的任务,BERT专注于语...

  • 一文详解深度学习最常用的 10 个激活函数

    日期:2021-04-16 22:02:39 点击:14

    激活函数(Activation Function)是一种添加到人工神经网络中的函数,旨在帮助网络学习数据中的复杂模式。类似于人类大脑中基于神经元的模型,激活函数最终决定了要发射给下一个神经...

  • 增量学习(Incremental Learning)小综述

    日期:2021-04-16 22:02:29 点击:20

    人类有终身不断获取、调整和转移知识的能力,虽然在我们的一生中,我们确实倾向于逐渐忘记之前学习过的知识,但只有在极少的情况下,对新知识的学习会灾难性地影响已经学到的...

  • 更深、更轻量级的Transformer!Facebook提出:DeLigh

    日期:2021-04-16 22:02:13 点击:22

    本文提出了一个更深更轻量的Transformer,DeLighT,DeLighT更有效地在每个Transformer Block中分配参数:1)、使用DeLighT转换进行深度和轻量级的转换;2)、使用Block-wise Scaling进行跨Block,允许在输...

  • 盘点近期大热对比学习模型:MoCo/SimCLR/BYOL/SimSi

    日期:2021-04-16 22:01:59 点击:21

    很多大佬认为,深度学习的本质就是做两件事情:Representation Learning(表示学习)和 Inductive Bias Learning(归纳偏好学习)。在表示学习方面,如果直接对语义进行监督学习,虽然表现很好...

  • AAAI21最佳论文Informer:效果远超Transformer的长序列

    日期:2021-04-16 22:01:35 点击:13

    在很多实际应用问题中,我们需要对长序列时间序列进行预测,例如用电使用规划。长序列时间序列预测(LSTF)要求模型具有很高的预测能力,即能够有效地捕捉输出和输入之间精确的...

  • 深度学习中的3个秘密:集成、知识蒸馏和蒸馏

    日期:2021-04-16 22:01:21 点击:11

    在现在的标准技术下,例如过参数化、batch-normalization和添加残差连接,“现代”神经网络训练 —— 至少对于图像分类任务和许多其他任务来说 —— 通常是相当稳定的。使用标准的神经...

  • 让研究人员绞尽脑汁的Transformer位置编码

    日期:2021-04-16 22:01:11 点击:15

    不同于RNN、CNN等模型,对于Transformer模型来说,位置编码的加入是必不可少的,因为纯粹的Attention模块是无法捕捉输入顺序的,即无法区分不同位置的Token。为此我们大体有两个选择:...

  • 【模型压缩】深度卷积网络的剪枝和加速

    日期:2021-04-16 22:00:52 点击:19

    记录一下去年12月份实验室的一个工作:模型的剪枝压缩,虽然模型是基于yolov3的魔改,但是剪枝的对象还是CBL层(即Conv Layer + BN Layer + LeakyReLU Layer),主要分布在Darknet骨干网中,因此...

  • 堪比当年的LSTM,Transformer引燃机器学习圈:它是

    日期:2021-04-16 22:00:41 点击:14

    谷歌研究科学家 David Ha:Transformer 是新的 LSTM。2017 年 6 月谷歌发布论文《Attention is All You Need》时,我们或许都没有意识到它提出的 Transformer 架构将带来多少惊喜。在诞生至今不足四年...

  • 深度学习三大谜团:集成、知识蒸馏和自蒸馏

    日期:2021-04-16 22:00:30 点击:8

    集成(Ensemble,又称模型平均)是一种「古老」而强大的方法。只需要对同一个训练数据集上,几个独立训练的神经网络的输出,简单地求平均,便可以获得比原有模型更高的性能。甚至...

  • Transformer又又来了,生成配有音乐的丝滑3D舞蹈,

    日期:2021-04-16 22:00:00 点击:14

    来自谷歌等单位的学者提出一个基于 transformer 的学习框架,用于以音乐为条件的3D舞蹈生成。设计了一个全新的网络框架,并验证得出获得高质量结果的关键。其中组件之一是深度跨模...

  • Transformer为何能闯入CV界秒杀CNN?

    日期:2021-04-16 21:59:31 点击:11

    在自然语言处理领域中,一个重要的技术基础就是创建合理的Embedding。Embedding是NLP系统的根基,一个好的Embedding需要能够将原始文本中尽可能多的语义片段进行有效编码。这些语义信息...

  • 加快PyTorch训练速度!掌握这17种方法,让你省时

    日期:2021-04-05 23:50:19 点击:31

    近日,Reddit 上一个帖子热度爆表。主题内容是关于怎样加速 PyTorch 训练。原文作者是来自苏黎世联邦理工学院的计算机科学硕士生 LORENZ KUHN,文章向我们介绍了在使用 PyTorch 训练深度模...

  • 论机器学习领域的内卷:不读PhD,我配不配找工

    日期:2021-04-03 20:18:38 点击:11

    机器学习内卷了吗?「没有博士学位,在机器学习领域就业会变得越来越难吗?」最近,一个 Reddit 热帖引发了大量讨论。对于单个研究者、从业者来说,毫无疑问,机器学习领域确实「...

  • 服务器CPU将进入SoC时代!初创公司NUVIA揭秘

    日期:2021-04-03 20:18:29 点击:13

    高通于美国时间1月13日宣布,将以14亿美元收购由前苹果员工创办的CPU设计初创公司Nuvia,在芯片领域继续和竞争对手苹果与英特尔正面交锋。高通称,Nuvia在CPU设计领域的专业知识,有...

  • 世界最大、最复杂的GPU!这颗集成1000亿个晶体管

    日期:2021-04-03 20:18:15 点击:17

    英特尔于昨日举办了直播活动,新上任的 CEO 帕特·基辛格(Pat Gelsinger) 发表了演讲,并展示了采用 7nm 工艺的 Xe-HPC 高性能 GPU,代号 “Ponte Vecchio”。这款产品封装了 47 个芯片,总计超...

  • ASML分享光刻机最新路线图,1.5nm指日可待

    日期:2021-04-03 20:17:56 点击:20

    在2月举行的SPIE高级光刻会议上,ASML展示了有关其深紫外线(DUV)和极紫外线(EUV)曝光系统的最新信息。笔者最近采访了ASML的Mike Lercel,就这些演示文稿进行了深入讨论。尽管EUV得到...

  • 处理器架构消亡史

    日期:2021-04-03 20:17:44 点击:10

    新兴市场的到来对处理器提出了新的要求,处理器架构也随之发生着变化,主流处理器架构市场的变化也引起了行业的关注。最近,MIPS就成为了处理器架构变革潮流中的话题主角——...

  • 通用处理器走向衰亡?

    日期:2021-04-03 20:17:29 点击:4

    早期-从专用到通用。早期的电子产品并不是可以执行许多不同计算的通用计算机,而是专用于完成一项任务且仅有一项任务的专用设备,例如收音机或电视机。这种专用的设备具有以下...

  • GPT-2大战GPT-3:OpenAI内部的一场终极对决

    日期:2021-04-03 20:17:06 点击:11

    生成式预训练 Transformer(GPT)是 OpenAI 开发在自然语言处理(NLP)领域的创新之举。这些模型被认为是同类模型中最先进的,甚至在坏人手中也可能是很危险的。它是一种无监督的生成模...

  • 光刻机技术到底是谁发明的?

    日期:2021-03-10 22:43:29 点击:147

    在集成电路的制造过程中,有一个重要的环节——光刻,正因为有了它,我们才能在微小的芯片上实现功能。现代光刻技术可以追溯到190年以前,1822年法国人Nicephore niepce在各种材料光照...

  • ​“狂欢”的半导体设备

    日期:2021-03-10 22:43:20 点击:15

    在2020这不平凡的一年里,在经历冠状病毒病大流行、全球经济衰退及贸易局势紧张等史无前例的挑战后,国际半导体设备大厂们似乎都平稳的渡过了。而在接下来的日子里,属于半导体...

  • ASML真的那么强大吗?

    日期:2021-03-10 22:43:11 点击:8

    数据显示,EUV光刻机收入占ASML收入的百分比从2016年的7%增加到2020年的45%。预计到2023年,ASML公司的EUV光刻机带来的收入将比2020年的收入翻一番。根据我们题为“ Sub 100nm光刻:市场分...

  • 芯片自主可控深度解析

    日期:2021-03-10 22:42:55 点击:7

    如果有人跟你说:“嗨,我做的芯片实现了100%自主可控!”等等,你先不急着崇拜(相信)他,请看完此文再说...首先,什么叫自主可控,最直观的理解就是当别人“卡脖子”的时候不...

  • MIPS 投敌,转向 RISC-V

    日期:2021-03-10 22:40:44 点击:16

    MIPS Technologies 正在转变其商业模式。该公司将不再设计 MIPS 芯片,而将开发基于 RISC-V 架构的处理器。MIPS Technologies 成立于 1984 年,并于一年后推出了首个 MIPS 指令集。该公司以简洁高效...

  • Facebook新AI模型SEER实现自监督学习,LeCun大赞最有

    日期:2021-03-10 22:40:34 点击:19

    无需标签,自我分析数据!Facebook的新AI模型在革计算机视觉的命?刚刚,Facebook宣布了一个在10亿张图片上训练的AI模型——SEER,是自监督(Self-supervised)的缩写。该模型包含10亿个参数...

  • 这些语言习惯,可能是分手征兆?

    日期:2021-03-10 22:36:29 点击:13

    分手从来不是一件突如其来的事情,即使一个人对此毫无防备,但另一个人却已经计划分手几个星期了,会逐渐拉开自己和对象的距离。而在这一过程中的语言变化还涉及了相当多的大...

  • 来自Facebook AI的多任务多模态的统一Transformer:向

    日期:2021-03-10 22:36:19 点击:85

    Transformer架构在自然语言处理和其他领域的机器学习(ML)任务中表现出了巨大的成功,但大多仅限于单个领域或特定的多模态领域的任务。例如,ViT专门用于视觉相关的任务,BERT专注于语...

  • 当推荐遇到冷启动

    日期:2021-03-10 22:36:08 点击:5

    冷启动问题,大家并不陌生。但是如何解决呢?加特征,加样本,加图谱,加规则?十方在做信息流广告推荐时,主要通过加一些泛化特征解决冷启动问题,但是这样并不一定是最好的...

  • 巨头竞逐Chiplet

    日期:2021-03-10 22:35:54 点击:3

    通过连接由单独的晶圆制造的芯片,形成具有某一功能的SoC技术就是“Chiplet”的概念。那么,为什么“Chiplet”越来越重要呢?其原因在于尖端半导体需要处理的数据量成指数级增长。由...

  • 一文详解深度学习最常用的 10 个激活函数

    日期:2021-03-10 22:35:32 点击:4

    激活函数(Activation Function)是一种添加到人工神经网络中的函数,旨在帮助网络学习数据中的复杂模式。类似于人类大脑中基于神经元的模型,激活函数最终决定了要发射给下一个神经...

  • 人工智能十年回顾:CNN、AlphaGo、GAN……它们曾这

    日期:2021-03-10 22:02:45 点击:34

    过去十年间,人工智能技术突飞猛进,最疯狂的科幻小说场景现在已经成为我们生活中不可或缺的一部分。十年前,人们在谈论 AI 的理论化和实验,但这些年来,AI 变得更加切实了,也...

  • Hinton:我终于想明白大脑怎么工作了!神经学家

    日期:2021-03-10 22:02:24 点击:6

    若干年来,大脑的工作原理让AI研究者们前赴后继,而横亘在人工智能网络和大脑工作原理之间的,就是反向传播算法。反向传播是深度学习不可或缺的一部分。正是因为反向传播算法,...

  • 增量学习(Incremental Learning)小综述

    日期:2021-02-24 22:43:33 点击:28

    人类有终身不断获取、调整和转移知识的能力,虽然在我们的一生中,我们确实倾向于逐渐忘记之前学习过的知识,但只有在极少的情况下,对新知识的学习会灾难性地影响已经学到的...

  • Google的『泛芯片』科技蓝图

    日期:2021-02-24 22:43:22 点击:24

    Google自研芯片已经有几年时间,Jeff Dean也已经是芯片顶会邀请的常客。2020年的Hotchips,Dan Belov(DeepMind)的keynote,阐述了Google对未来AI系统和芯片的看法,和来自Intel的keynote是完全不同的思...

  • 抵近作战:DARPA启动“远射”无人机项目设计工作

    日期:2021-02-24 22:43:10 点击:35

    2月8日,美国国防高级研究计划局(DARPA)通过官网宣布,将“远射”(LongShot)项目第一阶段初步设计工作合同授予通用原子、洛克希德·马丁和诺斯罗普·格鲁曼三家公司,用以研制一...

  • Attention!当推荐系统遇见注意力机制

    日期:2021-02-24 22:43:00 点击:26

    当注意力机制都已经变成很tasteless的手法的时候,使用或者魔改注意力机制一定要专注讲好自己的故事:即『为什么要用Attention,为什么要魔改Attention』。现阶段从传统的CF,FM等方法到...

  • 更深、更轻量级的Transformer!Facebook提出:DeLigh

    日期:2021-02-24 22:42:44 点击:17

    本文提出了一个更深更轻量的Transformer,DeLighT,DeLighT更有效地在每个Transformer Block中分配参数:1)、使用DeLighT转换进行深度和轻量级的转换;2)、使用Block-wise Scaling进行跨Block,允许在输...

  • 盘点近期大热对比学习模型:MoCo/SimCLR/BYOL/SimSi

    日期:2021-02-24 22:42:30 点击:26

    很多大佬认为,深度学习的本质就是做两件事情:Representation Learning(表示学习)和 Inductive Bias Learning(归纳偏好学习)。在表示学习方面,如果直接对语义进行监督学习,虽然表现很好...

  • AI已能求解微分方程,数学是这样一步步“沦陷”

    日期:2021-02-24 22:42:16 点击:33

    首先,先得说明,所谓的AI解方程,解的可不是简单的数值方程!人家正经求解的是面对实际工程问题的偏微分方程,又称PDE。N-S方程已经被大量的应用在天气预测、洋流建模、飞行器设...

  • 龙泉寺贤超法师:用 AI 为古籍经书识别、断句、

    日期:2021-02-24 22:41:49 点击:6

    坐落在京郊凤凰岭脚下的龙泉寺,称得上全国甚至全球科研实力最强的佛教寺庙。凭借当年学诚法师的一句「佛教是古老的,但佛教徒是现代的」,推动了龙泉寺里的高僧们搞科研、写...

  • 每年节省170万美元的文档预览费用,借助机器学

    日期:2021-02-24 22:41:37 点击:16

    最近,Dropbox 优化了生成和缓存文档预览的方式,并借助机器学习的预测能力,每年为公司节省了 170 万美元的基础架构成本。Dropbox 的一些常用功能都采用了机器学习,例如搜索、文件...

  • 4纳米来了!全球首款10Gbps!高通发布第四代5G 骁

    日期:2021-02-24 22:41:22 点击:19

    2021年2月9日,高通宣布正式推出第4代5G调制解调器到天线的解决方案骁龙X65。这也是全球首个支持10Gbps 5G速率和首个符合3GPP Release 16规范的调制解调器及射频系统。此外,骁龙X65还支持...

  • 手机芯片六巨头的并购史

    日期:2021-02-24 21:48:40 点击:3

    大浪淘沙,如今全球手机芯片市场的供应商几乎只剩6家,分别是苹果、高通、联发科、华为、展锐、三星。大的变化可能大概率不会发生,偶见联发科超越高通登上2020年第三季度智能手...

  • 模仿人脑视觉处理,助力神经网络应对对抗性样本

    日期:2021-02-18 22:32:20 点击:209

    自从深度学习只能识别支票和信封上的手写字母以来,它已经取得了长足的进步。今天,深度神经网络已经成为许多计算机视觉应用的关键组成部分,从照片和视频编辑器到医疗软件和...

  • 神经网络背后的简单数学

    日期:2021-02-18 22:31:13 点击:168

    Image by Alina Grubnyak on Unsplash 神经网络是将数据映射到信息的通用逼近器。这是什么意思?神经网络可以解决任何问题吗?神经网络是一种经过验证的解决方案,可用于按场景/逐帧分析,股...

  • 准备好了吗?GNN 图神经网络 2021 年的5大应用热点

    日期:2021-02-18 22:26:48 点击:115

    今年开始。图神经网络(Graph Neural Networks)成为研究者讨论的焦点,作为该领域的研究人员,我甚是欣慰。记得大概三年前,图神经网络那时还受到冷落,当我和研究GAN和Transformers的同行...

  • 机器学习基础图表:概念、原理、历史、趋势和算法

    日期:2021-02-18 22:25:07 点击:154

    一、机器学习概览 1. 什么是机器学习? 机器通过分析大量数据来进行学习。比如说,不需要通过编程来识别猫或人脸,它们可以通过使用图片来进行训练,从而归纳和识别特定的目标...

  • 分析了 600 多种烘焙配方,机器学习开发出新品

    日期:2021-02-18 22:21:22 点击:144

    世界上的各色美食中,烘焙食品一直都占据着重要的地位。松软的面包、细腻的蛋糕、酥脆的饼干,都让人无法拒绝。 烘焙不仅是一项烹饪技术,更像是一门艺术。将面粉、鸡蛋、奶油...

  • 2021年的机器学习生命周期

    日期:2021-02-18 22:18:20 点击:78

    您实际上是如何完成一个机器学习项目的?有哪些工具可以帮助完成每一步? Photo by Tolga Ulkan on Unsplash 在这个时代,每个人都在学习机器学习(ML)。似乎每个收集数据的公司都在尝试找出某...

  • 物联网和机器学习促进企业业务发展的5种方式

    日期:2021-02-18 22:17:09 点击:189

    物联网和机器学习是当今商业领域最具颠覆性的两项技术。另外,这两种创新都能给任何公司带来显著的好处。它们一起可以彻底改变企业业务。 物联网设备和机器学习的结合是一个自...

  • 20年以后,半数工作将被人工智能取代?这些“高危行业”有哪些

    日期:2021-02-18 22:16:09 点击:166

    《机械公敌》是菜菜小时候特别喜欢的一部电影,放在现在来看也是毫不过时。小时候看电影只是看个画面,被机器人的强大所震撼,画面精彩就行了,根本不会去想更深层次的问题。...

  • 机器学习中分类任务的常用评估指标和Python代码实现

    日期:2021-02-18 22:13:29 点击:72

    假设您的任务是训练ML模型,以将数据点分类为一定数量的预定义类。 一旦完成分类模型的构建,下一个任务就是评估其性能。 有许多指标可以帮助您根据用例进行操作。 在此文章中...

  • 机器学习和深度学习的区别是什么?

    日期:2021-02-18 22:11:17 点击:76

    深度学习是机器学习算法的子类,其特殊性是有更高的复杂度。因此,深度学习属于机器学习,但它们绝对不是相反的概念。我们将浅层学习称为不是深层的那些机器学习技术。 让我们...

数据采集标注
最近关注
热点内容
热点图文