强化学习先驱Richard Sutton:将开发新型计算智能体(2022-09-01)
【摘要】 8月31日,机器之心网讯,DeepMind和阿尔伯塔大学联合成立的人工智能实验室未来几年要研究什么?2017年,DeepMind在加拿大的Edmonton成立了其首个英国之外的人工智能研究实验室,并和阿尔伯塔大学大学紧密合作,成立了「DeepMindAlberta」,由强化学习先驱RichardS.Sutton、阿尔伯塔大学教授MichaelH.Bowling、助理教授PatrickM.Pilarski领导。现在,三位领导者联合发表论文阐述DeepMindAlberta在未来一段时间内关于人工智能的...
【关键词】计算,智能,长期规划
英特尔透露3D芯片细节:能堆千亿晶体管,计划2023上市(2022-09-01)
【摘要】 8月31日,机器之心网讯,计算机芯片正式进入三维时代。3D堆叠芯片是英特尔挑战摩尔定律的新方向,它可以将芯片中的逻辑组件堆叠起来,大幅提升CPU、GPU及AI处理器的密度。在芯片制程工艺接近停滞的今天,或许只有这种方法才能继续提高性能。近日,英特尔在半导体行业会议HotChips34上展示了关于3DFoveros芯片设计的新细节,它将用于即将发布的MeteorLake、ArrowLake和LunarLake芯片。最近有传言称,英特尔的MeteorLake将推迟上...
【关键词】英特尔,3D,芯片
消费级GPU成功运行1760亿参数大模型(2022-08-31)
【摘要】 8月31日,机器之心网讯,在消费级GPU上运行大规模模型是机器学习社区正面临的挑战。语言模型的规模一直在变大,PaLM有540B参数,OPT、GPT-3和BLOOM有大约176B参数,模型还在朝着更大的方向发展。这些模型很难在易于访问的设备上运行。例如,BLOOM-176B需要在8个80GBA100GPU(每个约15000美元)上运行才能完成推理任务,而微调BLOOM-176B则需要72个这样的GPU。PaLM等更大的模型将需要更多的资源。BLOOM是去年由1000多名志愿研究...
【关键词】模型,设备,GPU
阿里达摩院获KDD 2022最佳论文,国内企业首次获奖(2022-08-31)
【摘要】 8月31日,机器之心网讯,8月18日,全球数据挖掘领域顶级会议 KDD 2022 大奖公布,阿里巴巴达摩院团队斩获应用科学方向“最佳论文奖”,这是中国企业首次获得该重磅奖项。KDD(ACM SIGKDD)是数据挖掘领域历史最悠久、规模最大的国际顶级学术会议,也是全球录取率最低的计算机顶会之一,在知识发现、数据挖掘、人工智能等领域具有重大影响力。KDD 组委会对达摩院获奖的联邦图学习开源工作 FederatedScope-GNN 给予充分肯定,评...
【关键词】数据挖掘,人工智能,KDD
物理学家使用人工智能来寻找迄今为止最复杂的蛋白质结(2022-07-29)
【摘要】 7月29日,机器之心网讯,美因茨约翰内斯古腾堡大学(JGU)的研究团队专注于具有高置信度分数的子集,研究人员通过算法分析这些预测,发现蛋白质骨架表现出罕见的拓扑复杂性,即打结。其中,研究人员发现了一个 71-结,这是迄今为止在蛋白质中发现的最复杂的拓扑结,以及几个由两个甲基转移酶或碳酸酐酶结构域组成的六交叉复合结,每个结构域都包含一个简单的三叶结。这些深深嵌入的复合结显然是通过基因复制和打结二聚体的相互...
【关键词】人工智能,AlphaFold,三维结构
全球首款超过200层固态存储芯片问世:密度提升43%,性能翻倍(2022-07-29)
【摘要】 7月29日,机器之心网讯,存储芯片大厂美光(Micron)近日宣布,其232层NAND闪存芯片已实现量产。这也是全球首款突破200层大关的固态存储芯片。一些竞争对手目前正在提供176层技术,有些厂商表示他们正在紧随此步伐,或者已经有了超过200层的工程样品。与竞争对手的芯片相比,全新美光技术将每单位面积存储的比特密度增加了一倍,每平方毫米封装14.6Gbit。这一密度相比自家的176LNAND提升了约43%,比竞争对手的TLC产品高35%到10...
【关键词】美光,业界最高,固态存储
对标Copilot,国内首个:自然语言一键生成方法级代码aiXcoder XL来了(2022-07-29)
【摘要】 7月29日,机器之心网讯,智能编程机器人提供商aiXcoder宣布推出「支持方法级代码自动生成」的深度学习代码生成模型——aiXcoderXL,该模型是国内首个能够根据开发者给出的“自然语言描述”一键生成“完整方法级代码”的智能编程应用。伴随AI和大数据技术应用的深入,软件行业也正迎来自己的“智能化变革”,AI技术也开始在软件开发中发挥作用。该成果的诞生受到了鹏城实验室(中国)和百度飞桨深度学习框架的大力支持,是国内...
【关键词】智能,编程,机器人
思图场景蝉联表情国际挑战赛冠军(2022-07-29)
【摘要】 7月29日,机器之心网讯,近日,在世界三大顶级计算机视觉会议之一的ECCV大会上,第四届人脸表情国际挑战赛(The 4rd Workshop and Competition on Affective Behavior Analysis in-the-wild ,简称ABAW)公布了比赛结果,思图场景以大比分胜出,在多任务表情识别国际挑战赛中夺得冠军。这是思图场景第二次夺得ABAW挑战赛冠军,同时参赛的还有全球众多人工智能学术及研究机构,展现了其在情感计算领域深厚的技术实力。本届竞赛...
【关键词】ECCV,ICCV,CVPR
首个大众可用PyTorch版AlphaFold2复现,哥大开源OpenFold,star量破千(2022-06-30)
【摘要】 6月30日,机器之心网讯,AlphaFold2是2021年AIforScience领域最耀眼的一颗星。现在,有人在PyTorch中复现了它,并已在GitHub上开源。这一复现在性能上媲美原版AlphaFold2,且在算力、存储方面的要求对于大众来说更加友好。哥伦比亚大学系统生物学助理教授MohammedAlQuraishi在推特上宣布,他们从头训练了一个名为OpenFold的模型,该模型是AlphaFold2的可训练PyTorch复现版本。MohammedAlQuraishi还表示,这是第一个大众可用的A...
【关键词】哥伦比亚,系统,生物学
Nature刊登量子计算重大进展:有史以来第一个量子集成电路实现(2022-06-30)
【摘要】 6月30日,机器之心网讯,澳大利亚量子计算公司 SQC(Silicon Quantum Computing)宣布推出世界上第一个量子集成电路。这是一个包含经典计算机芯片上所有基本组件的电路,但体量是在量子尺度上。SQC 团队使用这种量子处理器准确地模拟了一个有机聚乙炔分子的量子态——最终证明了新量子系统建模技术的有效性。这是一个重大突破,SQC 创始人 Michelle Simmons 说道。由于原子之间可能存在大量相互作用,如今的经典计算机甚至难以...
【关键词】澳大利亚,量子计算,SQC
二十多年来中国首次,CVPR最佳学生论文授予同济阿里(2022-06-30)
【摘要】 6月30日,机器之心网讯,全球人工智能领域最具影响力的大会CVPR近日宣布,将2022年“最佳学生论文”奖颁给同济大学研二学生陈涵晟等人,这是二十多年来首次有中国高校学生获此殊荣。该论文是陈涵晟在阿里达摩院实习期间的成果,融合了传统几何推理和深度学习,提出了计算3D物体位姿的新方法,能从单张图片计算出3D物体在真实世界里的位置和朝向,有望成为自动驾驶、机器人等技术发展的理论动力。CVPR(国际计算机视觉与模式识...
【关键词】自动驾驶,机器人,理论动力
火山引擎获国际深度学习图像压缩挑战赛视频赛道冠军(2022-06-30)
【摘要】 6月30日,机器之心网讯,近日,第五届深度学习图像压缩挑战赛(以下将简称“CLIC大赛”)比赛结果公布,首次参赛的火山引擎多媒体实验室夺得视频压缩赛道第一名。CLIC大赛由电气与电子工程师协会IEEE主办,是机器视觉与人工智能领域全球顶级的学术会议CVPR的一部分。自2018年举办首届以来,CLIC大赛获得了学术界与工业界的广泛关注。压缩技术对于图像、视频应用十分重要。一部未经压缩的90分钟、1080P的电影,...
【关键词】CLIC,大赛,传输
阿里创新三维算法,可将3D地图压缩250倍以上(2022-05-30)
【摘要】 5月30日,机器之心网讯,5月20日消息,阿里巴巴达摩院XR实验室提出新的三维定位地图压缩算法,在保证视觉定位精度的前提下将地图压缩250多倍,使之可存储于手机等端侧设备。相关论文被计算机视觉顶会CVPR 2022收录。据悉,该实验室持续优化自研三维算法,在建图、定位等核心技术模块屡有创新,多个论文成果先后被国际顶会收录。3D视觉定位是沉浸式互联网的核心技术之一。标准的3D视觉定位方法需提前构建特定场景的3D地图,使之...
【关键词】存储,手机,端侧设备
Nature子刊:科学家在类脑芯片上实现类似LSTM的功能,能效高1000倍(2022-05-30)
【摘要】 5月30日,机器之心网讯,格拉茨技术大学的计算机科学家在Nature子刊上发表的一篇论文表明,他们找到了一种在神经形态芯片上模拟LSTM的方案,可以让类脑神经形态芯片上的AI算法能效提高约1000倍。随着智能手机的普及,手机游戏也越来越受欢迎。但视频游戏等程序会大量耗电耗能。与GPU等标准硬件相比,基于spike的神经形态芯片有望实现更节能的深度神经网络(DNN)。但这需要我们理解如何在基于event的稀疏触发机制(sparsefirin...
【关键词】Spike,神经形态,芯片
机器学习指导催化剂设计,提高反应的产率(2022-05-30)
【摘要】 5月30日,机器之心网讯,准确识别催化活性的描述符对深入理解催化作用,以及为催化剂筛选奠定基础至关重要。然而,常用方法的可预测性和准确性低。近日,美国纽约州立大学石溪分校(SUNY SB)和布鲁克海文国家实验室(BNL)的化学家开发了一种新的机器学习(ML)框架,该框架可以锁定多步化学转化的哪些步骤应该进行调整以提高生产率。该方法可以帮助指导催化剂的设计。
【关键词】铜基,催化剂,准确性
89.46%检出率,网易云信音频实验室提出全球首个AI啸叫检测方案(2022-05-30)
【摘要】 5月30日,机器之心网讯,网易云信音频实验室持续在实时通信音频领域进行创新,基于AI的啸叫检测方法的研究方案被ICASSP2022接收,并受邀于会议面向学术界和工业界进行研究报告。本次论文的接收是网易云信音频实验室继AI音频降噪、AI音乐检测2篇论文被INTER-NOISE2021收录之后,在音频信号处理领域又一新的里程碑。AI啸叫检测也是国际上首次将AI和啸叫问题进行深度结合的实践,该研究结果包括89.46%的检出率,以及0.40%的误检率...
【关键词】AI,啸叫问题,深度结合
UC伯克利教授Pieter Abbeel获2021 ACM计算奖(2022-04-25)
【摘要】 4月25日,机器之心网讯,刚刚,ACM官方宣布将2021ACM计算奖(ACMPrizeinComputing)授予加州大学伯克利分校教授PieterAbbeel,以表彰他在机器人学习方面的贡献,包括从演示中学习和用于机器人控制的深度强化学习。在获奖公告中,ACM提到:Abbeel率先教会机器人从人类演示中学习(学徒学习)和通过自己的反复试错学习(强化学习),这为下一代机器人技术奠定了基础。ACM计算奖设立于2007年,由IT巨头Infosys赞助,奖金为25万美...
【关键词】学徒学习,强化学习,最高成就
视频生成无需GAN、VAE,谷歌用扩散模型联合训练视频、图像,实现新SOTA(2022-04-25)
【摘要】 4月25日,机器之心网讯,扩散模型并不是一个崭新的概念,早在2015年就已经被提出。其核心应用领域包括音频建模、语音合成、时间序列预测、降噪等。那么它在视频领域表现如何?先前关于视频生成的工作通常采用诸如GAN、VAE、基于流的模型。在视频生成领域,研究的一个重要里程碑是生成时间相干的高保真视频。来自谷歌的研究者通过提出一个视频生成扩散模型来实现这一里程碑,显示出非常有希望的初步结果。本文所提出的模型是标...
【关键词】音频,建模,语音合成
国产车规MCU实现了性能全球领先(2022-04-25)
【摘要】 4月25日,机器之心网讯,近日,车规芯片企业芯驰科技正式发布高端车规控制单元(MCU)E3系列,该芯片是当前全球性能最高的车控MCU产品。这款芯片主频最高可支持800MHz,与当前业界同级产品相比,性能一次提升了几倍。芯驰科技首席架构师孙鸣乐表示,E3控之心是芯驰为未来智能汽车精心打造的车规MCU,有四大优势:高可靠、高安全、高性能、广覆盖。E3系列可应用于线控底盘、制动控制、BMS、ADAS/自动驾驶运动控制、液晶仪表、HU...
【关键词】性能最高,车控,MCU
腾讯“混元”AI大模型一举斩获跨模态检索榜单大满贯(2022-04-25)
【摘要】 4月25日,机器之心网讯,今天,腾讯对外正式宣布,腾讯“混元”AI大模型在MSR-VTT,MSVD,LSMDC,DiDeMo和ActivityNet 五大跨模态视频检索数据集榜单中先后取得第一名的成绩,实现了该领域的大满贯。特别是在MSR-VTT榜单上,“混元”AI大模型将文字-视频检索精度提高到55%,领先第二名1.7%,位居行业第一。据悉,这是腾讯首次对外披露“混元”AI大模型的研发进展,该模型包含但不限于:计算机视觉、自然语言处理、多模态内容理...
【关键词】计算机,视觉,自然语言
ICLR2022:清华、腾讯AI Lab共同提出等变图力学网络,实现多刚体物理系统模拟(2022-04-01)
【摘要】 3月31日,机器之心网讯,清华AIR、计算机系与腾讯AILab合作,共同提出等变图力学网络,实现了理论力学中的一类重要任务—多刚体系统模拟。近年来,AI for Science 利用人工智能方法与物理、化学、生物等自然科学进行交叉融合,在一些重要的科学问题上(如蛋白质结构预测)取得了瞩目的进展。鉴于物理学科的基础性与重要性,AI+Physics 无疑是 AI for Science 不可缺失的一环。为此,清华 AIR、计算机系与腾讯 AI Lab 合作共同...
【关键词】理论力学,论文,力学网络
阿里开源,支持10万亿模型的自研分布式训练框架EPL(Easy Parallel Library)(2022-03-31)
【摘要】 3月31日,机器之心网讯,最近阿里云机器学习PAI平台和达摩院智能计算实验室一起发布“低碳版”巨模型M6-10T,模型参数已经从万亿跃迁到10万亿,规模远超业界此前发布的万亿级模型,成为当前全球最大的AI预训练模型。同时做到了业内极致的低碳高效,使用512 GPU在10天内即训练出具有可用水平的10万亿模型。相比之前发布的大模型GPT-3,M6实现同等参数规模,能耗仅为其1%。M6模型训练使用的正是阿里云机器学习PAI平台自研的分布...
【关键词】阿里云,机器学习,低碳
思图场景算法团队在2022年的ABAW表情识别挑战赛中获得一项冠军及一项亚军(2022-03-31)
【摘要】 3月31日,机器之心网讯,近日,第三届人脸表情国际挑战赛(The 3rd Workshop and Competition on Affective Behavior Analysis in-the-wild ,简称ABAW)公布了比赛结果,思图场景在与全球129支参赛队伍的竞争中脱颖而出,获得了一项冠军及一项亚军,这是继EmotiW2018、EmotiW2020之后思图场景再度全球夺冠,展现了其在情感计算领域深厚的技术实力。本届竞赛在今年的国际计算机视觉与模式识别会议(CVPR)上举办,CVPR是由总部...
【关键词】自然情境,计算机,情感行为
2021图灵奖揭晓:高性能计算先驱、超算TOP500榜单创始人之一Jack Dongarra获奖(2022-03-31)
【摘要】 3月31日,机器之心网讯,其主要成果如下,自动调优:2016 年,他的项目 ATLAS 获得全球超级计算大会时间检验奖(Supercomputing Conference Test of Time),通过此项目 Dongarra 开创的方法能够自动查找生成接近最优效率的线性代数内核的算法参数,这优于供应商提供的代码;混合精度算术:在他 2006 年全球超级计算大会上发表的论文《Exploiting the Performance of 32 bit Floating Point Arithmetic in Obtaining 64 bit Ac...
【关键词】大型,密集,矩阵计算
火山引擎发布全新视频云产品矩阵,与阿里、腾讯推出超低延时直播技术标准(2022-02-28)
【摘要】 2月28日,机器之心网讯,在火山引擎举办的视频云科技原力峰会上,火山引擎相关负责人分享了对视频体验、交互、增长的观察与思考,并发布面向体验的视频云全新产品矩阵。火山引擎的使命是开放字节跳动最先进的技术,在长时间的实践过程中,字节跳动总结出面向体验的创新模式。火山引擎从播放、画质、互动、性能四个维度,量化和评估视频体验。在播放体验方面,火山引擎视频云将首帧时间压缩到 100ms 以下,用户感觉不到首帧存在...
【关键词】播放,画质,互动
隐私计算的硬件方案:可信执行环境TEE兼顾数据安全、隐私保护(2022-02-28)
【摘要】 2月28日,机器之心网讯,随着移动互联网和云计算技术的迅猛发展,越来越多的数据在云环境下进行存储、共享和计算,云环境下的数据安全与隐私保护也逐渐成为学术界以及工业界关注的热点问题。目前阶段,隐私保护技术主要基于密码算法及协议(如安全多方计算、同态加密等)完成场景落地,其优点主要在于具有较高的安全性和可靠性,然而,由于这些算法或协议的实现依赖于大量复杂计算(如乘法循环群上的乘法、指数运算,Pairing ...
【关键词】发展脉络,剖析,密码算法
首个图灵网络开发奖,用于人工智能研究(2022-02-28)
【摘要】 2月28日,机器之心网讯,英国诺丁汉大学(University of Nottingham)的研究人员获得了首个图灵网络发展奖(Turing Network Development Awards),专注于让人工智能易于访问并在其使用中建立信任。诺丁汉大学是获得这一新奖项的 24 所大学之一,入选的原因是其在数据科学和人工智能方面的卓越研究和成就。现在,通过积极参与研究所蓬勃发展的网络,大学的工作将得大大加强。具身智能(embodied intelligence)教授 Praminda C...
【关键词】数据科学,卓越研究,创新
华为诺亚开源首个亿级中文多模态数据集-悟空,填补中文NLP社区一大空白(2022-02-28)
【摘要】 2月28日,机器之心网讯,华为诺亚方舟实验室的研究者提出了一个大规模的中文的跨模态数据库——悟空,并在此基础上对不同的多模态预训练模型进行基准测试,有助于中文的视觉语言预训练算法开发和发展。在大数据上预训练大规模模型,对下游任务进行微调,已经成为人工智能系统的新兴范式。BERT 和 GPT 等模型在 NLP 社区中越来越受欢迎,因为它们对广泛的下游任务甚至零样本学习任务具有很高的可迁移性,从而产生了 SOTA 性能。...
【关键词】人工智能,新兴,范式
谷歌开源了史上最大视觉模型V-MoE的全部代码(2022-01-29)
【摘要】 1月29日,机器之心网讯,还记得谷歌大脑团队去年6月份发布的43页论文《Scaling Vision with Sparse Mixture of Experts》吗?他们推出了史上最大规模的视觉模型V-MoE,实现了接近SOTA的Top-1准确率。如今,谷歌大脑开源了训练和微调模型的全部代码。然而,大模型以及数据集的使用是以大量计算需求为代价的。最近的研究表明,增强模型的泛化能力以及稳健性离不开大模型的支持,因此,在训练大模型的同时协调好与训练资源的限制...
【关键词】150亿,参数,准确率
Meta揭幕全球最快AI超算:目标一天之内训练万亿参数大模型(2022-01-29)
【摘要】 1月29日,机器之心网讯,最近一段时间,超级计算机是科技公司比拼的重点。昨天商汤科技的AIDC刚刚启用,今天又传来了脸书超算的消息。当地时间1月24日,Meta(原Facebook)揭幕了其研究团队的全新人工智能超级计算机,预计在2022年中全部完成后,它将成为世界最快的计算机。在报道文章中,Meta表示新超算AIResearchSuperCluster(RSC)将帮助该公司构建更好的AI模型,这些模型可以从数万亿个示例中学习,构建跨数百种语言的模...
【关键词】英伟达,DGXA100,超算
中国传媒大学国家重点实验室发布首个虚拟数字人影响力指标体系(2022-01-29)
【摘要】 1月29日,机器之心网讯,1月27日,中国传媒大学媒体融合与传播国家重点实验室媒体大数据中心联合头号偶像(北京)数字科技有限公司共同发布《中国虚拟数字人影响力指数报告》,国内首个虚拟数字人影响力指数亮相。报告指出,2021年元宇宙概念兴起,叠加疫情下国人对虚拟内容需求增加、消费级VR硬件快速发展,虚拟数字人发展进入快车道。报告从未来媒体形态和服务模式重新定义了虚拟数字人:计算机图形学、语音合成技术、深度学...
【关键词】元宇宙,重要载体,媒介
1370亿参数、接近人类水平,谷歌对话AI模型LaMDA放出论文(2022-01-29)
【摘要】 1月29日,机器之心网讯,近日,超过50多位谷歌研究者参与撰写的论文《LaMDA:Language Models for Dialog Applications》介绍了语言模型LaMDA的最新进展。论文概括了他们如何在安全、可靠和高质量的对话应用程序方面取得进展。LaMDA通过微调一系列专门用于对话的、基于Transformer的神经语言模型构建的,具有多达137B个参数,模型还可以利用外部知识源进行对话。语言模型可以完成不同任务,例如将一种语言翻译成另一种语言,将...
【关键词】谷歌,LaMDA,质量
苏黎世联邦理工用高效时序建模提升多目标追踪与分割(2021-12-31)
【摘要】 12月30日,机器之心网讯,近日,苏黎世联邦理工研究者分享了他们对自动驾驶场景中高效快速进行时序建模和多物体追踪分割的思考。本文是对苏黎世联邦理工、香港科技大学和快手科技的论文《Prototypical Cross-Attention Networks for Multiple Object Tracking and Segmentation- PCAN》的解读,该论文被 NeurIPS 2021 接收为 spotlight。( Prototypical Cross-Attention Network, PCAN)是基于苏黎世联邦理工和 UC 伯克利推出...
【关键词】白夜,自动驾驶,场景
GDL可对药物分子进行表征的几何深度学习(2021-12-31)
【摘要】 12月30日,机器之心网讯,几何深度学习(GDL)基于包含和处理对称信息的神经网络架构。GDL 为依赖于具有不同对称性和抽象级别的分子表示的分子建模应用程序带来了希望。苏黎世联邦理工学院的研究人员对分子 GDL 进行了结构化和统一概述,重点介绍了其在药物发现、化学合成预测和量子化学中的应用。它包含对 GDL 原理的介绍,以及相关的分子表示,例如分子图、网格、曲面和字符串,以及它们各自的属性。讨论了分子科学中 GDL 当...
【关键词】GDL,原理,预测
整合全球新冠数据,华中大等开源联邦学习医学AI计算框架(2021-12-31)
【摘要】 12月30日,机器之心网讯,12月15日,Nature子刊《自然-机器智能》发表了由华中科技大学人工智能学院发起、剑桥大学、斯坦福大学、约翰霍普金斯大学、MD安德森肿瘤医院、华中科技大学同济医学院附属同济医院、附属协和医院、国家药物筛选中心等国内外权威科研机构联合开发的联邦学习开源医学人工智能(AI)计算框架(Unified CT AI Diagnostic Initiative , UCADI)。当前人工智能模型普遍泛化性差:模型在训练过的数据集上表现...
【关键词】AI,医学,医疗应用
清华大学夺冠NeurIPS 2021国际深度元学习挑战赛(2021-12-31)
【摘要】 12月30日,机器之心网讯,近期,国际AI顶级会议 NeurIPS 2021 召开。清华大学朱文武教授实验室 Meta_Learners 团队在 NeurIPS 2021 举办的第二届国际深度元学习挑战赛(MetaDL Challenge)中夺得冠军。该团队在最终阶段的五个数据集中以平均准确率超越第二名 17.5%(相对提升 22.3%)的优势强势摘得桂冠。元学习(Meta Learning)作为机器学习迈向自动化的一个重要研究方向,已经得到了产学研各界的持续关注。元学习旨在让机器...
【关键词】元学习,自动化,竞赛
归一化提高预训练、缓解梯度不匹配,Facebook的模型超越GPT-3(2021-11-30)
【摘要】 11月30日,机器之心讯,来自Facebook AI 的研究者提出了 NormFormer,该模型能够更快地达到目标预训练的困惑度,更好地实现预训练困惑度和下游任务性能。在原始的 Transformer 架构中,LayerNorm通常在Residual之后,称之为Post-LN(Post-Layer Normalization)Transformer,该模型已经在机器翻译、文本分类等诸多自然语言的任务中表现突出。最近的研究表明,在 Post-LN transformer 中,与较早层的网络相比,在较后层的网络中...
【关键词】目标,预训练,困惑度
腾讯朱雀实验室推出代码防护技术Deep Puzzling,让代码更难被猜透(2021-11-30)
【摘要】 11月30日,机器之心讯,全球顶级的信息安全峰会HITB+Cyberweek 2021于近日举办,腾讯朱雀实验室专家研究员Jifeng Zhu和研究员Keyun Luo受邀参加,并进行了题为《Deep Puzzling: Binary Code Intention Hiding based on AI Uninterpretability》(《基于AI不可解释性的二进制代码意图隐藏》)的议题分享。会上,腾讯朱雀实验室展示了如何利用AI模型的特性,实现二进制代码的意图隐藏,有效防止代码被黑客逆向分析,从而保障核心...
【关键词】AI技术,网络安全,网络攻防
AI+新型二维半导体:从集成电路工艺到芯片制造,复旦大学最新研究(2021-11-30)
【摘要】 11月30日,机器之心讯,近日,复旦大学微电子学院研究团队,利用机器学习策略辅助优化了二维半导体增强型顶栅晶体管的制备工艺,并采用工业标准设计流程和工艺进行了晶圆级器件与电路的制造和测试。该工作提出了一种适合学术界探索的二维半导体集成电路工艺优化路线,从而展示了二维材料体系未来的芯片应用前景。该研究以《Wafer-scale functional circuits based on two dimensional semiconductors with fabrication optimiz...
【关键词】策略,优化,制备工艺
集成进化环境的深度学习算法加速蛋白质工程(2021-11-30)
【摘要】 11月30日,机器之心讯,近日,来自伊利诺伊大学厄巴纳-香槟分校(UIUC)的研究人员展示了一种加速蛋白质工程过程的机器学习算法——ECNet,一种利用进化环境来预测蛋白质工程功能适应性的深度学习算法。研究表明:与现有的机器学习算法相比,ECNet 能更准确地预测序列—功能关系。
【关键词】预测,序列,算法