会前预热
大语言模型
雷峰网 · Guangwei.mai · 2020-07-23
CV 在前,NLP 在后,迁移学习技术的应用为这两个领域所带来的进展和突破,不可谓不瞩目。
其中,预训练模型作为当下迁移学习的一种主流方法,让“从零开始训练一个新模型”的时代一去不复返。这类在大型数据集上训练好的模型进行微调后,便能够较好地适配类似的新目标任务,可以极大地节约时间和成本。
不过,天下没有免费的午餐,这种方法看似“一劳永逸”,也需要付出一定的代价,其中的一大问题便是,由...
会前预热
大语言模型
雷峰网 · Guangwei.mai · 2019-06-18
雷锋网 AI 科技评论按,本文作者张拳石,上海交通大学副教授,研究方向为机器学习、计算机视觉,本文首发于知乎,雷锋网 AI 科技评论获其授权转载。以下为正文内容。
本来想把题目取为「从炼丹到化学」,但是这样的题目太言过其实,远不是近期可以做到的,学术研究需要严谨。但是,寻找适当的数学工具去建模深度神经网络表达能力和训练能力,将基于经验主义的调参式深度学习,逐渐过渡为基于一些评测指标定量指导...
会前预热
具身智能
雷峰网 · Guangwei.mai · 2019-02-21
本文为 AI 研习社编译的技术博客,原标题 :
Structured Control Nets for Deep Reinforcement Learning Tutorial (ICML Published Long Talk Paper)
作者 | Mario Srouji
翻译 | 永恒如新的日常、召唤神龙
校对 | 斯蒂芬·二狗子 ...
会前预热
大语言模型
雷峰网 · Guangwei.mai · 2018-08-16
雷锋网 AI 科技评论按:本篇属于「顶会见闻系列」。每年这么多精彩的人工智能/机器学习会议,没去现场的自然可惜,在现场的也容易看花眼。那么事后看看别的研究员的见闻总结,也许会有新的收获呢。
Gautier Marti 在法国巴黎高等师范学校获得应用数学的硕士学位,而后在巴黎综合理工学院获得机器学习量化分析的博士学位。2013 年 3 月至 5 月,Gautier Marti 在中科院自动化...
会前预热
大语言模型
雷峰网 · Guangwei.mai · 2018-08-16
雷锋网 AI 科技评论按:本篇属于「顶会见闻系列」。每年这么多精彩的人工智能/机器学习会议,没去现场的自然可惜,在现场的也容易看花眼。那么事后看看别的研究员的见闻总结,也许会有新的收获呢。
曾在中科院自动化研究所模式识别国家重点实验室实习的 Gautier Marti 现在是 NLP 量化分析研究员。机器学习+金融的研究人员对理论性较强的 ICML 有何感悟呢?雷锋网 AI 科技评论把他的...
会前预热
大语言模型
雷峰网 · Guangwei.mai · 2018-07-20
雷锋网 AI 科技评论按:机器学习圈子这几天发生了一件有趣的事,一群知名学者在 ICML 2018 上抱着吵架(辩论)的心思坐到一起,结果却没吵起来。
从「奇怪的趋势」开始
在 ICML 2018 开幕之前,卡耐基梅隆大学的助理教授 Zachary C. Lipton 与斯坦福大学博士 Jacob Steinhardt 共同发表了一篇名为《Troubling Trend...
会前预热
具身智能
雷峰网 · Guangwei.mai · 2018-07-11
雷锋网 AI 科技评论按:经过 7 月 10 日的三个 Tutorial Session 和 Opening Reception 晚宴之后,在瑞典斯德哥尔摩举办的机器学习顶会 ICML 2018 正式进入第一天的正会。
开幕致辞 Opening Remarks
当地时间 7 月 11 日早上 8:45,北京时间 7 月 11 日下午 2:45 开始的 Opening R...
会前预热
大语言模型
雷峰网 · Guangwei.mai · 2017-08-16
雷锋网 AI 科技评论按:近日,ICML2017收录的一篇论文引起了雷锋网AI科技评论的注意。这篇关于序列数据预测的论文是 Alex Smola 和他在 CMU 时的两个博士生 Manzil Zaheer 和 Amr Ahmed 共同完成的,后者目前已经加入谷歌大脑。
Alex Smola是机器学习界的重要人物,他的主要研究领域是可拓展算法、核方法、统计模型和它们的应用,已经发表超过200...
会前预热
大语言模型
雷峰网 · Guangwei.mai · 2017-08-08
雷锋网 AI 科技评论按:正在进行的2017 机器学习国际大会(ICML 2017)早早地就在其官网公布了本次会议的最佳论文评选结果(重磅 | ICML 2017最佳论文公布!机器学习的可解释性成热点),其中最佳论文奖为《Understanding Black-box Predictions via Influence Functions》,其主题为如何利用影响函数理解黑箱预测。两位作者分别...
会前预热
大语言模型
雷峰网 · Guangwei.mai · 2017-08-06
雷锋网消息,8月6日,机器学习领域最具影响力的学术会议之一的ICML 2017在澳大利亚悉尼正式开幕。当天,除了举行多场Tutorial外,ICML还在官网正式公布了本次会议的最佳论文评选结果。在前线雷锋网AI科技评论的两位编辑(张驰和刘芳平)第一时间为大家带来获奖论文的报道。
本届ICML最佳论文的主题是,利用影响函数理解黑箱预测。机器学习中的一个关键问题就是,系统为何做出某种预测?...