@
huzhikuizainali 不客气, 欢迎交流
[这段文字所说的创新突破大概是什么段位的创新突破?]
A: 几乎涉及到所有 ML/DL 学术界除综述外的成果. 像 ls 老哥所说的 learning theory, (在 ML/DL 领域)要做研究也是需要写代码 /跑程序(实验)/拿数据结果的, 不然的话是不是就变成民科了
[新的算法或结构又是在什么层面的?]
A: 可能小到一个 custom op, 或者 explicit regularizer, 可以理解为“k 临近算法,回归,卷积神经网络”中间的一个算子; 大到一个经典算法 /结构(CNN, LSTM 等等), 一套 efficient training 系统, 或者 cuda 架构
[“ 创新性和突破性”是指为这个“工具库”发明添加一些没有的工具么?]
A: 可能没到造车这个级别, 但是至少需要通过程序语言, 通过数据, 在可复现的前提下来表达“创新性和突破性”
[不知道有没有这方面“导论”水平的书推荐]
A: 这个通用导论会比较复杂, 横跨软件硬件, 暂时还没遇到过, 即使有应该也是大部头吧; 推荐可以先看单一架构, 比如 cuda 的综述, 针对其硬件的设计思路, 架构, 算法层面的设计 /优化等等, 网上都可以找到官方的一些宣讲