如何找到一个好的研究方向,这对于研究生和博士生来说,是一件极其重要的事情,当然也包含在工业界从事学术和技术研究的人。它直接影响了研究产物的交付品质。
那什么样的研究才算“有价值”?又该如何让它的价值足够大?可以从三个角度来看。
1)创新性,说的直白一点,就是开脑洞。ResNet 开了一个“残差连接”的脑洞,Transformer 开了一个“注意力即一切”的脑洞,ViT 开了一个“把视觉当成语言建模”的脑洞。开脑洞也叫“挖坑”,只要坑挖得够大,填坑的事情完全可以交给别人。Transformer 论文的引用量达到十万之巨,可以想象有多少人进来“填坑”。
2)有效性,即学术或工业价值。好的研究必须能“跑得通”,不仅概念上新颖,还要在实验中奏效、在工程上落地。很多论文提出漂亮的理论,但没有可复现的结果,也没有能被行业采纳的路径,这样的创新是空中楼阁。
3)问题规模,它决定了研究的“杠杆”。如果问题只是微调参数、改良细节,那么影响力往往局限在局部最优;而当研究直击底层约束、改变范式,它的能量就能跨越领域。
好的研究方向,是在世界的噪音中找到一个“尚未被解答的确定性”,并用一套可验证的逻辑,让它从思想变成现实。
显示更多