五千年(敝帚自珍)

主题:【原创】教育探索(六)—大脑神经网络是如何形成的 -- 夕曦

共:💬43 🌺188
全看分页树展 · 主题 跟帖
家园 关于否定之否定

作为一个目前主要从事深度学习研究的从业者,同时又是一个两岁小孩儿的父亲,白天教机器,晚上教小孩儿,这真的是一种非常奇妙的体验,从个人的感受上,真的是佩服深度学习设计的精妙和完美,使得教机器和教小孩儿的体验非常之类似

目前的深度学习方面的否定之否定,当然有大量的研究人员走的是修改程序软件的路子,但个人觉得这是体现个人价值(或者粗俗点为了完成科研目标)的需要,其实深度学习具有这样的潜力,就是不修改或者很少的修改程序和软件,靠堆数据来完成机器的否定之否定(模型参数的自我调节),这和教小孩儿认东西简直是一模一样的路子

对脑科学很好奇但是没有研究,不清楚脑突触、脑回路除了存在与不存在(0和1)之外有没有其他的中间状态,我觉得基于浮点运算的深度学习就是对脑回路的一种暴力拟合。现在有一个很有意思的深度学习路线,就是位运算深度网络,深度学习三尊大神之一的Yoshua Bengio目前在专注这一方向的研究,看起来跟真实神经的运作方式会更加一致,感觉未来人工神经网络和医学脑科学的研究会相互促进,共同寻求突破

通宝推:唐家山,
全看分页树展 · 主题 跟帖


有趣有益,互惠互利;开阔视野,博采众长。
虚拟的网络,真实的人。天南地北客,相逢皆朋友

Copyright © cchere 西西河