今后几年的趋势应该是小数据颠覆大数据,不是深度学习

今后几年的趋势应该是小数据颠覆大数据,不是深度学习

2014年12月14日 01:42
http://baojie.org/blog/2014/12/13/smart-data-wins/
Posted on 2014-12-13 by BAOJIE

1) 我觉得无论是从技术还是市场,到了拼系统的程度,就只有数据奴隶主,主要是大的数据奴隶主才能搞。但是这反而是颠覆他们的机会。因为他们的规模依赖他们的 渠道和市场(不然哪里来那么多免费数据浪费)。但是现实市场中大多数问题并不需要这么大规模。这会是一个典型的创新者的窘境

 

2) 绝大多数的机器学习问题的制约瓶颈不是算法,也不是系统,而是数据。能到拼系统阶段的都是土豪了,大多数公司还没到这个奢侈的阶段就死了。在此阶段前,只 要数据好,什么烂算法和烂系统都能somehow work。但是数据是最贵的,上量贵,清理贵。找一个理解数据,算法和系统的人更贵

 

3) 对于大多数的芸芸众生,去追谷歌脸书这些巨头的风恐怕有些李德主义。算法的好坏取决与成本,取决与规模。对于占大多数的中小型机器学习问题,恐怕“小数 据”方法才是关键,就是用最低的成本,尽可能的利用小的数据规模和机器规模,尽可能的利用先验知识,尽可能的缩短投入产出周期

 

4) 和大多数其他工程问题一样,制约技术选型的不是一个技术酷不酷,而是看它全周期的投入成本和维护成本。投入成本不仅要看机器成本,更主要是人力成本。采用 成熟技术有助于降低成本,前沿技术向下渗透速度并不会那么快。深度学习和历史上的神经网络一样,维护成本并不低,不会是万灵药

 

5) 我说的可能是偏见,不一定对:今后几年的趋势应该是小数据颠覆大数据,Smart Data超越Big Data。系统的可解释性,可读性,可维护性,可进化性。数据的自描述性,多能性。结构化数据(含知识图谱)与非结构化数据的混合。我觉得这些都是可能的 突破点,因为它们着眼于Value,降低成本 [完]

 

上面这些是对 @龙星镖局 的原文的读后感 http://www.weibo.com/1932835417/BAHFSEhuI

感 受:1)深度学习真成了,80%机器学习工程师失业;2)大规模机器学习依赖数据、架构,算法其次;3)NLP是深度学习的前沿阵 地,Dean,Bengio,Jordan都不会错过;4)机器学习门槛太低,编程能力才是码农的最后防线;5)大数据研究将会呈现巨头垄断的格局,大家 赶紧找好山头

标签

发表评论

Comment List(2)

  • 大连码农

    2014.12.15 08:12

    个人觉得现在概念太多眼花缭乱,与其急着更新知识赶潮流不如深入本质搞点科学工作或者在应用第一线做点工作.

  • 田七

    2014.12.14 15:12

    趋势太复杂难以把握不如买彩票