摘要： 　　基于理念分析和比较研究方法，对大数据的分析方法和传统统计学分析方法的关联性和差异进行了对比分析，从" />
免费阅读期刊
论文发表、论文指导
周一至周五
9：00&22：00
大数据与统计学分析方法比较
　　摘要： 中国论文网 /2/view-7001713.htm　　基于理念分析和比较研究方法，对大数据的分析方法和传统统计学分析方法的关联性和差异进行了对比分析，从方法的基本思想、量化形式、数据来源、分析范式、分析方法、分析视角等角度揭示了两种社会科学分析方法存在的联系与差异。 　　关键词： 　　大数据；统计学；研究方法 　　中图分类号： 　　F27 　　文献标识码：A 　　文章编号：15） 　　随着信息技术的日益发展与普及，信息以及数据在社会经济发展过程中发挥的作用越来越重要。现如今，“大数据”时代已经来临，于是如何更有效地利用数据快速做出科学决策也已成为众多企业甚至是国家所共同关注的焦点问题。在数据处理和分析方法方面，《统计学》以及在其基础上发展而来的实证统计方法是当前的主流，这些方法可以帮助数据持有者从大量的数据中挖掘有价值的信息，并为其相关决策提供理论支撑和方法支持。然而，传统的实证统计方法在最新出现的大数据情境下，却呈现出了诸多缺陷，例如传统数据收集方法无法实现大规模（甚至是总体）数据的收集，传统统计方法和分析软件无法处理大规模数据，等等。于是，在将传统统计学方法应用于最新的大数据情境和问题之前，需要首先明确大数据所要求的处理方法与传统的统计学处理方法存在哪些关联和区别，然后才能够决定是否可以应用既有统计学理论和方法来处理某些大数据问题。 　　1大数据的界定 　　根据一位美国学者的研究，大数据可以被定义为：it means data that’s too big， too fast， or too hard for existing tools to process。也就是说，该学者认为：在关于大数据的所有定义中，他倾向于将之定义为那类“太大”、“太快”，或现存工具“太难”处理的数据。一般而言，大数据的特征可以概括为四个V：一是量大（Volume）；二是流动性大（Velocity），典型的如微博；三是种类多（Variety），多样性，有结构化数据，也有半结构化和非结构化数据；四是价值大（Value），这些大规模数据可以为持有企业或者组织创造出巨大的商业或社会价值。 　　Victor在其最新著作《大数据时代――生活、工作与思维的大变革》中指出，大数据时代，思维方式要发生3个变革：第一，要分析与事物相关的所有数据，而不是依靠分析少量数据样本；要总体，不要样本。第二，要乐于接受数据的纷繁复杂，而不再追求精确性。第三，不再探求难以捉摸的因果关系，应该更加注重相关关系。这些变革反映出了大数据处理方式与传统统计学分析方法的很多关联以及主要不同。因此，下面我们分别针对两者的联系和区别进行讨论。 　　2大数据与统计学分析方法的联系 　　从18世纪中叶至今，统计学已经经历了两百多年的发展历程，不论是基础理论还是社会应用都极其坚实而丰富。大数据作为一种新兴的事物规律认知和挖掘思维，也将会对人类的价值体系、知识体系和生活方式产生重要影响，甚至引发重大改变。作为两种认知世界和事物规律的基本方法，它们在以下两个方面存在紧密关联。 　　（1）挖掘事物规律的基本思想一致。统计学（statistics）探索事物规律的基本方法是：通过利用概率论建立数学模型，收集所观察系统的数据，进行量化分析和总结，做出推断和预测，为相关决策提供依据和参考。对于大数据，维克托指出，大数据思维的来临使人类第一次有机会和条件，在非常多的领域和非常深入的层次获得和使用全面数据、完整数据和系统数据，深入探索现实世界的规律，获取过去不可能获取的知识。通过这两个定义可以看出，不论是传统的统计学方法还是新兴的大数据分析方法，都是以数据为基础来揭示事物特征以及发展趋势的。 　　（2）均采用量化分析方式。大数据分析的基础是数据化，也就是一种把各种各样现象转变为可制表分析的量化形式的过程。不论是传统统计学中所应用的数据（定性和定量数据），还是大数据时代即将被转化和采用其他形式数据（如文字、图像等），最终都是通过量化分析方法来揭示数据中所蕴含的事物特征与发展趋势。 　　3大数据与统计学分析方法的区别 　　（1）基础数据不同。在大数据时代，我们可以获得和分析更多的数据，有时候甚至可以处理和某个特别现象相关的所有数据，而不再依赖于随机抽样。这意味着，与传统统计学数据相比，大数据不仅规模大，变化速度快，而且数据来源、类型、收集方法都有根本性变化。 　　①在数据来源方面，在大数据背景下，我们需要的纷繁多样的数据可以分布于全球多个服务器上，因此我们可以获得体量巨大的数据，甚至是关于总体的所有数据。而统计学中的数据多是经由抽样调查而获得的局部数据，因此我们能够掌握的事“小数据量”。这种情况下，因为需要分析的数据很少，所以必须尽可能精确的量化我们的数据。综上，大数据情况下，分析人员可以拥有大量数据，因而不需要对一个现象刨根问底，只需要掌握事物大体的发展方向即可；然而传统的小数据情况下则需要十分注意所获得数据的精确度。 　　②在数据类型与收集方面，在既往模式下，数据的收集是耗时且耗力的，大数据时代所提出的“数据化”方式，将使得对所需数据的收集变得更加容易和高效。除了传统的数字化数据，就连图像、方位、文本的字、词、句、段落等等，世间万物都可以成为大数据范畴下的数据。届时，一切自然或者社会现象的事件都可以被转化为数据，我们会意识到本质上整个世界都是由信息构成的。 　　（2）分析范式不同。在小数据时代，我们往往是假想世界是如何运行的，然后通过收集和分析数据来验证这种假想。也就是说，传统统计实证分析的基本范式为：（基于文献）提出理论假设-收集相关数据并进行统计分析-验证理论假设的真伪。然而，在不久的将来，我们将会在大数据背景下探索世界，不再受限制于传统的思维模式和特定领域里隐含的固有偏见，我们对事物的研究始于数据，并可以发现以前不曾发现的联系。换言之，大数据背景下，探索事物规律的范式可以概括为：数据观察与收集――数据分析――描述事物特征/关系。 　　（3）数据分析方法不同。传统统计学主要是基于样本的“推断分析”，而大数据情境下则是基于总体数据的“实际分析”，即直接得出总体特征，并可以分析出这些特征出现的概率。 　　（4）分析视角不同。传统的实证统计意在弄清事物之间的内在联系和作用机制，但大数据思维模式认为因果关系是没有办法验证的，因此需要关注的是事物之间的相关关系。大数据并没有改变因果关系，但使因果关系变得意义不大，因而大数据的思维是告诉我们“是什么”而不是“为什么”。换言之，大数据思维认为相关关系尽管不能准确地告知我们某事件为何会发生，但是它会提醒我们这件事情正在发生，因此相关关系的发现就可以产生经济和社会价值了。 　　4结语 　　综上，相对于传统而言，大数据思维主要包括三个重大转变。首先，要分析与某事物相关的所有数据，而不是依靠分析捎来能够的数据样本；其次，研究人员应乐于接受数据的纷繁复杂，而不再追求精确性；最后，认知世界的思想发生了转变，不再探求难以捉摸的因果关系，转而关注事物的相关关系。以上三个转变构成了大数据思维的核心。在统计学的进一步应用和发展完善过程中，需要结合以上转变所产生的挑战，思考有效的统计学发展对策。 　　参考文献 　　[1]孟小峰，慈祥.大数据管理：概念，技术与挑战[J].计算机研究与发展，）：146169. 　　[2]俞立平.大数据与大数据经济学[J].中国软科学，2013，（7）：177183. 　　[3]维克托?迈尔?舍恩伯格，肯尼斯?库克耶.大数据时代―生活、工作与思维的大变革[M].盛杨燕，周涛译.杭州：浙江人民出版社，2012.
转载请注明来源。原文地址：
【xzbu】郑重声明：本网站资源、信息来源于网络，完全免费共享，仅供学习和研究使用，版权和著作权归原作者所有，如有不愿意被转载的情况，请通知我们删除已转载的信息。
xzbu发布此信息目的在于传播更多信息，与本网站立场无关。xzbu不保证该信息（包括但不限于文字、数据及图表）准确性、真实性、完整性等。Python机器学习Kaggle案例实战
面试突击-数据结构与算法速成
MATLAB计算机视觉与深度学习实战
金融市场基础
Hadoop集群原理与运维实践
HBase从入门到精通
web高并发服务架构
为了服务微软的Bing、Office 365以及Skype业务，我们的大数据平台需要处理每天高达十几PB级别的海量大数据，所有的数据分析、报表、洞见以及A/B测试都依赖于高质量的数据，如果数据质量不高的话，依赖数据做决策的业务都会受到严重影响。与此同时，微软业务对于实时数据处理的需求也日益增加，以前监控批处理数据的很多解决方案已经不再适用于实时的流式数据的质量监控。在另外一个层面，基于历史原因，各个业务集团往往使用不同的技术、工具来做数据处理，怎么整合这样异构的技术、工具以及在此之上的数据质量监控也是一个急需解决的问题。从数据生产者这端，我们通过在客户端以及服务端使用通用...
随着科技的发展，很多科技巨头又开始重新部署硬件，“芯片大战”已经悄悄上演，这个曾经一度濒临破产的芯片行业，现在又要“重回未来”。本文分析了当今科技巨头如何在芯片领域进行部署。软件正在“吞噬世界”，这个 ...
我们知道，相对于专业的ASIC，FPGA有上市时间和成本上的优势。另外，在大多数情况下，FPGA执行某些功能较之CPU上的软件操作更高效。这就是为什么我们认为它不但会运用在数据中心的服务器、交换器、存储层的各个角落 ...
2017年7月，Gartner公司发布了年度新兴技术成熟度曲线。Gartner认为，2017年技术成熟度曲线揭示了未来5-10年的三方面技术趋势，一是无处不在的人工智能、二是身临其境的体验、三是数字化平台，这三个方面的汇聚会带
美国国家科学基金会（NSF）近日宣布，将提供1600万美元，资助19个跨学科的神经与认知系统（NCS），折合人民币约1.067亿元。美国国家科学基金会（NSF）向全美各地进行神经和认知系统的创新研究的跨学科团队颁发了19个 ...
日前，IBM 公司宣布推出其分布式深度学习软件的测试版，该软件证明了在深度学习表现出来的技术飞跃。深度学习是人工智能的一种形式，它依赖于人工神经网络的应用。其重点是让计算机能够像人们那样理解数字图像、视频 ...
时刻跟上深度学习领域的最新进展变的越来越难，几乎每一天都有创新或新应用。但是，大多数进展隐藏在大量发表的 ArXiv / Springer 研究论文中。为了时刻了解最新动态，我们创建了一个阅读小组，在 Analytics Vidhya
当我和我的队友们进入这片雨林的时候，这场长达三个月的比赛已经进行了两个月，想要弯道超车，后来居上，那可不是件容易的事。我们最后在比赛结束的时候，获得了Public Leaderboard第一， Private Leaderboard第六的 ...
英伟达（NVIDIA）今天公布了新一季财报：营收22.3亿美元，同比增长56%；净利润5.8亿美元，同比增长123%。来自汤森路透的数据显示，华尔街分析师对英伟达的平均预期为：营收增长37%，净利润增长70%。所以，英伟达交出 ...
一个古老的诅咒一直萦绕着数据分析：我们用来改进模型的变量越多，那么我们需要的数据就会出现指数级的增长。不过，我们通过关注重要的变量就可以避免欠拟合以及降低收集大量数据的需求。减少输入变量的一种方法是鉴 ...
日，四名亚马逊工程师注册了一项基础性专利，这项专利的内容日后最终演变成了Alexa。专利涉及了一种人工智能系统，该系统旨在与人类语言，这一世界上最大、最复杂的数据集进行互动。工程师当时只需要使用 ...
作为谷歌旗下专攻人工智能的子公司，DeepMind存在的意义就是“突破人工智能的边界，开发可以解开复杂问题的系统”。而为了衡量这一目标，DeepMind往往会选择在人类擅长的领域中挑战人类（并胜之）。而在雅达利（Atar ...
在R和Python之间进行选择一直是个有争议的话题。机器学习世界被划分为偏爱一种语言而不是另一种语言。但是随着深度学习的爆发，这种平衡转向了Python，因为它有大量的深度学习库和框架。
我个人从R转向Pytho ...
在Tensorflow库中添加封装评估量。所添加的评估量列表如下：1. 深度神经网络分类器（DNN Classifier）。2. 深度神经网络回归量（DNN Regressor）。3. 线性分类器（Linear Classifier）。4.线性回归量（Linea rRegres ...
计算机视觉、机器学习和神经网络成为了计算机科学领域最受瞩目、研究最多的课题。我们很幸运地与Samyak Datta 进行了交流，他是“Learning OpenCV 3 Application Development”一书的作者。Samyak 今年秋天将进入佐 ...
语言总是随着时间演变，词义不可避免地受到经济、政治或者文化因素的影响。一个很简单的例子就可以反映这种语言的动态演变现象：例如词语“丈夫”， 在古代汉语中指代成年或未成年的男性，而在现代汉语中则仅指已婚 ...
美国有关自动驾驶的一项新草案值得关注――将允许像福特、谷歌和 Uber 这样的公司可以更容易在美国公路上测试和部署自动驾驶车辆。该法案名为――“Safely Ensuring Lives Future Deployment and Research In Vehicl ...
2014年是物联网WiFi市场关键的转折期，此前传统WiFi方案的价格超过40元，在对成本较敏感的电子产品消费市场应用普及较低。在2014年初，高通推出WiFi SOC芯片Atheros4004，TI推出3200芯片，芯片价格都在3美元左右，瞬 ...
此前，知名作家迈尔克-路易斯的作品《点球成金》中，曾讲述过棒球运动中使用机器学习的案例：奥克兰运动者队总经理，运用数据模型，成功完成了球队转型。尽管这位总经理可以调用的资金极其有限，但他让机器帮他找到 ...
CUDA和iPhone同岁。2007年6月，英伟达推出CUDA。在这个技术的驱动下，GPU的大规模并行计算能力得到进一步释放，英伟达的产品从此走出图像处理领域，成为一款通用处理器，并在多年以后，推动人工智能研究取得突破。那 ...
今日，ACL 2017 首先公布了终身成就奖，该奖项得主是哈佛大学 Barbara Grosz 教授。而后公布了本届 ACL 的 5 篇最佳论文奖项。哈佛大学 Grosz 教授对自然语言处理和多智能体系统做出了杰出贡献。她开发了最早的计算 ...
机器学习（尤其是深度学习）最近已经在语音识别、图像识别、自然语言处理和推荐/搜索引擎等方面取得了变革性的成功。这些技术在自动驾驶汽车、数字医疗系统、CRM、广告、物联网等方面的应用非常有前途。当然，资本带 ...
恩，这个系列的第一篇文章，先谈点轻松的，常用CPU架构浮点峰值的理论计算和实测。做性能优化，先要知己知彼，了解自己优化的CPU的能力上限。这样优化做到什么程度，心里会有数。本文只介绍Intel x86-64架构，并且只 ...
由菜鸟网络打造的中国最大的机器人仓库，日前已经在广东惠阳投入使用。与以往一些智慧仓库只有几十台搬货机器人不同的是，这一仓库内有上百台机器人，它们既协同合作又要独立运行，代表着中国机器人仓库的最高水平， ...
今天，我们就用某理财类app和某大型网购平台的用户个人数据来看看，相对真实的社会财富分配是什么样的？在这张图上，绘图区的上半部分是每个用户的财富值排名（不同的颜色代表不同财富值的人口），下半部分是一张中 ...
我们生活的环境安全吗？ 怎么生活得更安全？最近，城市数据团使用上海闵行公安分局提供的数据，通过总结对居民安全感影响最大的几类案件的发案特点及预防措施，尝试对这两个问题进行解答。闵行区是一个非常好的城区 ...
“知识图谱：我们到底想解决什么问题” 中问题的答案其实就存在于几个成熟技术艺术般的组合当中：语义，图数据库和Web Service。
语义：由诸多领域（图书馆学，信息科学，语言学）中的最佳实践组合起来，那些本来是 ...
随着线上信息的体量、复杂度和动态性的不断增长，推荐系统已经成为了一种可以有效解决这种信息过载问题的关键性解决方案。近几年，深度学习的革命性进步在语音识别、图像分析和自然语言处理方面都受到了广泛关注。与 ...
如果把深度学习比作一座城，框架则是这座城中的水路系统，而基于拓扑图的计算恰似城中水的流动，这种流动赋予了这座城以生命。一个优雅的框架在保证城市繁荣的同时，还能让这座城市散发出独特的魅力，使它保持永恒的 ...
CV人物1：Jianbo Shi史建波毕业于UC Berkeley，导师是Jitendra Malik。其最有影响力的研究成果：图像分割。其于2000年在PAMI上多人合作发表”Noramlized cuts and image segmentation”。这是图像分割领域内最经典的 ...
R是一门主要用于统计分析和作图的高级编程语言。制定本规范的目的是让R代码更容易被理解、分享和验证。以下的规范是谷歌的R用户社区共同讨论拟定的。标识符包括变量名、函数名、常数变量名等。不要使用下划线(_)或连 ...
面对越来越多的 DNN 专用处理器设计（芯片和 IP），我们很自然的需要解决一个问题「怎样对不同的 DNN 处理器设计做出公平的比较和评价？」能不能像手机跑分一样也让它们跑个分呢？这实际是个基准测试（Benchmarking ...
DrQA 是一个开放域的问答系统。向 DrQA 系统输入一段文本，然后提一个答案能在该文本中找到的问题，那么 DrQA 就能给出这个问题的答案。代码相关的论文将在 ACL 发表。向该团队致敬：FAIR 研究工程师 Adam Fisch、斯 ...
卷积神经网络作为深度学习的典型网络，在图像处理和计算机视觉等多个领域都取得了很好的效果。卷积核大小（Kernel Size）：定义了卷积操作的感受野。在二维卷积中，通常设置为3，即卷积核大小为3×3。步幅（Stride） ...
这是最好的AI时代。它潜伏在我们周围，为现代生活提供便利。语音识别、刷脸解锁、私人助手、图像美化、推荐排序、预测疾病、服装设计、艺术创作、火星探索……AI已经渗透到我们生活的每个角落。还有一些你想象不到的 ...
HoloLens 全息头盔中包含一款名为 Holographic Processing Unit（HPU）的全息处理芯片。HPU负责处理包括微软飞行时间传感器，头部跟随摄像头、惯性测量单元（IMU）及红外摄像头等传来的信息。用微软的话说，“HPU 使 ...
特征工程是指为机器学习算法创造新特征的过程，这是提高模型预测表现的有力手段。创造新的特征是一件十分困难的事情，需要丰富的专业知识和大量的时间。机器学习应用的本质基本上就是特征工程。――Andrew Ng通过特 ...
最近在知乎上看到一个很有趣的问题：房间里有100个人，每人都有100元钱，他们在玩一个游戏。每轮游戏中，每个人都要拿出一元钱随机给另一个人，最后这100个人的财富分布是怎样的？以下是三个不同的答案，请投票我们 ...
首先，在这里，介绍一下我们最近在ICLR（International Conference on Learning Representations）上发表的论文《利用贝叶斯神经网络进行随机动力系统中的学习与策略搜索》（ICLR 2017）。点击此处查看论文代码和视 ...
大多数的科技巨头在应用程序和科研方面都下了血本，希望能在人工智能发展的潮流中保持领先状态。走在潮流最前沿的领域是对话式交互（个人助理或聊天机器人）和计算机视觉以及自动导航――由于硬件和大数据的进步，以 ...
早在2014年，阿里与优酷土豆发布视频电商战略，称未来可以实现边看边买，使得视频电商的概念，继微博电商，朋友圈电商之后浮出水面。电商平台拥有少量商品，而视频网站具有巨大的流量，二者结合是发展的必然结果。电 ...
对于数学考试，最大问题是理解题意，即语义解析的准确性。对于问句的理解精度要求非常高，稍有偏差就导致结果错误。尤其是应用题，比如经典的抽水，放水问题，追击问题等。这类题目虽然很简单，可对于计算机理解起来 ...
领域问答的基础在于领域知识图谱。对于特定领域，其高质量、结构化的知识往往是不存在，或者是极少的。本章希望从一般文本描述中抽取富含知识的句子，并将其结构化，作为问答系统的知识源。特别的，对于不同的领域， ...
本节着重关注由一系列 BFQ 组成的复杂问题，例如表 1.1 中的问题 ○f 可以被分解为两个 BFQ：(1) BarackObama’swife (MichelleObama)；(2) WhenwasMichelleObama born? （1964 年）。显然，第二个问题的答案依赖于 ...
问答系统（QA）已经成为人类访问十亿级知识图谱的流行方式。与网络搜索不同，在自然语言问题能够被精确地理解和映射到知识图谱上的结构化查询的前提下，基于知识图谱的问答系统将给出准确且简洁的结果。这其中的挑战 ...
智能时代，人类期望有更简单自然的方式与机器进行交互。因此以自然语言为交互方式的智能机器人广受青睐，受到各大 IT 厂家追捧。而其底层核心技术之一，即为自然语言问答系统。问答系统提供了自然语言形式的人与产品 ...
模型训练只是其中耗时最短的一环。如果把机器学习流比作烹饪，那么模型训练就是最后翻炒的过程；烹饪的大部分时间实际上都花在了食材、佐料的挑选，洗菜、择菜，食材再加工（切丁、切块、过油、预热）等步骤。在微博 ...
几个月前注意到Graphcore这个公司，是因为他们的IPU处理器：Intelligence Processing Unit。但除了看到他们一系列非常漂亮的DNN Graph（比如上面这个对于ResNet Conv1的可视化处理）之外，一直没有更详细的信息。在 ...
2017年2月，微软研究院与剑桥大学宣布他们合作开发了一种新的算法，名为DeepCoder――现在看来可能跟算法的名称有关，因为Coder也是程序员的昵称，有读者以为机器程序员来了，传出了“DeepCoder能够从网络论坛和开源 ...
Power BI 一直支持在页面或报告中嵌入自定义R图表. 但与标准Power BI 视觉效果形成鲜明对比的是, 这些R图表都是静态的. 当刷新或过滤报告数据时R图表本来是要更新的, 可是无法与屏幕的上的R图表进行交互 (例如 显示
Stanford CoreNLP 提供了一组自然语言分析工具，可采用原始的英文文本输入，并提供单词的基本形式、读音形式、无论它们是公司名还是人名等，以及规范化日期、时间和数字数量。它根据短语和单词之间的联系来标记句子
我第一次学习 LSTM 的时候，它就吸引了我的眼球。事实证明 LSTM 是对神经网络的一个相当简单的扩展，而且在最近几年里深度学习所实现的惊人成就背后都有它们的身影。所以我会尽可能直观地来呈现它们――以便你们自己 ...
牙膏厂和农企的新一代服务器处理器终于碰面了，在2017年7月盛夏，AMD和英特尔先后发布了新一代服务器处理器――代号“那不勒斯”的EPYC系列处理器（图上），和代号“SkyLake”的Xeon SP（Scalable Processor，可扩展 ...
随着神经机器翻译（NMT）技术的不断演进，越来越多的科研机构和公司选择开源自己的项目，让更多人能够开发出自己的 NMT 模型。此前，清华大学开源了神经机器翻译工具包 THUMT，谷歌也推出了基于 TensorFlow 的 NMT
人工智能(AI) 正处在井喷期，貌似我每次上网都能看到一个新的AI产品，从消费电子到汽车再到社交软件甚至到高端分析软件。例如，看看那些发表在电子商务，法务以及其他若干领域里的AI方面的文章。现在甚至已经有AI产
人工智能的迅速发展将深刻改变人类社会生活、改变世界。为抢抓人工智能发展的重大战略机遇，构筑我国人工智能发展的先发优势，加快建设创新型国家和世界科技强国，按照党中央、国务院部署要求，制定本规划。人工智能 ...
网站验证码就如同马奇诺防线一样，阻挡了爬虫工程师的正面进攻。随着爬虫和反爬虫双方围绕验证码的不断较量，最终导致了验证码识别难度的不断上升。正面硬刚验证码，想要识别它，是件挺复杂的事，涉及到图像处理技术 ...
与工业时代的蒸汽机和信息时代的互联网一样，人工智能在智慧时代扮演着关键角色，是支撑引领人类社会从信息时代走向智慧时代的基础。我国要赢得新一轮工业革命竞争，必须抢占人工智能高地，这不仅需要战略高度重视， ...
不得了，人工智能是一个大风口。好多人都在不停地讲：AI和机器学习将颠覆每个行业，所有的工作都将消失，巴拉巴拉……据说现在不少准备融资的创业者，都给自己加上人工智能的标签，准备搭乘新一波的红利。有VC朋友说 ...
JavaScript是一种强大而动态的语言，是ECMAScript语言规范中已经标准化的最强大的解释型语言之一，它与HTML、CSS一道被称为web开发的三大核心技术。即便JavaScript很火，也不是每个人都能熟练掌握JavaScript插件，本 ...
Spark Streaming支持实时数据流的可扩展（scalable）、高吞吐（high-throughput）、容错（fault-tolerant）的流处理（stream processing）。Spark在接收到实时输入数据流后，将数据划分成批次（divides the data int ...
物联网作为一个正蒸蒸日上的新市场，以每年年复合增长率16.9%的速率快速攀升，将取代现有的生活方式，物联网在未来的变革以及市场的爆发点究竟有哪些？物联网作为一个正蒸蒸日上的新市场，在今年6月，科技研究机构国 ...
最近，我在做一个需要使用Cython来保护整个代码库的Python项目。起初尽管保护Python源码免受逆向工程的影响似乎是一项徒劳无功的任务，但是所有代码的cythonizing都会带来合理的安全性（二进制文件非常难以拆解，但 ...
抱怨 JS 疲劳就像是在抱怨人类发明了太多解决问题的工具：从邮件到飞机到宇宙飞船。上周我在 NebraskaJS 2017 会议上做了一个和这个话题极其类似的演讲，我也收到了许多积极的反馈，所以我就想这个演讲也可以写成一 ...
本案例介绍了微软大数据平台团队设计和部署的基于开源技术（Kafka、Spark、ElasticsSearch、Kibana）的大数据质量监控平台，这个平台具有实时、高可用、可扩展、高度可信的特性，成为微软Bing、Office365、Skype等年 ...
投身开源软件的人，多是有情怀的理想主义者，期望通过无私的努力，让世界更美好。这是原本专注于专利问题的笔者，偶然被牵入到开源研究项目后，对他们所产生的第一印像。然而，即使专利人也有专利情怀，现实世界中开 ...
Vue.js 是一个用于创建 Web UI 的 JavaScript 库。结合其他的一些工具，它也可以成为一个“框架”。通过我们的上一篇博客，想必你已经知道 Vue.js 是顶级框架之一，并且在很多场景下已经替换了 Angular 和 React。这 ...
作为一个软件开发者，最大的挑战就是在不断涌现的新技术中进行取舍，持续学习是从事这一行业的必备技能。在这个领域里，技术更新最快地又非前端莫属了。各种框架的出现、版本的更新此起彼伏，呈现出一派欣欣向荣之景 ...
本文以 JavaScript 为例，介绍了该如何优化函数，使函数清晰易读，且更加高效稳定。软件的复杂度一直在持续增长。代码质量对于保证应用的可靠性、易扩展性非常重要。然而，几乎每一个开发者，包括我自己，在职业生涯 ...
作为一名开发人员，对于工具的需求是一直都有的。工具使得开发人员只需要关注那些重要的事情就可以了，因此工作也更有效率，生活也更轻松了。对于开发人员来说，由于很难找到更好的替代方案，因此只能一直使用那些熟 ...
如果采用python版本的装饰器，那么这个功能就很难写的出来，因为没有利用到继承、接口和组合的特性。都是装饰器，在应对不同的场景是有不同的写法，像python版本的装饰器最好是用来解决单一的一次性目的(例如: 验证 ...
观察者模式强调的是松耦合，通过程序之间的强约定弱依赖实现通用场景的模型。当数据发生变化时执行回调函数(provide a callback for notification of events/changes to data).为了交互对象之间的松耦合设计而努力。
单从功能上来讲，在父类中增加了一个fly方法，那么所有的子类都拥有了fly行为，这是没问题的。但是从业务逻辑的角度来讲，那么并非所有鸭子都能飞(一般像被驯化的家鸭是没有飞行能力了，野鸭一般都能飞，故事中的橡 ...
作为一个集群系统，总要有一个统一的地方维护整个集群以及任务的元数据。而且作为集群系统的控制节点，为了高可用性，往往存在多个Master，在多个Master中间，总要有一个Leader。在Docker Swarm Mode里面，多个Manag ...
随着MySQL自身的发展与不断完善，不知不觉中整个互联网行业已离不开这个完善又小巧的关系型数据库，整个生态链也已经变得非常成熟，即便是初创企业和传统企业也可以放心大胆地把数据库迁移到MySQL上来。在大家和MySQ ...
比特币交易的验证是由计算机“开采”更多的比特币来实现的。要通过分散的比特币矿工网络进行验证，这些交易需要被捆绑成“区块”。区块的规模越大，每秒钟验证的交易数量就越多。对于区块最大限值为1MB的比特币而言
DB-Engines 发布了 2017 年 8 月份的数据库排名。本月排名前 20 名中原本排在第 14 位的 Solr 以 0.04 分的优势取代 SAP Adaptive Server 成为第 13，其他数据库的排名均没有变化。Solr 是一个高性能，采用 Java 开 ...
什么样的技术会带来生产力的极大提升？技术含量是否与生产力提升成正比关系？带着问题，我们先看一个例子：在工业革命时期，瓦特用于“改良”蒸汽机的技术，就是极大提升效率的技术。这里有一个误解，有人认为瓦特发 ...
最近线上 MySQL 接连发生了几起数据异常，都是在凌晨爆发，由于业务场景属于典型的数据仓库型应用，白天压力较小无法复现。甚至有些异常还比较诡异，最后 root cause 分析颇费周折。那实际业务当中咱们如何能快速的 ...
在MySQL中，线程池指的是用来管理处理MySQL客户端连接任务的线程的一种机制，我厂用的percona版本已经是集成了线程池，只需要通过如下参数开启即可。在继续了解MySQL线程池之前，我们首先要了解为什么线程池的引入可 ...
如果其他地方的人，能懂得欣赏这些数学家如何做研究，如何建立起这个优秀的学 系，而且在这段过程里，还协助建立了哈佛大学的地位，我认为这会是很棒的事。更何况，这些伟大哈佛数学家的个人轶事，读来也饶有兴味。 ...
42% 开发者薪资超过 10万美金，但这大部分都是基于美国的开发者的调查。Go & Scala 是最赚钱的语言。PHP 这次排在最后，出乎你意料吗？还有其他值得注意的就是男性仍然比女性多赚6k以上，并且一周只要工作超过 60
当你阅读一篇论文时，你不会只读一次。你首先要阅读标题，然后你要决定要不要读摘要，读完摘要你还要决定是否浏览结果，之后你再决定是否浏览整个文本，等等。人生苦短，要读的文章实在太多了。
要读懂一篇有很多代 ...
《中国有嘻哈》火了，作为一名对中国HipHop毫无了解的吃瓜群众，我开始好奇以下三个问题：HipHop到底在唱些什么？各个国家和地区的 Rapper 们想要说的唱的都有哪些特色？如果想当一个Rapper，我应该怎样写词才能紧跟 ...
业内人士一直将区块链技术视为金融资本市场基础设施的未来，不仅各国央行纷纷对区块链技术展开调查与研究，就连各大证券交易所也纷纷开始接触这一技术。近日，纳斯达克与瑞士主要的证券交易所签署了一份协议，内容为 ...
我们在用遗传算法优化目标函数的时候，函数通常都是高维函数，其导数一般比较难求取。这样我们的适应度函数计算通常都是比较费时的计算。例如在使用遗传算法寻找最优结构时候通常需要调用量化软件进行第一性原理计算 ...
作为这个世界上最流行的编程语言之一的合作设计者，我经常遇到一种令人非常沮丧的行为( Python 社区和其它领域中都存在)就是社区中有影响力的人尝试去在其它开源社区中灌输对于”缺失“的恐惧感，并以此驱动别人对本 ...
Heap 是一个用户分析工具，它自动捕捉每个用户与网站或应用进行的交互行为。成功安装于网站后，Heap 会自动追踪每个页面的浏览量、点击量、表单提交等信息。这样每个网站拥有者可以针对不同子集的原始数据，使用 Hea ...
有赞使用 Storm 已经有将近 3 年时间，稳定支撑着实时统计、数据同步、对账、监控、风控等业务。订单实时统计是其中一个典型的业务，对数据准确性、性能等方面都有较高要求，也是上线时间最久的一个实时计算应用。通 ...
同时诞生于2006年，十年间云计算革了架构的命，那Hadoop呢？Doug Cutting，在外界看来至少有两个称谓：作为技术大牛他是Hadoop之父，作为商业领袖他是Cloudera首席架构师。近日，Doug Cutting来到北京，也因此接受了 ...
通过创建与主实例保持虚拟同步的虚拟机，使应用在服务器发生故障的情况下也能够持续可用。这种方法常通过使主虚拟机 和辅助虚拟机执行相同顺序的 x86指令来完成此过程。主虚拟机捕获所有输入和事件，并在辅助虚拟机 ...
一个人生命中最大的幸运，莫过于在他的人生中途，即在他年富力强的时候发现了自己的使命。1、幸福取决于频率，而非强度。再大的单次幸福事件，持续的时间也不会比较小的多太多；2、财富取决于单次的幅度，而非频率； ...
Paxos（分布式一致性算法）作为分布式系统的基石，一直都是计算机系统工程领域的热门话题。Paxos号称是最难理解的算法，其实真的这么困难么？“X-Paxos”是阿里巴巴数据库团队面向高性能、全球部署以及阿里业务特征 ...
笔者在刚开始学习数据库的时候，没少走弯路。经常会遇到各种稀奇古怪的 error 信息，遇到报错会很慌张，急需一个解决问题的办法。跟无头苍蝇一样，会不加思索地把错误粘到百度上，希望赶紧查找一下有没有好的问题处 ...
每一个涉及管理OpenStack部署的人员都很快了解到，节省成本并消除耗时的任务是这一云平台所提供的最大好处。然而，许多以OpenStack为中心的机构（包括Canonical）的领导者都相信，随着软件即服务、容器和云平台的不 ...
7月31日下午，受国家发改委法规司委托，中国招标投标协会组织市场主体、业内专家学者，就《招标投标法》第十四条关于工程招标代理机构资质管理的条款修订收集意见。1、取消招标代理资格对招投标市场的影响和效果。2 ...
人民日报分别于5月31日、6月26日发表《质量应是企业立身之本》、《最低价中标，该改改改了》，在不到1个月时间内罕见两谈&最低价中标&问题。两篇社论中谈及一些企业低于成本价投标，中标以后通过偷工减料降低成 ...
“微服务架构”是现在编程中很流行的概念，未来能和最新趋势保持同步，我也一直在学习了解这个架构，如果具体点说，我一直在寻找一种使用Spring在Java中实现微服务架构的方法。为什么我会有这个想法，这是有一定的背 ...
前几月经常看到有 MySQL 到底能不能放到 Docker 里跑的各种讨论。这样做是错的！这样做是对的！说错的理由也说了一大堆，说对的思想也很明确。大家都有道理。但是我本人觉得这样的讨论落地意义不大。因为对与错还是 ...
由于业界的注意力从笨拙的Hadoop和数据湖转向实时数据流，Apache Kafka继续一路崛起。Apache Kafka在高歌猛进。正如行业分析公司Redmonk的芬坦?瑞安（Fintan Ryan）特别指出，去年Kafka在开发人员当中的人气指数飙
近日，重庆市公安局网安总队成功查处了一起网络运营者在提供网络服务过程中，未依法留存用户登录网络日志的违法行为。这是自今年6月1日《中华人民共和国网络安全法》（下称《网络安全法》）正式实施以来，重庆市公安 ...
数独是一个很好玩的游戏，可以锻炼推理能力。下面的代码可以自动生成数独游戏题目。from random import shuffle, randrangedef generate():
# 初始网格
line = list(range(1,10))
for i in range(9):
在这篇文章中，我将讨论一个工具，用以分析Python中CPU使用情况。CPU分析是通过分析CPU执行代码的方式来测量代码的性能，以此找到代码中的不妥之处，然后处理它们。接下来我们将看看如何跟踪Python脚本使用时CPU使用 ...
提起 Linus Torvalds 大家的第一反应是怎样的？是严苛刻薄，还是神级伟大，亦或是孤傲清高？二十五年来，Linus Torvalds 一直坚持在技术第一线，开发了 Linux 和 Git 两个项目，并深刻影响了软件行业。如果没有 Linu ...
网易的Kubernetes集群是基于网易云IaaS平台OpenStack上面进行部署的，在外面封装了一个容器平台的管理层，负责统一的账号，计费等。Kubernetes集群当然是要高可用的，因而会有多个Master节点。其中APIServer前端有负 ...
Kubernetes的API Server要负责进行认证和鉴权。Kubernetes的认证方式也是如OpenStack或者AWS一样，是通过Token和PKI进行认证的。所谓Token的方式就是在服务端配置一个很长的字符串，在客户端请求的时候带上这个字符 ...
Kubernetes是设计用来实施私有容器云的，然而容器作为公有云，同样需要一个管理平台，在Swarm，Mesos，Kubernetes中，基于Kubernetes已经逐渐成为容器编排的最热最主流的平台，网易基于Kubernetes实现了自己的容器公 ...
仅用 Python 和命令行就可以实现人脸识别的库开源了。该库使用 dlib 顶尖的深度学习人脸识别技术构建，在户外脸部检测数据库基准（Labeled Faces in the Wild benchmark）上的准确率高达 99.38%。该项目是要构建一款 ...
日前，国务院印发《新一代人工智能发展规划》，这是我国首个面向2030年的人工智能发展规划。在BAT以及众多A股公司纷纷着力人工智能的同时，新三板企业在人工智能领域也不断发力。Wind数据统计显示，新三板挂牌企业中 ...
Python 没有覆写（override）的概念。严格来讲，Python 并不支持「多态」。为了解决继承结构中接口和实现的问题，或者说为了更好的用 Python 面向接口编程（设计模式所提倡的），我们需要人为的设一些规范。请考虑 S ...
在运维MySQL时，经常遇到的一个问题就是活跃连接数飙升。一旦遇到这样的问题，都根据后台保存的processlist信息，或者连上MySQL环境，分析MySQL的连接情况。处理类似的故障多了，就萌生了一种想法，做个小工具，每次 ...
最近，准备升级一组MySQL到5.7版本，在安装完MySQL5.7后，在其data目录下发现多了很多.pem类型的文件，然后通过查阅相关资料，才知这些文件是MySQL5.7使用SSL加密连接的。本篇主要介绍如何使用MySQL5.7 SSL连接加密 ...
当我们逐渐向着微服务、云原生迈进的时候，传统静态的、相对简单的网络安全策略开始显得吃力。 Kubernetes 的 Network Policy 特性正是来解决这个问题的。在刚刚出炉不久的1.7版本中，该特性也被扶正成为GA。让我们 ...
前几天晚上看到同事朋友圈里一个关于工作内容的文章，突然回忆起很多年以前上班时候的时光。仔细回想，十年前的今天，我第一次走进CBD的一座豪华写字楼里，开始了我的实习生涯。我的实习，持续了整整14个月从未间断
在需要支持移动/平板电脑应用及普通桌面浏览器访问的时代，网站的普及率和有效性很大程度上取决于其可用性和性能。一个访问缓慢的网站会使得访问者或潜在的客户流失，并导致商业的失败。一个访问速度相当快的网站将 ...
分布式系统是网络化的计算机系统，海量数据的互联网应用只能通过分布式系统协调大量计算机来支撑。微信后台存储大量使用了分布式数据存储方式的NoSQL集群，比如核心业务：账号、支付单据、关系链、朋友圈等。存储设 ...
与工业时代的蒸汽机和信息时代的互联网一样，人工智能在智慧时代扮演着关键角色，是支撑引领人类社会从信息时代走向智慧时代的基础。我国要赢得新一轮工业革命竞争，必须抢占人工智能高地，这不仅需要战略高度重视， ...
最近新一代人工智能发展规划已编制完成，规划对直到2030年的中国人工智能产业进行系统的部署，同时包括与此相关的人工智能重大科技项目。与此同时，随着技术的进步与需求的拓展，人工智能也掀起了一股投资潮和创业热 ...
7月4日消息，据BBC报道，英国信息委员会（ICO）日前做出裁决，判定英国国家医疗服务体系信托基金下属皇家自由医院在与谷歌分享数据时，未能充分保护患者隐私。皇家自由医院曾将大量患者数据交给谷歌子公司DeepMind进 ...
在机器学习领域，我们可以期待的一个必要的转变是：从只能做模式识别和获得局部的泛化，到能够执行抽象和推理的模型，这能获得极端的泛化。当下，具有基本推理形式能力的AI程序都是由人类程序员硬编码的：例如，依赖 ...
网站验证码就如同马奇诺防线一样，阻挡了爬虫工程师的正面进攻。随着爬虫和反爬虫双方围绕验证码的不断较量，最终导致了验证码识别难度的不断上升。正面硬刚验证码，想要识别它，是件挺复杂的事，涉及到图像处理技术 ...
在本次 ImageNet 竞赛中，南京信息工程大学和帝国理工学院的团队 BDAT 获得了目标检测的最优成绩，最优检测目标数量为 85、平均精确率为 0.732227。而在目标定位任务中Momenta和牛津大学的 WMV 团队和 NUS-Qihoo_DPN ...
能够达到期望的环境是需要设计的，但是很难分析性地用标准设计方法处理这类复杂的对象与环境交互问题，对整个解空间进行穷举演算的计算成本又太高。环境设计任务：智能体与环境交互，智能体是相对固定的，环境学习一 ...
人工智能的迅速发展将深刻改变人类社会生活、改变世界。为抢抓人工智能发展的重大战略机遇，构筑我国人工智能发展的先发优势，加快建设创新型国家和世界科技强国，按照党中央、国务院部署要求，制定本规划。人工智能 ...
大约二千五百年前，一个美索不达米亚商人收集了一些粘土、木材和芦苇，随着时间的推移，通过这些材料，他们发明了算盘，能够在商品交易过程中记录货物数量、理清资产，这带动了经济的蓬勃发展，也改变了人类社会。那 ...
新买回来的不带水冷公版GPU，在满负载运行的时候，温度从室温马上飙升到85度，而且模型训练不是几分钟完事，很有可能要长期保持在高温状态下运行，让如此昂贵的GPU一直发烧真是让人太心疼！首先得到知乎上一位朋友的 ...
Yelp 承载了上亿张用户上传的照片，这些照片涵盖了美食、发型，甚至我们最新发布的 #yelfies 功能等内容。用户通过手机应用或网站下载这些图片时会占用大量带宽，而图片本身的存储和传输也需要 Yelp 付出不菲的成本 ...
随着神经机器翻译（NMT）技术的不断演进，越来越多的科研机构和公司选择开源自己的项目，让更多人能够开发出自己的 NMT 模型。此前，清华大学开源了神经机器翻译工具包 THUMT，谷歌也推出了基于 TensorFlow 的 NMT
一项由清华大学计算机系智能技术与系统国家重点实验室、清华国家信息实验室、清华大学计算机科学与技术系、英特尔中国研究院、清华大学电子工程系的研究人员共同参与的关于高效视觉目标检测的研究已经被 CVPR 2017
人工智能(AI) 正处在井喷期，貌似我每次上网都能看到一个新的AI产品，从消费电子到汽车再到社交软件甚至到高端分析软件。例如，看看那些发表在电子商务，法务以及其他若干领域里的AI方面的文章。现在甚至已经有AI产
在深度学习中，有许多不同的深度网络结构，包括卷积神经网络(CNN或convnet)、长短期记忆网络(LSTM)和生成对抗网络(GAN)等。在计算机视觉领域，对卷积神经网络(简称为CNN)的研究和应用都取得了显著的成果。CNN网络最 ...
演讲从模式识别（Pattern Recognition）的起源说起。1957年，Perceptron 诞生，成为第一个 LearningMachine。LeCun 说，目前的机器学习算法大多衍生自 Perceptron的概念。从那时起，模式识别的标准模型就可以分为 3
2013年夏天，马修?蔡勒（Matthew Zeiler）刚刚获得纽约大学的博士学位(人工智能领域)，正是意气风发的时候。谷歌高级工程副总裁艾伦?尤斯塔斯打电话给他的时候，他正在河边跑步，而且刚从谷歌AI组的实习岗位离开几 ...
对于关注全球人工智能行业动态的人来说，今年年初的两件事情尤其的注意。首先，微软高管陆奇1月宣布，他虽然从自行车事故中恢复过来，但却不准备重返这家全球最大软件公司，而是会出任中国顶尖搜索引擎公司百度的COO ...
在这篇文章中，我将尽我所能揭秘三种降维技术：PCA、t-SNE 和自编码器。我做这件事的主要原因是基本上这些方法都被当作黑箱对待，因此有时候会被误用。理解它们将能让读者有办法决定在何时如何使用哪一种方法。为了 ...
回归分析是一种预测性的建模技术，它研究的是因变量（目标）和自变量（预测器）之间的关系。这种技术通常用于预测分析，时间序列模型以及发现变量之间的因果关系。例如，司机的鲁莽驾驶与道路交通事故数量之间的关系 ...
游戏是人工智能研究的完美实验环境。在游戏环境中，可用于训练人工智能模型的数据是近乎无限、低成本、可复制，相比现实世界的经验更容易获得。这些特点正帮助 Facebook 人工智能实验室（FAIR）探索一些短期目标，如 ...
上一周，谷歌又发布了一项破纪录的AI研究，不过这次的研究结果是对目前 AI 商业化热潮的一盆冷水。传统上大家都认为科技企业的生态系统是靠小公司颠覆大公司、大公司随之瓦解，从而保持创新和非垄断的，消费者和整个 ...
近日，谷歌官方在 Github 开放了一份神经机器翻译教程，该教程从基本概念实现开始，首先搭建了一个简单的NMT模型，随后更进一步引进注意力机制和多层 LSTM 加强系统的性能，最后谷歌根据 GNMT 提供了更进一步改进的
著名黑客乔治?霍兹(George Hotz) 因破解了 iPhone 和 PlayStation 3 在全世界声名大噪。他最近又推出了一款能够使普通汽车实现部分辅助驾驶功能的产品，名为 panda。售价只要 88 美元，可以通过接入汽车的自诊系统 ...
在深度学习领域，神经元是最底层的单元，如果用感知机的模型， wx + b, 加上一个激活函数构成了全部，输入和输出都是数字，研究的比较清楚。别的不说，在参数已知的情况下，有了输入可以计算输出，有了输出可以计算 ...
国内的股票市场，一般认为是更加倾向于主题投资而不是基本面、价值投资的市场，原因之一是散户贡献了大部分成交量。与此同时，监管机构一再教育广大投资者要理性投资、价值投资，在2017年全国证券期货监管工作会议上 ...
科学家们已经在用碳纳米管控制神经元生长并修复神经细胞之间的电子连接了。并且他们已经证明碳纳米管能够安全地用于神经元修复，希望碳纳米管也能恢复脊髓受损的人的神经功能。这种结合碳纳米管的修复神经元方法带来 ...
近来，卷积神经网络的发展，结合对抗生成网络（GAN）等崭新的方法，为图像转换任务带来了很大的提升，包括图像超分辨率、去噪、语义分割，还有“自动补全”，都有亮眼的表现。例如，新智元此前介绍过的使用神经网络 ...
科学的目标是尽可能准确地建构事实。所以，判断观察到的现象是真实存在，还是仅仅是随机的闪现，就尤为重要。如果你声称自己有所发现，但它其实仅仅是随机出现的事件而已，这就称作“虚假发现”或“假阳性”。假阳性 ...
想要从事数据分析师这个岗位，那自然首先需要对这个岗位有所了解。最直接、最真实的方式就是从企业那里获得需求讯息，这样才最能够指导自己的学习方向和简历准备。本文即是要利用爬虫爬取拉勾网上数据分析这一岗位的 ...
Encoder-Decoder框架可以看作是一种文本处理领域的研究模式，应用场景异常广泛，本身就值得非常细致地谈一下，但是因为本文的注意力焦点在AM模型，所以此处我们就只谈一些不得不谈的内容，详细的Encoder-Decoder模型 ...
机器翻译，即跨语言间的自动翻译，是机器学习社区最活跃的研究领域。在机器翻译的众多方法中，序列到序列（sequence-to-sequence，seq2seq）模型
近期获得巨大成功。由于其可以使用深度神经网络获取句义，该模型成
不必花费太多心思就从人群中找到熟识的脸，对于绝大多数人而言都是小事一桩。人类的大脑已经这样做了几百万年。不过，这其中具体涉及的神经系统过程却十分复杂，研究人员也对其倾注了很多年的时间。6 月 1 日，在 Ce ...
由吴恩达领导的斯坦福大学机器学习小组，研发出一种新的深度学习算法，可以诊断14种类型的心律失常。吴恩达表示，机器学习模型可以比专家更精确的诊断心律失常。这项研究可能是机器学习彻底改变医疗行业的最新标志之 ...
对于一些人工智能问题，比如玩 Atari 或下围棋，其目标易于定义，即获胜。但是你如何描述定义一个后空翻动作，或者跳跃。当教授人工系统学习运动技能时，精确描述复杂行为的困难是普遍存在的。在这一工作中，仅通过 ...
视频数据正在爆炸性地增长――仅英国就有超过400万个CCTV监控摄像头，用户每分钟上传到 YouTube 上的视频超过300小时。深度学习的最新进展已经能够自动分析这些海量的视频数据，让我们得以检索到感兴趣的事物，检测 ...
2016 年 8 月，英特尔宣布以 4 亿美元的金额收购深度学习芯片公司 Nervana Systems，被外界解读为英特尔布局深度学习的重要信号。一年以来，英特尔围绕 Nervana 做了许多重要的策略调整：3 月 24 日新智元曾报道，英 ...
本周一，2017年联合会杯决赛在俄罗斯圣彼得堡十字架体育场进行。最终，凭借施廷德尔在第20分钟的进球，以年轻球员为主组成的德国二队以1-0战胜智利，捧得冠军。德国在此次联合会杯决赛派出的首发阵容平均年龄为24岁2 ...
今天不废话，直接上干货！1、如何快速录入当天日期与时间？2、如何统计每一种条码的每天库存量？库存数量=累计的进货数量-累计的出货数量=SUMIF(C$2:C2,C2,E$2:E2)-SUMIF(C$2:C2,C2,F$2:F2)3、求项目为A或者B的开头 ...
如果你手上有一批数据，你可能应用统计学、挖掘算法、可视化方法等技术玩转你的数据，但你没有数据的时候，该怎么玩呢？接下来就带着大家玩玩没有数据情况下的数据分析。正如本文的题目一样，我要分析的是上海二手房 ...
生成式模型一直是语音识别的主要方法。然而，这些模型的成功依赖于使用的精密的组合和复杂方法。最近，关于深入学习方面的最新研究已经产生了一种可以替代生成式模型的识别模型，称为“序列到序列模型”。这种模型的 ...
打造一辆无人车，究竟需要哪些软件和硬件？无人车创业公司Voyage今天在官方博客上发文，展示了自家无人驾驶出租车Homer的技术方案，从传感器、计算硬件到算法都有涉及，这是量子位近期见过最详细、最全面的无人车技 ...
整个问答系统的研究，其实是伴随着人工智能的发展而发展。早在上个世纪的60 年代的时候，开发了一系列基于模板的专家系统，但是后来随着研究推进，大家发现这种基于模板或者是用人工规则写的这种问答系统，不能够覆
都说深度学习的兴起和大数据息息相关，那么是不是数据集越大，训练出的图像识别算法准确率就越高呢？Google的研究人员用3亿张图的内部数据集做了实验，然后写了篇论文。他们指出，在深度模型中，视觉任务性能随训练 ...