大数据的本质是什么？

“大数据”这一关键词几乎每天都会出现在新闻媒体的头条新闻中。根据总务省发布的2013年信息通信白皮书，充分利用大数据的经济效应每年将达777万亿日元。

尽管令人兴奋，但事实是，什么是大数据并没有明确的定义。现在，如果你说任何具有大量数据的东西都被视为大数据，那就有点不同了。

IT行业有一个普遍的共识，即大数据不仅仅是数据量大，而且还具有其类型和频率的特征。

数据类型是指数据是结构化的还是非结构化的。传统上，计算机数据库主要处理结构化数据。无论是会计系统还是客户数据库，数字和字符串都以预定的格式存储。大数据不仅指这种结构化数据，还包括文本、图像、音频、视频和位置信息等“任何事物”。

另一个特征是频率，大数据和传统数据添加或更新数据的频率有显着差异。无论是传统的会计系统还是客户数据库，其基本思想都是将所有数据集中收集到一个数据库中，然后进行聚合和分析。然而，现在充斥世界的大量数据已无法再以这种方式进行处理。大数据的使用意味着将来自各种设备的传感器信息和访问信息等数据实时分发到网站，检查数据之间的相关性，并立即制定有效的措施。

目前，大数据分析在电子商务、SNS 等领域最为先进。在这些领域中，诸如购买物品、与人互动等记录都被记录为数据，因此只能通过计算机处理来完成。根据电子商务网站上的购买历史记录来介绍推荐产品的推荐，以及根据网站浏览历史记录显示可能被点击的广告的行为定向广告可能是大数据最常见的用途。

大数据在支付领域的应用正在取得进展，其中一个备受关注的领域是其在安全系统中的应用。大型电子商务网站以每秒数百万单位的速度交换数据，系统会实时分析海量数据交换中的任何“不自然行为”并发出警告。例如，系统可以立即检测到同一个人在同一电子商务网站上购买大量相同产品，或者购买后在产品页面上花费的时间异常短的行为，从而防止信用卡欺诈行为。 Palantir 就是这样一家公司，由 PayPal 联合创始人创立，该公司表示，仅政府合同一年就收入 10 亿美元。

[照片]自 20 世纪 90 年代以来，非结构化数据量呈爆炸式增长。 （引自总务省2013年信息通信白皮书第143页，图1-3-1-1）