2013-06-24 | 이원욱인턴

大数据?大数据!

本页标题和正文均由AI机器翻译,未经人工审校。准确内容请以韩文原文为准。

近来大数据(Big Data)成为IT业界的热门话题。

2011年美国曾有将海量数据与IT技术结合、分析纳税人行为模式从而找出故意欠税者的案例。当时利用大数据处理软件Hadoop,阻止了每年高达3450亿美元的税收流失。在韩国国内,据悉KT也通过使用Hadoop,将用户数据处理成本节省了567亿韩元。

那么,能创造如此价值的大数据究竟是什么?

维基百科对大数据的定义是:“大数据指超出现有数据库管理工具对数据进行收集、存储、管理、分析能力的大量结构化或非结构化数据集合,以及从这些数据中提取价值并分析结果的技术。”更通俗地说,可以理解为“通过多到无法管理的数据获取某种信息”。将数据加工以获取信息,可以说正是计算机科学处理数据的目的。

得益于技术进步,过去毫无用处的大量数据变得有价值,通过对这些数据进行管理、处理和分析,某些有意义的行动变得可能。

大数据大体具有三个特征:数据量(Volume)、数据速度(Velocity)、数据多样性(Variety)。数据量指的是物理规模。

数据速度指处理数据的速度,即收集、加工、分析数据的过程必须能够实时或按一定周期完成。

数据多样性指数据的形态,包括现有企业数据环境中所用关系型数据库(RDB)内存储的结构化数据,以及未存储于固定系统、含数据库模式的XML、HTML等半结构化数据,还有视频、图像等非结构化数据。而大数据必须能够处理所有这些类型的数据。

利用大数据最著名的案例可以说是2008年美国总统大选。当时奥巴马美国总统的竞选阵营通过各种形式的选民数据库,展开了针对选民的定制化竞选战略。此外,我们常接触的谷歌和Facebook的个性化广告,也是通过用户的检索条件以及照片、视频等非结构化数据,向用户展示定制化广告。

但与此类大数据相关的个人信息侵害问题,是今后必须解决的课题。

阅读韩文原文