大数据一词来自于未来学家托夫勒于1980年所著的《第三次浪潮》，最早开始对大数据进行应用探索的是2005年雅虎公司的Hadoop项目，Hadoop是由多个软件产品组成的一个生态系统，这些软件产品共同实现全面且灵活的大数据分析。
据统计，2013年全球产生的数据达到3.5泽字节（1泽字节大约等于1万亿GB），到2020年产生的数量将增加至44泽字节。世界上来越多的国家开始意识到大数据所蕴含的重要意义，纷纷开始了各自的大数据战略部署，美国在《大数据研究和发展倡议》中提出了将会通过收集庞大而复杂的数字资料从中获得知识和洞见，以提升能力，英国政府2012年时计划在未来两年内在大数据和节能计算和研究上投资1.89亿英镑，法国政府在2013年对大数据的投入也达到了1150万欧元，此外，澳大利亚，加拿大，德国，印度等国家也在大数据方面进行了研究部署。
对于海量并且瞬息万变的大数据来说，如何从中获得真正能够转化为价值的内容才是最终目标，2014年，全球大数据市场规模达到约285亿美元，实现53.23%的增长，预计2020年全球大数据市场规模将达到1263.21亿美元，大数据也将成为全球IT支出新的增长点，70%的大企业和56%的中小企业已经开始和大数据有关的项目和计划。
在未来一段时间内，大数据一定会成为企业、社会和国家层面重要的战略资源，但同时，大数据带来的网络安全与隐私问题也日益凸显，大数据的不断增加对数据管理系统也提出了更高的要求。
