1.3　如何处理大数据

随着数据越来越多，我们自然就会面临两个问题，第一个问题是这些大量历史数据还有用吗，为了节省空间可否删除呢？毕竟硬件资源有限。答案是有用的，而且可能带来意想不到的价值。我们可能从大量数据中找到某些行业的规律或规则，这些规则可能会带来巨大收益。第二个问题就是如何处理这些海量历史大数据呢？我们的处理办法就是传统的商业智能领域的数据挖掘技术。另外，还有一种处理技术是目前比较火的云计算技术，这种技术对数据处理的实时性要求很高，一般要求秒级处理。读者可以通过以下一个小例子初步了解一下数据挖掘技术和基于云平台的分布式处理技术。