大数据的核心是云技术和商务智能。没有云技术,大数据就没有基础和落地的可能性。没有了商业智能和价值,大数据已经变成了抛弃本质,抛弃了关键目标。简单地说,Bi是大数据的目标驱动力,云技术是大数据的实现。
云计算作为底层计算资源,支持上层的大数据处理。实时交互查询效率和分析能力是大数据的发展趋势。当前的大数据处理正朝着类似传统数据库体验的方向发展。
大数据的4V特性,即类型复杂、海量、快速、有价值,其总体架构包括数据存储、数据处理和数据分析三个层次。三个层面的合作,使得大数据最终产生价值。
数据处理层的核心问题在于分布式数据存储带来的数据处理的复杂性,以及海量存储后数据处理的及时性要求,这些都是数据处理层需要解决的问题。