针对传统的大数据处理框架Hadoop在执行计算任务时抽象层次低、运行速度慢、无法实时计算等问题,提出了一种基于内存的分布式框架Spark作为计算引擎的方法。结合Hadoop框架中的分布式文件存储技术,设计了一个电商用户行为分析系统。
需求方:技术需求征集项目组