摘要

随着大数据时代的到来，企业挖掘出隐藏巨大的数据价值给带来了更多的市场机会。大数据存储，处理和处理的研究已是企业未来发展的趋势，因此，将开展基于Hadoop + Hive框架进行电子商务数据分析，搭建一个大数据集群平台，用于通过电商案例的存储，处理，分析和可视化展示的实验迎向困难该挑战。

大数据研究背景及意义

中国近几年电子商务的井喷式发展，各服务行业领域体系扩展深化都有大数据的身影，电商行业的交易额更是不断创下新纪录。各环节的“专业化”的数据处理和提取潜藏的数据价值将是互联网行业决策支持的重要导向，传统的数据库已无法处理高达TB的数据，数据的收集，存储，处理，类型转换和分析隐含的价值数据是企业必须解决的首要问题。因此，企业顺应时代的发展不断的涌现分布式存储分析的大数据技术平台。
海量数据的产生对企业和市场影响巨大，政策决策和市场运营准带来了严峻挑战。大数据潜藏的价值不仅影响未来的科技发展，还对市场经济管理有着重要谐调。因此，与实体经济融为一体功能创新能力日益增强的大数据平台已成为中国经济发展的新引擎阶段。传统产业转型升级将是大数据的体现，人工智能的发展将是引领时代潮流发展的新引擎。
中国在大数据领域的成就取得了长足的进步，大数据平台已应用在银行金融电子商务等其他领域，其计算分析能力也达到顶尖水平。但相比与发达国家，在核心理论产品创新能力略有不足，缺乏自主的实验开源平台是国内互联网的一大短板，其重要性不言而喻。
国外的实验先进平台，产品理念与技术的合理结合生成的核心生态系统应用与金融电子商务教育等领域遍布生活的方方面面，产品技术的创新、合理的分析价值观念和先进的数据设备对国外的环境平台不可忽视的贡献。
进行全面的研究、探讨大数据的存储和分析技术,比较和总结,设计和实现电子商务数据分析、重点深入研究大数据分析的问题和应用的解决方案等都是构建大数据分析平台的步骤过程。
1.通过知名网站收集数据源也可图书馆查找相关的书籍以了解大数据框架的设计原理、其数据集中包含的信息。设计并开发应用程序以对电子商务进行数据分析
2.搭建开发环境。
3.重点介绍Hadoop存储技术和数据分析模式，数据抽取转换加载的实现过程，不断优化系统的处理效率
4.分析统计业务指标和展示丰富的数据可视化结果

运行结果

获取地址

V：l18923403603，论文、项目全套