实现思路:
1、 从Redis缓存获取URL统计网址清单
2、 逐条拼凑SQL统计语句,暂时不能支持批量计算,因为按单个网址统计。
3、 发送到HIVE JDBC执行SQL并等待返回结果
4、 逐条接收SQL查询结果,动态添加到LIST集合中。
5、 遍历LIST集合数据,转换成JSON对象,并推送到Redis缓存中。
6、 Over。
向Redis里存入数据
只管坚持自律,上天自有安排!
tianziru 2016-04-14 16:54 原文
实现思路:
1、 从Redis缓存获取URL统计网址清单
2、 逐条拼凑SQL统计语句,暂时不能支持批量计算,因为按单个网址统计。
3、 发送到HIVE JDBC执行SQL并等待返回结果
4、 逐条接收SQL查询结果,动态添加到LIST集合中。
5、 遍历LIST集合数据,转换成JSON对象,并推送到Redis缓存中。
6、 Over。