大数据时代的月光宝盒.pptx

大数据应用时代的“月光宝盒”张茂森、董鹏飞从大数据到大数据应用大数据的4VVolume（数据量）Velocity（时效性）Variety（多变性）Variability（正确性）大数据应用的4CCharacterize（刻画）Comprehensive（全面）Connection（联接）Common（简单）“月光宝盒”的前世今生精准营销的需求广告带来的效果是啥？广告费花的值不？从电子交易到电子商务以前是铺货渠道现在是重要的Bussiness（数字营销、品牌维护、客户关系、商品企划、客服绩效、供销物流）电子商务比起传统商务巨大的优势就是海量信息的数字化，让我们可以更精准的进行定量分析全息效果平台月光宝盒应运而生月光宝盒是什么？打开宝盒实时数据收集数据收集流量流量访问数据数据虫洞引擎（虫洞引擎（实时数据整合、流数据整合、流处理）理）收藏数据收藏数据成交数据成交数据购买数据数据云梯（离云梯（离线分布式分布式计算）算）实时效果效果计算引擎算引擎离离线效果效果计算算多多维分析引擎分析引擎多多维报表表效果效果热力力图页面位置面位置标签管理管理效果效果规则月光宝盒月光宝盒后台后台行行为路径雨林路径雨林雨林算法来源A来源B来源C来源D效果热力图永久被保存的“场景”可控精度UV计算用8k内存完成亿级别UV计算消耗降低1500倍离线计算系统架构ConfigsDBDBDBEffect OwnerMatcherTreeBuilderColorizer离线计算引擎标准访问库标准业务库ConfigsConfigsEffect Reports高效计算优化策略预处理访问日志批量加载配置文件数据抛弃策略I/O计算引擎分组组内同类规则批量计算支持批量正则合并匹配的DFA引擎计算访问日志(aplus,lz_acookie)业务数据成交,收藏,购物车搜索日志展现,点击月光宝盒效果计算引擎用户店内全息访问树量子恒道店铺经电商分析,一推ISV内部数据需求例：etao网站，无线Wap聚石塔御膳房流量管理平台流量+效果 数据中心.店内全来源效果数据中心（含多天效果）用户淘内全息访问树用户全网全息访问树站外广告联盟效果数据中心（含多天效果）.正在实施中的Q&A