首页>> 正文

视频演讲: 基于 Hive / ES 金融大数据指标系统

来源:商群邮件营销时间:2017-02-21 09:18:56点击:2658

概要

如何让业务线精准、个性化的服务于客户;技术得讲:如何在几亿条的数据,几万个字段中以毫秒级别筛选出有价值的数据,也就是同时要建几万个“索引”字段的数据库,是数据行业的一个难题;我们在开源和商业产品上面做了很多的对比,最后选定了 elasticsearch 作为数据引擎。 如果能让几百个维度几万个度量值组合查询,做一个超级 cube,一直是我们想解决的问题。当 ES 数据导入之后,我们进行了聚合查询测试,发现 elasticsearch 的多维聚合查询能力也是非常惊人,原本我们选择 kylin 的解决方案,做了相应的转变。 指标系统为精准客户经营,多维统计分析解决了难题。而后在千人千面项目中,需要提供在线的客户标签的 API 接口,我们加入了 redis 缓存层,让并发和请求时间又提升了一个数量级,给我们指标系统插上了翅膀。

欢迎大家继续关注慧邮件邮件营销平台,也可以在我们的慧邮件官网了解更多邮件营销技巧,大数据知识,也可以通过电话:400-666-5494联系到我们,更多精彩知识、活动等着你。

相关阅读

  • *真实姓名:
  • *手机号码:
  • 公司名称:
  • 咨询内容:

CopyRight © 2009 - 2020 All Right Reserved 备案号:闽ICP备15004550号-275

厦门书生企友通科技有限公司 QYT.com 版权所有