电商卷皮BI的实践演进和架构体系—猫友会大讲坛第4期

Q1：查询HBase中的数据有没有用什么SQL引擎呢？有的话用的是什么SQL查询引擎？

A1：我们没有用什么SQL引擎，我们主要是靠row-key的设计。

Q2：hadoop平台的部署是通过？ ambari这些吗？

A2：我们使用cloudera的版本的。

Q3：老师好，能否大概讲解一下怎么根据用户画像做推荐，这里面用到什么技术点。

A3：主要还是数据挖掘的算法，有聚类，协同过滤，商品相似度之类的算法，不过针对不同的业务场景使用的算法不一样。技术上，我们是用的sparkR。

Q4：我们现在olap目前正在使用apache kylin,saiku和kykin结合怎么样，有过调研没？

A4：Saiku直接+kylin我们还没有用过，不过应该是OK的，因为saiku主要是界面展现。

Q5：BI挖掘的用户画像和鹰眼系统，有什么离线指标来评价相关的数据质量？

A5：类似用户画像的性别，主要看两个方面，覆盖率和准确率，覆盖率提升了，也许准确率就会下降，后续我们可以持续跟踪用户的行为，或者进行一些实际的回访，来验证并优化我们的数据模型。鹰眼更多的是基于规则引擎做的。

Q6：数据meta管理是怎么做的？

A6：业务上我们对所有的数据指标口径进行统一，所有展示数据的地方都是一致的，然后对于变更等等流程都有一定的管理。

猫友会

技术交流分享，求职简历投递

?扫小猫助手二维码，加入猫友会

（编辑：核心网）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!