美文网首页大数据解决方案大数据开发
[网易云音乐]Kylin在网易云音乐的实践和调优 - Kylig

[网易云音乐]Kylin在网易云音乐的实践和调优 - Kylig

作者: 葡萄喃喃呓语 | 来源:发表于2017-02-09 11:25 被阅读66次

    //
    Apache Kylin在网易云音乐的实践和调优 - Kyligence
    http://kyligence.io/2016/09/2608/
    总结

    本文记录了网易云音乐的一个比较常见的TopN的需求的优化,在整个优化的过程中在技术和业务上都给与了充分的考虑,在满足查询需求的前提下,查询性能从最初的上百秒提升到1秒以内,这个过程让我充分意识到了解数据特征和业务的重要性,以前遇到问题总是想着是否能够进行算法的优化,是否可以加机器解决,但是当这些都不能再有改进的空间时,转换一下思路,思考一下是否可以从业务数据入手进行优化,可能会取得更好的效果。

    随着Apache Kylin 新版本的落地使用,对于业务的支持也更有信心了,尤其是并行查询和Endpoint Coprocessor对性能的提升,但是对于开源技术来说,如何正确的使用才是最困难的问题,我们也会在探索Apache Kylin使用的路上越走越远。

    最后,通过本次调优,我发现了一个以前没有注意到的问题:薛之谦最近真的挺火,不相信的话可以查看一下网易云音乐热歌榜。


    相关文章

      网友评论

        本文标题:[网易云音乐]Kylin在网易云音乐的实践和调优 - Kylig

        本文链接:https://www.haomeiwen.com/subject/amjiittx.html