京东大数据的思考和探索

京东大数据的思考和探索

—京东大数据平台研发负责人刘彦伟

【摘要】京东大数据平台是京东大数据业务的基础服务平台,为京东大数据业务的实现提供一站式、自助式的大数据处理全流程解决方案。涵盖数据接入、存储、处理、分析、挖掘、可视化、机器学习等产品和服务,致力于大幅降低大数据消费门槛,帮助京东大数据业务快速落地,助力京东实践以数据为驱动的业务变革与发展。京东在大数据方向上的思考和探索非常多,今天主要和大家分享实时数仓、存储计算分离与容器化。

【期刊名称】软件和集成电路

【年(卷),期】2018(000)008

【总页数】2

【关键词】数据业务;服务平台;数据平台;数据处理;数据接入;机器学习;一站式;自助式;

实时数仓是未来可以改变大数据体系的一个重要概念。另外一个可以深刻影响京东未来大数据发展的技术点是存储计算分离与容器化。

京东大数据平台是京东大数据业务的基础服务平台，为京东大数据业务的实现提供一站式、自助式的大数据处理全流程解决方案。涵盖数据接入、存储、处理、分析、挖掘、可视化、机器学习等产品和服务，致力于大幅降低大数据消费门槛，帮助京东大数据业务快速落地，助力京东实践以数据为驱动的业务变革与发展。京东在大数据方向上的思考和探索非常多，今天主要和大家分享实时数仓、存储计算分离与容器化。

我针对京东大数据的业务场景和特点，对实时数仓这个领域大概做了三个分类，