本讲义出自Yaniv Rodenski与Karel Alfonso在Hadoop Summit Tokyo 2016上的演讲，主要分享了数据管道的相关知识以及其主要作用，并且分享了数据管道建造者的原型、数据操作以及协作等相关内容，还分享了大数据应用的持续集成的案例，最后还介绍了Apache下的开源分布式资源管理框架Mesos的相关内容。