随着互联网应用的广泛发展和数据规模的不断增长，传统的数据处理方法已经无法满足对海量数据的存储、处理和分析需求，因此出现了大数据技术栈。大数据技术栈是指用于存储、处理和分析大规模数据的一系列工具、框架和平台。它可以帮助我们从海量的数据中提取有价值的信息，支持业务决策和创新发展。
Google的三篇论文 GFS(2003)，MapReduce(2004)，Bigtable(2006)为大数据技术奠定了理论基础。随后，基于这三篇论文的开源实现Hadoop被各个互联网公司广泛使用。在此过程中，无数互联网工程师基于自己的实践，不断完善和丰富Hadoop技术生态。经过十几年的发展，如今的大数据技术生态已相对成熟，围绕大数据应用搭建的平台架构和技术选型也逐渐趋向统一。
下图是大致的技术栈结构图 