本书针对高等院校大数据应用型人才培养目标编写，采取教、学、做相结合的模式，对大数据存储技术与应用进行了讲解。本书分为基础篇、实践篇和拓展篇。基础篇包含三个项目，讲解了大数据处理流程、大数据存储架构、大数据存储技术等；实践篇包含三个项目，讲解了结构化数据存储技术、PostgreSQL存储技术、MPP并行数据存储架构、NoSQL存储技术等；拓展篇包含一个项目，根据行业需求，选取与大数据技术结合紧密的相关技术，讲解了大数据存储系统构建、规划、部署、优化、维护等。


本书突出校企融合、前瞻性,适合作为高等院校大数据技术专业教材，也可作为培训机构数据存储课程的教材，还可作为大数据系统管理人员的参考书。

？

       党的二十大报告指出：“教育、科技、人才是全面建设社会主义现代化国家的基础性、战略性支撑。”


       本书是高等院校大数据应用型人才培养立体化资源“十四五”系列教材之分册，以培养学生的应用能力为主要目标，强调理论与实践相结合。通过校企双方优势资源的共同投入和促进，建立以产业需求为导向、以实践能力培养为重点、以产学结合为途径的专业培养模式，使学生既获得实际工作体验，又夯实基础知识，掌握实际技能，提升综合素养。本书注重实际应用，立足于高等教育应用型本科的人才培养目标，结合国信蓝桥教育科技股份有限公司培养应用型技术技能专业人才的实践经验，在内容编排上，将教材知识点项目化，采用任务驱动的方式进行讲解，力求循序渐进、举一反三，突出实践性和工程性，使抽象的理论具体化、形象化，真正贴合实际、面向工程应用。


       本书在编写过程中，注意突出以下特点：


       (1)系统性。以项目为基础，以任务实战的方式安排内容，结构清晰、新颖，先让学生掌握课程整体知识内容的骨架，然后在不同项目中穿插实战任务，学习目标明确，对学生具有更好的培养效果。


       (2)校企融合。本书由一批具有丰富教学经验的高级教师和多年从事工程实践经验的企业工程师编写，既解决了高校教师教学经验丰富但工程经验少、编写教材时理论内容过多的问题，又解决了工程人员实战经验多却无法全面清晰论述内容的问题。


       (3)前瞻性。相关案例来自工程一线，案例新、实践性强，可使学生掌握实际工作中需要用到的各种技能，边做边学，在学校完成实践学习，提前具备岗位所需的职业人技能素养。


       本书适合作为高等院校大数据技术相关专业数据存储技术教材，也可作为相关培训机构数据存储课程的教材，还可作为大数据系统管理人员的参考书。

       在本书的编写过程中，得到大数据学界的师友及同仁的热情帮助，在此表示衷心的感谢！


       由于时间仓促，编者水平有限，书中难免存在疏漏与不妥之处，敬请广大读者批评指正。
？

基础篇
项目一走进大数据存储3
任务一走进大数据3
任务二走进大数据存储技术6
任务三走进大数据存储应用8
项目二浅析大数据存储技术13
任务一浅析文件系统13
任务二浅析RAID磁盘阵列32
任务三浅析数据安全47
项目三浅析云存储服务66
任务一了解云存储66
任务二浅析云存储基础技术76
任务三浅析云存储关键技术86
任务四浅析存储架构105
任务五浅析对象存储系统114
任务六走进Swift120
任务七浅析Swift工作原理127
 实践篇
项目四深入结构化数据存储137
任务一走进结构化数据存储137
任务二深入PostgreSQL存储技术139
任务三深入MPP数据存储技术152
项目五深入半结构化数据存储159
任务一走进半结构化数据存储159
任务二解析Redis内存数据库技术171
任务三解析Elasticsearch存储技术178
项目六解析非结构化数据存储186
任务一走进非结构化存储技术186
任务二解析GlusterFS存储技术188
任务三部署GlusterFS集群193
 拓展篇
项目七高校大数据决策分析系统205
任务一了解高校大数据决策分析系统及存储规划205
任务二高校大数据决策分析系统项目实战209
附录A缩略语218
附录B思考与练习答案219
？

曹小平，正高级实验师、副教授、高级技师。主要从事软件工程、教育信息化、数据分析与可视化、模式识别等方面的教学实践、技术研发与应用推广工作。先后主持主研省部级以上教改科研项目7项；公开发表论文10余篇；主编理实一体化教材7部，其中国家规划教材1部；获得实用新型专利9项、软件著作权7项；指导学生在各类技能竞赛中获国家级奖励7项、省部级奖励20余项。曾牵头主持建设重庆市大数据技术专业教学资源库，参与编制1+X证书标准并实施1+X证书试点，组织参与国培项目、软件人才认证培训等30余项，获重庆市教学成果三等奖。


黄金土，讲师，现任阳光学院人工智能学院数据科学与大数据技术系系主任。从事计算机类的教学科研工作，主持福建省教育厅科研项目1项，参与科研项目多项，撰写发表了科研、教研论文多篇，参编教材一项，曾获得阳光学院优秀教师、科研优秀奖、服务育人奖等荣誉称号，现为全国高校大数据教育联盟委员会委员，中国计算机协会会员，近年来以数据挖掘、大数据、入侵检测作为主要研究方向。


王海蓉，云南开放大学光电与通信工程学院院长、教授，云南省“兴滇英才计划”教学名师，公开发表论文8篇，独立撰写或第一作者5篇：其中，SCI检索1篇、EI检索1篇、EI会议（待检索）2篇、普刊1篇；合作论文3篇：EI会议。


阳维国，国家信息系统高级项目管理师，云计算、大数据领域专家。黄冈教育谷投资控股有限公司重庆工程校区教学主任，15年以上数据分析大数据领域经验。曾担任：黄冈教育谷投资控股有限公司大数据&网络安全专业委员会主任，香港电讯盈科广东省联通UBIS经营分析系统技术顾问；美国惠普上海GDCC商务智能资深架构师；上海复旦光华信息安全部高级项目经理。曾主导参入：重庆市公共交通政府购买服务大数据平台建设；中国电信3GPP OCS在线计费系统建设；中国交通银行ACRM分析系统总体设计；美国摩托罗拉财务分析系统服务咨询；法国圣戈班石膏建材财务分析总体设计；日本松下集团BI分析系统总体设计；华为BI门户集成顾问咨询；中国南车集团商务智能系统顾问咨询；广东省联通UBIS经营分析系统架构设计。

？

本书由一批具有丰富教学经验的高级教师和多年从事工程实践经验的企业工程师编写，相关案例来自工程一线，案例新、实践性强，可使学生掌握实际工作中需要用到的各种技能，边做边学，在学校完成实践学习，提前具备岗位所需的职业人技能素养。？