前言
党的二十大报告指出: 教育、科技、人才是全面建设社会主义现代化国家的基础性、战略性支撑。必须坚持科技是第一生产力、人才是第一资源、创新是第一动力,深入实施科教兴国战略、人才强国战略、创新驱动发展战略
。高等教育与经济社会发展紧密相连,对促进就业创业、助力经济社会发展、增进人民福祉具有重要意义。
在数智时代,数据作为新型生产要素,是数字化、网络化、智能化的基础,已快速融入生产、分配、流通、消费和社会服务管理等各环节,深刻改变着生产方式、生活方式和社会治理方式。随着人工智能、机器学习和大数据分析等技术的不断发展和创新,数据要素将变得更有价值、更为关键。以数据要素为核心,结合人工智能与大模型技术,可以发挥数据的最大价值。
大数据已经成为时代发展的重要产物,对科学研究、思维方式、社会发展将会产生深远的影响。在科学研究方面,大数据使得人类科学研究在早期的实验、理论、计算三种范式之后直接进入新的范式,即数据。在思维方式方面,数智时代的思维主要有总体思维、容错思维、相关思维和智能思维,思维方式正在从传统的样本思维逐步转变为总体思维,从而能够更加全面、立体、系统地反映总体状况。在社会发展方面,大数据决策逐渐成为一种新的决策方式,大数据应用有力地促进了大数据技术与多个行业领域的深度融合。
大数据技术涵盖数据采集技术、数据预处理技术、数据存储技术、数据标注技术、数据分析技术、数据挖掘技术、数据可视化技术、数据安全技术、数据加密技术、数据管理技术等多种技术,具有很强的实用性。本书在编写时,注重理论与实践相结合,将大数据技术抽象的概念、原理和技术方法融入具体的实例中,以易学、全面和实用为目的,从基础到应用,系统地介绍大数据关键技术和应用。
本书共分为7章,主要内容如下。
第1章介绍大数据技术概述,包括大数据
概述、大数据思维、大数据计算模式、大数据关键技术、大数据处理平台、大数据技术架构、大数据技术与云计算、大数据技术与人工智能、大数据技术的应用领域、大数据技术未来发展趋势。
第2章介绍大数据采集及预处理技术,包括大数据采集技术、
大数据预处理技术、
大数据预处理工具、应用实例。
第3章介绍大数据存储技术,包括大数据存储、数据库、
数据仓库、
数据湖与数据中台、大数据存储平台、大数据存储解决方案。
第4章介绍大数据分析与挖掘技术,包括大数据分析概述、大数据分析算法、大数据分析的应用、大数据挖掘技术。
第5章介绍大数据可视化技术,包括数据可视化概述、大数据可视化的关键技术、大数据可视化方法、数据可视化平台、大数据可视化工具、大数据可视化应用。
第6章介绍大数据安全与隐私保护技术,包括大数据安全与隐私的挑战、数据安全处理技术、隐私保护技术、数据保护的应用。
第7章介绍大数据技术应用,包括大数据技术在教育领域的应用、大数据技术在互联网领域的应用、大数据技术在金融领域的应用、大数据技术在通信领域的应用、大数据技术在医疗领域的应用、大数据技术在交通领域的应用。
为便于教学,本书提供丰富的配套资源,包括
教学课件、教学大纲、电子教案、程序源码、习题答案、在线作业和微课视频。
资源下载提示
课件资源: 扫描目录上方的二维码获取下载方式。
在线作业: 扫描封底的作业系统二维码,登录网站在线做题及查看答案。
微课视频: 扫描封底的文泉云盘防盗码,再扫描书中相应章节的视频讲解二维码,可以在线学习。
由于编者水平有限,书中难免存在疏漏,敬请读者批评指正。
编者
2026年6月
