《商务数据采集与分析》课程教学大纲 一、课程基本信息 课程代码：20110242 课程名称：商务数据采集与分析 英文名称： 课程类别：专业课 学 时：32 学 分：2 适用对象：2020级电子商务专业 老核方式：老杳 先修课程：Python程序设计 二、课程简介 本课程详细阐述了商务数据分析与应用中数据采集和处理问题，是电子商务专业 的专业选修课程。课程内容共8章，包括概述、大数据实验环境搭建、网络数据采集、 分布式消息系统Kafka、日志采集系统Flume、数据仓库中的数据集成、ETL工具 Kettle、使用pandas进行数据清洗。本果程结合市场上常用的数据采集和处理工具 产教融合，能开发学生的自发探索能力，同时引导学生坚持中国道路、弘扬中国精神， 培养学生爱国情怀：树立法治意识，坚守法规：培养匠人精神和奉献精神。 This course describes data collection and processing in business data analysis and application in detail,and is a professional elective course for e-commerce majors.The course content consists of 8 chapters,including overview,big data experiment environment construction,network data collection,distributed message system Kafka,log collection system Flume, data integration in data warehouse,ETL tool Kettle,and data cleaning using Pandas.This course combines data collection and processing tools commonly used in the market,and integrates production and teaching,which can develop students'spontaneous exploration ability,guide students to adhere to the Chinese road,promote the Chinese spirit,and cultivate students'patriotism Set up the consciousness of rule of law and stick to laws and regulations; Cultivate the spirit of craftsmanship and dedication. 三、课程性质与教学目的 《商务数据采集与分析》是电子商务专业开设的一门专业课。课程全面、系统的 介绍大数据领域数据采集与处理的相关理论和技术。 1 1 《商务数据采集与分析》课程教学大纲 一、课程基本信息 课程代码：20110242 课程名称：商务数据采集与分析 英文名称： 课程类别：专业课 学 时：32 学 分：2 适用对象：2020 级电子商务专业 考核方式：考查 先修课程：Python 程序设计 二、课程简介 本课程详细阐述了商务数据分析与应用中数据采集和处理问题，是电子商务专业 的专业选修课程。课程内容共 8 章，包括概述、大数据实验环境搭建、网络数据采集、 分布式消息系统 Kafka、日志采集系统 Flume、数据仓库中的数据集成、ETL 工具 Kettle、使用 pandas 进行数据清洗。本课程结合市场上常用的数据采集和处理工具， 产教融合，能开发学生的自发探索能力，同时引导学生坚持中国道路、弘扬中国精神， 培养学生爱国情怀；树立法治意识，坚守法规；培养匠人精神和奉献精神。 This course describes data collection and processing in business data analysis and application in detail, and is a professional elective course for e-commerce majors. The course content consists of 8 chapters, including overview, big data experiment environment construction, network data collection, distributed message system Kafka, log collection system Flume, data integration in data warehouse, ETL tool Kettle, and data cleaning using Pandas. This course combines data collection and processing tools commonly used in the market, and integrates production and teaching, which can develop students' spontaneous exploration ability, guide students to adhere to the Chinese road, promote the Chinese spirit, and cultivate students' patriotism; Set up the consciousness of rule of law and stick to laws and regulations; Cultivate the spirit of craftsmanship and dedication. 三、课程性质与教学目的 《商务数据采集与分析》是电子商务专业开设的一门专业课。课程全面、系统的 介绍大数据领域数据采集与处理的相关理论和技术