大数据测试技术数据采集、分析与测试实践教学大纲8.doc

大数据测试技术课程教学大纲 课程名称:大数据测试技术 课程编码:621010820 英文名称:Big data testing technology 学 时: 48 学 分:3 开课学期:第5或第6学期 适用专业:计算机,信管,物联网,电商,管理,财经 课程类别:专业选修课 先修课程:计算思维与Python程序设计,计算机网络,Linux操作系统 建议:《大数据测试技术》 一,课程目地,任务 《大数据测试技术》是高等院校计算机专业地选修课。该课程主要目地与任务是帮助学生理解与掌握大数据地收集,数据格式转换,数据导入,利用数据分析技术来实现软件缺陷地挖掘方法。通过该课程地学习,学生可以理解大数据测试地概念,掌握手机访问网络数据地收集方法,掌握数据格式转换地一般技术,熟练掌握Splunk平台处理大数据地各种操作,理解大数据缺陷挖掘地一般过程。 二,课程教学基本要求 《大数据测试技术》地学习内容包括掌握大数据测试地概念与目的任务,了解大数据地处理方法及技术,了解大数据地背景,内容与信息存储模式;掌握大数据地收集方法,格式转换方法,熟练掌握运用Splunk平台地运用,熟练掌握SPL语言地编写方法与技巧,熟练掌握软件缺陷地一般分析方法,熟练掌握Splunk软件在Linux上地部署方法,在Windows中调用Linux中Splunk地方法,能够解决数据戳错误地解决方法。重点掌握非格式化数据地分析方法,正则表达式地构造方法,利用正则表达式挖掘有效数据地方法。 该课程是一门新兴地课程。学习该课程前应该具有一定地计算机应用基础,掌握一定地Linux知识,掌握Python语言地编程方法,了解SPL语言地构造,掌握正则表达式地构造方法,同时也应该对基本地数据格式与数据存储有所了解。 本课程具有很强地操作性,教学需要坚持理论与实践相结合。在讲清楚基本概念地前提下,充分应用案例教学,结合理论进行教学。本课程地教学形式以讲授+实验教学方式为主。 课程考核方式:平时成绩（30%）+期中成绩（30%）+期终考试（40%）,其中平时成绩以考勤与课程作业完成情况来评定,期中成绩来自于大作业地评分,期末成绩来源于闭卷考试。 三,课程学习内容（分章节） 第一章 大数据测试思维 （一）教学要求 通过本章地学习使学生掌握大数据地内涵与特征,掌握课程地目的与任务,层次与内容以及手段与方法,了解大数据发展地历史。 （二）学习内容 本章共分三节: 第一节 规律是否存在 介绍大数据地概念及其发展,讲述数据背后地规律特征,了解数据规律地特殊性,讲述大数据地背景与规律地形成条件。 第二节 大数据地背后 介绍大数据背后隐藏地规律发现方法以及数据突破人们地认识,形成意想不到地规律。 第三节 大数据地应用过程 介绍大数据应用地方式,环节,处理方法与过程。 第二章 大数据收集概述 （一）教学要求 通过本章地学习首先让学生认识到信息资源管理主要学习领域是什么,其重点研究地主题是什么。主要学习信息资源地类型,掌握信息采集中地原则与策略,旋涡信息组织地各种方式,特别对信息表示语言,信息分类给予了解;了解信息检索地各类系统;了解信息分析地主要方式;掌握信息资源开发利用地原则与模式。 （二）学习内容 本章共分两节: 第一节 案例介绍 介绍采用手机收集网络连接数据地案例,讲解这个案例实现地原理及方法,电脑环境地有关配置。 第二节 数据采集 讲述Wireshark软件地连接方法,数据地显示方法,数据包地存储,同步操作地实现。 第三章 网络数据地采集与分析 （一）教学要求 本章将演练网络数据采集地方法及利用Wireshark软件进行数据分析地一般思路。 （二）学习内容 本章共分四节: 第一节 物理连接及Wireshark地常用操作 讲述将手机,360随身WIFI,电脑进行连接地方法,Wireshark软件有三种方式,构建网络地方法,Wireshark功能介绍。 第二节 数据包地采集 讲述采用Total Control软件将手机操作同步到电脑地方法,用Wireshark软件进行数据存储与打开地方法。 第三节 数据包地自动抓取 介绍数据包地自动抓取背景,采用Total Control软件编辑脚本地方法,脚本地执行方法。 第四节 数据包分析 介绍数据包地分析方法,Wireshark软件来捕获手机网络数据包地方法,Wireshark软件对数据包地分析方法。 第四章 数据格式转换及Python编程 （一）教学要求 本章将学习Python语言编程地方法,重点介绍Python语言地基本语法,网络分析构造,PyShark组件地介绍,Python语言地环