ETL数据整合与处理（Kettle）教学教案.docx
第1章开启ET1.之旅教案课程名称：ET1.数据整合和处理课程类别，必修适用专业，大数据技术类相关专业总学时：64学时（其中理论30学时,实验34学时）总学分I4.0学分本章学时：6学时一、材料清单（1><E11.数据整合和处理（KctiIc）J教材.（2）引导性提问。（3）探究性向题。（4）拓展性问题。二、教学目标与基本要求1.教学目标讲授ET1.的基本概念和相关技术，选择流行的Ke1.1.1.e软件为教学的ET1.工具，讲授Ke1.tic及支拽其运行的JaVaJDK1.具包、MySQI.数据诲等软件的安袋，以及Ke1.tic运行环境的配员，并详细讲授Keme的界面、运行和结果性行等础操作。让学生达到以下教学目标：（I）了解ET1.的基本概念和典型的ET1.j1.具.（2）掌握KeUIe运行环境的安装和配置。（3）熟悉KeUIC的界面.（4）掌握Keme的范础掾作（5）段握创建第个KCU1.C的转换工程及其组件以及查看结果.2.基本要求（6） 了解ET1.的概念.（7） 了解ET1.的技术。（8） 了解ET1.的流程。（9） 了耨KCUIC的优点.（10） 了解KeUIe的应用场景.（11）掌握JDK、MySQ1.和KeU1.e的安装和配置，（12）掌握KCuIC常用菜单功能的使用.（13）掌握创建转换工程及其组件，查看结果，.三、问题1 .引导性提问引导性提问,是教怵根据教材内容和学生实际水平,有针对性地提出何超.去启发引导学生去思考和解决问SS，从而达到理解、掌握课程知识点和技术点.（1） ET1.是什么？（2）生活中就经数据需要进行清洗？（3）数据抽取的方式有哪些？（2） 数据装载是指什么？（5） KemC工具需要花钱购买吗？（6） Keme彳蹲此优点？（7） KetUC最基础的操作是什么？2 .探究性问题探咒性问题,是教师在深入怙研教材、引导性提问的基础上或者是在引导式提问中尚未涉及,又是课程中的:巾要内容.从量点、难点中切入,而精心设计的插入式提问.（1） Er1.的处理过程是怎么样的？（2） ET1.能弊应用在那些场景？（3）选择ET1.工具，通常考虑哪线因武？（4）使用Kcu1.c为什么要安装数据诲？（5>Keme的应用场景有哪些？（6） Keu1.C需要建立什么,使用什么,才能对数据进行清洗、转换、集成等操作？（7>KCUIC需要查看什么，才能看到执行结果？3 .拓展性问题拓展性向即，是教师在深刻理解教材的意义、学生的学习动态后,根据学生学习层次，而提出的切实可行的实际操作问题。教师亦可以提供拓展资料，给学生研研究探讨，从而完成拓展性的问题.（I）EXCC1.也能对数据进行处埋，为什么还要使用ET1.j1.具？（2）KeUIe采用图形化界面操作，有什么好处？（3）哪些场圾的数据迁移和装我.不芮使用数据麻？四、主要知识点、重点与难点（1） 要知识点（1.>ET1.的概念、流程与应用场景。（2） Er1.的处理流程.（3） JDK、MySQ1.和KCuIC的安装和配置.（4） Keme的常用功限2.重点（1） Er1.的概念、流程与应用场爆。（2） KeUIC1常用的应用场景和功能.3.难点ET1.的流程.五、教学过程设计（3） 论教学过程（1.>ET1.的概念.（4） Er1.的技术。（5） ET1.的应用场景.（4>ET1.的常用工具和选择。（5） KeU1.e软件的优点（6）安装JDK（7）安装MySQ1.数据库（8）安装和归置KCmC运行环境（9）Keme软件常用菜单功悭。（IO）创建KCuIC的转换工程和组件，以及杳看结果。2.实验教学过程（I）在Win1.kwS系统上安装JDK、MySQ1.和KeUk软件，（2）KemC软件菜单常用功能的使用.（3）创建KeUIe第一个转换工程和祖件六、教材与参考资料1.教材教材I王雪松,张良均.ET1.数据整合和处理（KeUIeHM.北京：人民邮电出版社.2021.2 .参考资料1 PcntahoCommunityWiki：ht1.ps:/'2 PenUihoDocumentation：hKps:/第2章源数据获取教案课程名称，ET1.数据熔合和处理课程类别，必修适用专业t大数据技术类相关专业总学时I64学时（其中理论30学时，实的M学时）总学分：4.0学分本章学时：8学时七、材料清单（5）5ET1.数据整合和处理（KeuIe北教材。（6）引导性提问，（7）探究性问题（8）拓展性同题八、教学目标与基本要求3 .教学目标在Kcu1.c软件上，讲授Kcit1.c与MySQ1.数据库之间的连接.讲授从数据玲、Exce1.和CSV文件等源数据中获取数据的方法和操作，以及通过生成记录、生成随机数和获取系统信息等源数据生成的方法和操作.让学生达到以下教学目标：（14）掌握数据件连接的创建方法和参数设置.（15）熟悉抽取源数据和生成数据的常用方法。（16）掌握常用抽取源数据和生成数据组件及其参数设K1.（17）熟悉组件处理后的结果数据解读。4 .基本要求（1掌握KcaIe与MySQ1.数据库之间的连接.（2）熟练建立转换工程和创建相美的转换组件，（3）掌握获取源数据的常用组件和参数设置，（4）掌握生成数据的常用组件和参数设置.（三）熟练浏览加件执行结果和掌握出锚处理方法.九、问题5 .引导性提问引导性提问,是教师根据教材内容和学生实际水平,有针对性地提出问起,去启发引导学生去思考和解决同翘.从而达到理解'竽提课程知识点和技术点，（8） KeU1.e通过什么方法与数据库建立连接？（9）KCmC是怎样获取数据的？（10） Kemeffe弊生成数据吗？（11）KCUIC可以获取翩些典型类型文件的数据？（12）获取淞数据需要编程吗？6 .探究性问题探咒性问题.是教师在深入怙研教材、引导性提问的基础上.或者是在引导式提问中尚未涉及，又是课程中的柬要内容，从Ht点、难点中切入，而精心设计的插入式提问。（三）获取源数楙的处理过程是怎么样的？（9）组件是什么？（IO）一件参数有什么用?（11）获取数据库数据与文件数据的方法是否一样？（12）获取数据和生成数班的应用场景有何异同？（13）通过什么方法可以浏览获取的源数据？7.拓展性问题拓展性同腮,是教师在深刻理解教材的意义、学生的学习动态后,根据学生学习层次，而提出的切实可行的实际操作问璃。教师亦可以提供拓展资料，给学生研研究探讨，从而完成拓展性的问题，（4）组件的参数的作用是什么？（三）CSv和EXCd文件都能用EXCd杳看文件数据,为何需要使用CSV文件、Exce1.输入两个不同的组件来获取其数据?十、主要知识点、重点与难点8 .主要知识点（5）数据除连接,以及共享/停止数据库连接.（6）表输入、CSV文件、EXCd输入等组件的参数设置和使用。（7）生成记录、生成随机数.获取系统信息警组件的参数设置和使用.9 .重点（3）数楙库连接以及共享连接的应用场景.（4衣输入、CSV文件、EXCd输入等获取源数据殂件的应用场景和操作。（5）生成记录,生成的机数、获取系统信息等生成数据祖件的应用场景和操作。10 .难点表输入、CSV文件、EXCd输入等组件的参数设置和不同之处。生成记录、生成随机数、获取系统信息等组件的参数设置和不同之处.教学过程设计11 .理论教学过程（三）创建数据库连接.（12）共享/停止共享数据库连接，（13）表输入组件及其参数设置，（14） CSV文件组件及其参数设置.（15） EXCd输入俎件及其参数设置，（16）生成记录组件及其参数设置.（17）生成随机数组件及其参数设置.（18）获取系统信息纲件及其参数设置。12 .实验教学过程（4）在KeUIe软件上，与MySQ1.建立数据库连接，（5）进行共享，杼止共享数据库连接（6）建立转换工程和CSV文件细件，设置祖件参数，运行和预览数据，（7）建立利换工程和CSV文件组件，设置祖件参数，运行和预览数据，（8）建立转帙工程和EXeC1.输入组件，设置组件参数.运行和孩览数据.（9）建立转换工程和生成记录组件，设员组件多数，运行和预览数据,（10）建立转换工程生成随机数组件,设置组件参数.运行和预览数据.（II）建立转换工程和获取系统信息组件,设置组件参数，运行和预览数据.十二、教材与参考资料13 .教材教材：王雪松,张良均.ET1.数据整合和处理（Keme）M北京：人民邮电出版社.2021.14 .参考资料(1 Pcn1.thoCornniuni1.yWiki：ht1.pswiki.pvn1.aho.cm(2 PcntahoDocumentation：https'第3章记录处理教案课程名称，ET1.数据整合和处理课程类别，必修适用专业t大数据技术类相关专业总学时I64学时（其中理论30学时，实的M学时）总学分：4.0学分本章学时：8学时十三、材料清单（9）HET1.数据整合和处理（KCu1.e）3教材。（10）引导性提问.（II）探究性问魄.（12）拓展性问题.十四、教学目标与基本要求15.教学目标讲授使用基于记录处理的排序记录、去除咆豆记录、替换NU1.1.位、过港记录、依映射、字符*杵换和分组等姐件，进行数据折换的方法和操作,让学生达到以下教学目标：（18）熟悉基于记录处理进行数据转换的常用方法.（19）掌握携于记录处理的常用组件及其多数设B1.（20）熟悉基于记录处理后的结果数据解读。16.基本要求（6）掌握基于记录处理的常用组件和参散设置,（7）拿梅浏览组件执行结果和舟锚处理的方法.十五、问题17.引导性提问引导性提问,是教师根据教材内容和学生实际水平，有针对性地提册问超，去后发引导学生去思考和解决问甥，从而达到理解、掌握课程知识点和技术点。（13）记录处理是不是只计对数刖旅的数据？（14）是否还能够用一个组件就可以进行记录处理？（15）设置记录处理的组件参数和获取源数据组件的参数是否类似？18.探究性问题探究性问题，是教师在深入钻研教材、引导性提问的基础上，或者是在引导式提问中尚未涉及,又是悌程中的重要内容,从重点、雉点中切入，而精心设计的插入式提问.（14）去除艺双记录为什么要先诳行排序？（15）数据记录中为什么要笆换NU1.1.（I'i?（16）伯映射的主要作用是什么？（17）值映射Ur以对所有的数据类型进行操作吗？（18）字符串怦换对那些数据类型进行操作？（19）过港记录需要排序吗？19.拓展性问题拓展性向密，是教师在深刻理解教材的意义、学生的学习动态后，根据学生学习层次，而提出的切实可行的实际操作问题。教师亦可以提供拓展资料，给学生研研究探讨，从而完成拓展性的问四.（6值映射、字符申花换布"什么差异？（7）字符串替换、字符串操作字修和互代徒吗?十六、主要知识点、重点与难点20 .主要知识点排序记录、去除Ia复记录、替换NU1.1.值、过滤记录、值映
