联系客服1
联系客服2

[数据分析与挖掘] 炼数成金 深入BI - Kettle 篇 视频教程 教学视频

13
回复
4729
查看
打印 上一主题 下一主题
[复制链接]
  • TA的每日心情
    开心
    2024-9-19 21:14
  • 签到天数: 757 天

    [LV.10]以坛为家III

    7335

    主题

    8751

    帖子

    131万

    积分

    管理员

    Rank: 9Rank: 9Rank: 9

    积分
    1312677
    楼主
    发表于 2019-2-26 20:19:38 | 只看该作者 回帖奖励 |倒序浏览 |阅读模式
    课程简介:
    有人统计过,在整个数据分析过程里,收集、整理数据的工作大致占全部工作量的90%,建模过程不足10%,可见ETL是数据处理流程中一个非常重要的环节。ETL工程师,在数据仓库类职位中占有很大比例,而且薪水都不差。IT人一下子转型数据分析师可能跳跃度比较大难度高,先转型数据仓库/ETL工程师再择机往更高处走是合理选择之一。在ETL软件中,使用最多的是开源的Kettle,完全免费,功能和性能不弱于datastage这类商业ETL软件,使用Kettle和其它开源数据平台软件,例如Mysql集群,Hadoop集群等组合在一起,是性价比极高的架构选择。本课程系统讲解Kettle及其秘密。  

    课程介绍:
    ETL (Extract,Transformation,Load)工具是构建数据仓库、进行数据整合工作所必须使用的工具。目前市面有多种商业 ETL 工具,如Informatica,Datastage等。目前市场上开源且实用的 ETL 工具比较少,Kettle 就是这不多的开源 ETL 工具之一。 本课程将主要讲解开源 ETL 工具 Kettle 的基本使用和二次开发方法,并结合实际项目案例,讲解 Kettle 如何在实际中应用,以及应用中可能会出现的问题。针对目前大数据的应用情况,本课程也将结合大数据,讲述 Kettle 如何支持 Hadoop、HBase、MongoDB、MapReduce 等大数据技术。除了Kettle 的使用,在本课程的后几个课时,将讲述 Kettle 的二次开发: 包括 Kettle 代码阅读指导, Kettle API 的说明以及使用方法, Kettle 插件的开发方法。  

    课程内容:  
    第一周:ETL 的概念,Kettle 的概念、功能、操作  
    第二周:Kettle 资源库、日志、运行方式  
    第三周:输入步骤(表输入、文本文件输入、XML 文件输入...)  
    第四周:输出步骤(表输出、更新、删除、文本文件输出、XML文件输出...)  
    第五周:转换步骤(过滤、字符串处理、拆分字段、计算器...)  
    第六周:转换步骤(字段选择、排序、增加校验列、去除重复记录...)  
    第七周:应用步骤、流程步骤(处理文件、执行程序、发送邮件、空操作、阻塞步骤、中止等...)  
    第八周:查询步骤、连接步骤(数据库查询、流查询、合并记录、记录集连接、笛卡尔...)
    第九周:脚本步骤(JAVAscript,Java Class、正则表达式...)  
    第十周:作业项(拷贝、移动、ftp、sftp…)  
    第十一周:Kettle 的参数和变量、Kettle 集群  
    第十二周:Kettle 代码编译、代码结构、应用集成、各种配置文件  
    第十三周:插件开发 - 步骤、作业项  
    第十四周:作业设计技巧、错误处理、调试转换、循环和分支  
    第十五周:大数据插件(Hadoop 文件输入/输出,HBase输入/输出,MapReduce输入/输出,MongoDB输入/输出)  

    目标人群:  

    1. ETL 工程师,Java 开发工程师,  
    2. 经常要做数据处理的 DBA  
    3. 有一定数据库基础 和 Java 基础的学生。  

    课程预期目标:  
    1. 理解 Kettle 软件的基本功能。  
    2. 能使用 Kettle 完成基本的数据处理工作。  
    3. 了解 Kettle 软件的一些高级功能  
    4. 对有Java 开发经验的同学,对 Kettle 代码结构有一定了解,能开发一些 Java 的基本插件。  

    下载地址:

    游客,如果您要查看本帖隐藏内容请回复
    收藏
    收藏0
    分享
    分享
    支持
    支持0
    反对
    反对0
    回复

    使用道具 举报

  • TA的每日心情
    开心
    2019-5-16 09:57
  • 签到天数: 1 天

    [LV.1]初来乍到

    0

    主题

    3

    帖子

    14

    积分

    新手上路

    Rank: 1

    积分
    14
    沙发
    发表于 2019-5-16 10:06:43 | 只看该作者
    额,看不懂在说神马~@_@
    回复 支持 反对

    使用道具 举报

  • TA的每日心情

    2022-1-4 11:23
  • 签到天数: 42 天

    [LV.5]常住居民I

    2

    主题

    68

    帖子

    3171

    积分

    终身会员

    Rank: 6Rank: 6

    积分
    3171
    板凳
    发表于 2019-9-25 13:49:44 | 只看该作者
    确实是难得好帖啊,顶先
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    难过
    2020-6-21 23:48
  • 签到天数: 16 天

    [LV.4]偶尔看看III

    1

    主题

    48

    帖子

    2571

    积分

    终身会员

    Rank: 6Rank: 6

    积分
    2571
    地板
    发表于 2019-10-9 23:03:18 | 只看该作者
    确实是难得好帖啊,顶先
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    擦汗
    2022-4-16 16:42
  • 签到天数: 506 天

    [LV.9]以坛为家II

    3

    主题

    516

    帖子

    1万

    积分

    终身会员

    Rank: 6Rank: 6

    积分
    16188
    5#
    发表于 2019-10-10 12:07:49 | 只看该作者
    啥也不说了,感谢楼主分享哇!
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    难过
    2021-6-20 16:37
  • 签到天数: 48 天

    [LV.5]常住居民I

    1

    主题

    130

    帖子

    3439

    积分

    终身会员

    Rank: 6Rank: 6

    积分
    3439
    6#
    发表于 2019-12-3 16:12:33 | 只看该作者
    w22112421213213213
    回复 支持 反对

    使用道具 举报

  • TA的每日心情

    2020-3-28 13:01
  • 签到天数: 11 天

    [LV.3]偶尔看看II

    3

    主题

    198

    帖子

    2719

    积分

    终身会员

    Rank: 6Rank: 6

    积分
    2719
    7#
    发表于 2019-12-3 21:49:41 | 只看该作者
    啥也不说了,感谢楼主分享哇!
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    慵懒
    2020-3-6 12:27
  • 签到天数: 5 天

    [LV.2]偶尔看看I

    0

    主题

    50

    帖子

    1068

    积分

    体验会员

    Rank: 2

    积分
    1068
    8#
    发表于 2020-2-15 17:52:11 | 只看该作者
    啥也不说了,感谢楼主分享哇!
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    无聊
    2021-9-1 20:31
  • 签到天数: 78 天

    [LV.6]常住居民II

    2

    主题

    192

    帖子

    4281

    积分

    终身会员

    Rank: 6Rank: 6

    积分
    4281
    9#
    发表于 2020-2-24 12:31:09 | 只看该作者
    啥也不说了,感谢楼主分享哇!
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    开心
    2020-3-16 09:43
  • 签到天数: 1 天

    [LV.1]初来乍到

    0

    主题

    24

    帖子

    315

    积分

    中级会员

    Rank: 3Rank: 3

    积分
    315
    10#
    发表于 2020-3-16 10:22:35 | 只看该作者
    正需要,支持楼主大人了!
    回复 支持 反对

    使用道具 举报

    您需要登录后才可以回帖 登录 | 立即注册

    本版积分规则

    学习课程!一站搞定!
    学途无忧VIP会员群

    973849140

    周一至周日9:00-23:00

    反馈建议

    1227072433@qq.com 在线QQ咨询

    扫描二维码关注我们

    学途无忧!为学习谋坦途,为会员谋福利!|网站地图