ETL-Talend官方入门实战案例
鉴于国内关于Talend文档使用案例相对较少,对初学者相当不友好,所以本文基于官方文档做出的实际的使用例子,全部流程完美复现。对于初学者请耐心作完,将受益匪浅。
文档是省略版,底部有打包上传的代码,并有详细的说明文档,请实际操作并复现比对
- 使用界面介绍
案例1 :读取本地源文件并结构化输出
构建movie.csv文件元数据结构信息
在Job design添加一个movie的作业
添加fFileInputDelimited、tLogRow组件到作业里面
添加要读入的文件信息、并输出到控制台
- 执行流程
案例2 :读取本地源文件并按要求过滤
在Job design添加一个filter_movie的作业
添加fFileInputDelimited、tMap、tLogRow组件到作业里面
添加要读入的文件信息、过滤、并输出到控制台
- 执行流程
案例3 :将过滤的有效和无效的数据分别写入Mysql
在Job design添加一个mysql_filter_movie的作业
添加fFileInputDelimited、tMap、tDBOoutput、tLogRow组件到作业里面
添加要读入的文件信息、过滤、写入数据库
- 执行流程
案例3 :将Mysql的数据读取写入HDFS
在Job design添加一个mysql_hdfs的作业
添加mysql、tHDFSOoutput、tLogRow组件到作业里面
读取数据,写入HDFS
- 执行流程
完整代码文档:talend_project
目录 返回
首页