Configuring Oracle Data Integrator for Cloudera

本文介绍如何将ODI以及Hadoop结合在一起。在此之前,确保已安装了ODI软件以及搭建好Hadoop环境,也可以参考我的其他博文进行环境搭建。

1、创建目录

[[email protected] ~]# hdfs dfs -mkdir -p /user/oracle/odi_home
[[email protected] ~]# hdfs dfs -chown oracle:oinstall /user/oracle/odi_home
[[email protected] ~]# hdfs dfs -ls /user/oracle/
drwxr-xr-x   - oracle oinstall          0 2018-03-06 13:59 /user/oracle/odi_home

此目录为ODI HDFS的根目录,如果不创建此目录,则在后续的步骤中会遇到 ODI-26039错误。

2、Big Data向导

File->New…,选择Big Data Configurations

3、常规设置

Prefix:前缀,默认即可。
Distribution:根据CDH版本进行选择。
Distribution Type:使用默认Normal即可。
Base Directory:/opt/cloudera/parcels/CDH
Technologies:根据实际环境选择相关组件

结果如下图所示:

4、Hadoop设置

5、HDFS设置

6、Hive设置

7、Oozie设置

8、验证设置

原文地址:http://blog.51cto.com/candon123/2083709

时间: 2024-11-02 18:55:49

Configuring Oracle Data Integrator for Cloudera的相关文章

Oracle Data Integrator 12c 安装(ODI安装)

企业版安装步骤(包含独立安装步骤) 官网下载Oracle Data Integrator 12cR2 (12.2.1.0.0)地址 如上图,在安装ODI时,有两种选择,第一种是独立版安装,只需安装Oracle Data Integrator 12cR2 ,第二种是企业版安装,需要先安装Oracle Fusion Middleware Infrastructure ,再安装Oracle Data Integrator 12cR2 . 可能遇到的问题: 此安装程序必须使用 Java 开发工具包 (J

Oracle Data Integrator 12c----简单CDC(Simple CDC)

Simple CDC最简单的一种 CDC.在这里,每一张 CDC 的表的变化都是独立捕获的,不需要考虑多张存在主外键引用关系的表之间的数据一致性. 1 环境准备 源表:ODI_SRC.DEPT 目标表:ODI_TAG.DEPT 配置拓扑结构见ODI Studio拓扑结构的创建与配置(Oracle) 模型反向工程见:Oracle Data Integrator 12c-模型(Model)和 数据存储(DataStore) 2导入并配置JKM 首先在项目中导入 JKM JKM Oracle Simp

Oracle Data Integrator 12c----一致性 CDC(Consistent CDC)

一致性 CDC 中引入了变化集的概念.一个变化集中可以包括多个相互存在关联关系(如主外键引用关系)的表.CDC 在捕获和发布一个变化集中的变化时能够保证数据的一致性.这个练习介绍如何使用能够保证一致性的CDC. 1 环境准备 源表:ODI_SRC.DEPT,ODI_SRC.EMP 目标表:ODI_TAG.DEPT, ODI_TAG.EMP 配置拓扑结构见ODI Studio拓扑结构的创建与配置(Oracle) 模型反向工程见:Oracle Data Integrator 12c-模型(Model

Oracle Data Integrator 12cR1 (12.1.3.0.0)安装过程

Oracle Data Integrator 12cR1 (12.1.3.0.0)安装过程 下载安装文件 Oracle Data Integrator 12cR1 (12.1.3.0.0) http://download.oracle.com/otn/nt/middleware/12c/121300/fmw_12.1.3.0.0_odi_Disk1_1of1.zip Oracle Fusion Middleware Infrastructure http://download.oracle.co

oracle data integrator的安装一

前期软件准备: JDK 链接:链接: http://pan.baidu.com/s/1qXWeP4K 密码: 2czn sqldeveloper 链接:链接: http://pan.baidu.com/s/1bpHS2sv 密码: v5eg oracle data integrator(ODI)链接: http://pan.baidu.com/s/1skNVtFn 密码: q5cf ODI需要创建资料库账号以及工作库账号,在这里用oracle为例. 用system用户进入oracle. 1.查询

Oracle Goldengate和Oracle Data Integrator的初步认识

免责声明:     本文中使用的部分图片来自于网络,如有侵权,请联系博主进行删除 1. Oracle Glodengate是什么? GoldenGate是oracle的一种基于数据库日志的数据同步软件,它通过解析源数据库在线日志或归档日志获得数据的增删改变化,再将这些变化全部或者部分的应用到目标数据库,实现源数据库与目标数据库实时同步. GoldenGate软件可以在异构的IT基础结构(包括几乎所有常用操作系统平台和数据库平台)之间实现大量数据亚秒一级的实时复制. GoldenGate的工作原理

Oracle Data Integrator之代理创建

本文依次介绍了如何创建ODI 12c的Standalone agent.Physical agent以及Logical agent.三种agent的含义如下图所示: 一.创建Standalone Agent [email protected]:~$ cd /u01/odi/oracle_common/common/bin [email protected]:/u01/odi/oracle_common/common/bin$ ./config.sh 创建新域,域位置根据实际情况定义,这里使用默认

Oracle Data Integrator 12c-模型(Model)和 数据存储(DataStore)

一.概念 Model模型: 描述关系型数据的模型. 是一组存放在特定的技术(如Oracle)的数据存储的集合.例如当技术为Oracle时,对应于数据库的Scheme DataStore: 数据存储 一个模型中包含的元数据,对应于模型所在scheme中的表或视图.可以通过反向工程(reverse-engineered) 从真实的环境导入, 也可以在ODI 中创建 二.支持的操作 测试表格 DROP TABLE DEPT; CREATE TABLE DEPT ( DEPTNO NUMBER (2)

Oracle Data Integrator 12c-第一个映射

一.创建"项目" 设计器->项目,点击插入项目图标, 在项目对话框的"定义"标签下输入项目名称如ODI_Exercise ,保存 二.导入知识模块 项目→知识模块→右键导入知识模块 文件导入目录:Oracle\Middleware\Oracle_Home\odi\sdk\xml-reference 反向工程知识模块(RKM) RKM Oracle 加载知识模块(LKM) LKM SQL to Oracle 检查知识模块(CKM) CKM Oracle 集成知识