普元数据开发平台 普元数据开发平台
产品介绍
安装部署
快速入门
操作指南
应用集成
FAQ
  • Hive Sink组件使用说明
  • 组件说明
  • 配置项说明
  • FAQ

# Hive Sink组件使用说明

  • 组件说明
  • 配置项说明
  • 使用示例
    • 关系型数据库同步Hive数据示例
  • FAQ

# 组件说明

Hive Sink连接器。用于将数据写入Hive 数据库。

# 配置项说明

配置名称 数据类型 是否必填 默认值 描述
节点名称 String 是 Hive 当前创建的节点名称,由用户自定义且不可为空。命名可包含字母、数字、下划线。确保唯一性。
节点编码 String 是 自动生成 当前创建的节点编码,以此标识此组件,由用户自定义且不可为空。命名可包含字母、数字、下划线。确保唯一性。
选择数据源 String 是 - 从下拉选项中选择列出的当前项目已经关联的数据源。
选择库 String 是 - 从下拉列表中选择数据库。
选择表 String 是 - 从下拉列表中选择数据表。
压缩模式 String 否 NONE 支持NONE、SNAPPY、LZO。
表添加模式 String 否 表不存在时创建 对于目标表的情况,处理方式有三种:
- 重新创建表
- 表不存在时创建
- 表不存在时报告错误
- 忽略对表的处理
数据添加模式 String 否 追加数据 支持四种模式:
1、追加数据:数据统一追加到目标表中;
2、同步前删除数据:先清空目标表数据,然后再给目标表添加数据;
3、当存在数据时,报告错误:当目标表存在相同数据时,报告错误,不会添加数据。
4、自定义处理:用户可以自定义写SQL的方式进行处理。
可选参数 Map 否 - 其他参数,用户可以根据需求进行配置。

# FAQ

← HBase Http →