【Flink】FlinkSQL读取hive数据(批量) |
您所在的位置:网站首页 › flinksql读取kafka中定时数据 › 【Flink】FlinkSQL读取hive数据(批量) |
一、简介:
Hive在整个数仓中扮演了非常重要的一环,我们可以使用FlinkSQL实现对hive数据的读取,方便后续的操作,本次例子为Flink1.13.6版本 二、依赖jar包准备:官网地址如下: Overview | Apache Flink 1、我们需要准备相关的jar包到Flink安装目录的lib目录下,我们需要根据官网hive的版本下载Flink的live连接包 2、额外我们需要准备Flink的hadoop依赖包,否则会报缺少包的错误,下载过程见如下博客 【Flink】ClassNotFoundException: org.apache.hadoop.conf.Configuration-CSDN博客 下载后的jar包传到Flink安装目录的lib目录下,如下图: |
今日新闻 |
推荐新闻 |
CopyRight 2018-2019 办公设备维修网 版权所有 豫ICP备15022753号-3 |