Skip to content

基于flink的http连接器,支持通过url下载csv格式文件

License

Notifications You must be signed in to change notification settings

fanpocha/flink-connector-http

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

4 Commits
 
 
 
 
 
 
 
 

Repository files navigation

flink-connector-http

介绍

一个基于flink的http输入输出连接器

使用

1、mvn引入

    <dependency>
            <groupId>com.fu</groupId>
            <artifactId>flink-connector-http</artifactId>
            <version>1.0.0</version>
    </dependency>

2、sql source

               CREATE TABLE `source-test` (
                 `id` varchar   COMMENT 'id',
                 `name` varchar  COMMENT 'name',
                 PRIMARY KEY (`id`)  not enforced
               ) WITH (
                'connector' = 'http',
                'format' = 'file',
                'method' = 'get',
                'url' = 'https://localhost:8088/sdflkcx.csv'
               )";

可用的 options

数据类型 默认值 是否必填 描述
url STRING 请求url
method STRING get 请求方式
format STRING file 数据类型
format.file.type STRING csv 文件格式
format.type.charset STRING gb2312 文件流量编码

About

基于flink的http连接器,支持通过url下载csv格式文件

Resources

License

Stars

Watchers

Forks

Packages

No packages published

Languages