flinksql table类型数据存入clickhouse-sinkfunction版本

最新推荐文章于 2026-03-02 13:05:57 发布

原创最新推荐文章于 2026-03-02 13:05:57 发布 · 288 阅读

0 ·

本内容遵循CC 4.0 BY-SA版权协议

标签

#clickhouse #sql #数据库

收录于

该文介绍了如何在Clickhouse中创建表格并利用Flink的RichSinkFunction进行数据插入。代码示例展示了连接Clickhouse数据库，准备SQL语句，并在Flink的sink函数中处理和写入数据的过程。

首先在click中进行创建表格
create table res (
                     sub String,
                     page_id String,
                     count int

)
    engine  = MergeTree()
        order by sub;
select * from res;


ospv为table数据



class clichhousesink extends RichSinkFunction<Row>{
    Connection cn=null;
    PreparedStatement ps =null;
    @Override
    public void open(Configuration parameters) throws Exception {
        Class.forName("ru.yandex.clickhouse.ClickHouseDriver");
        cn = DriverManager.getConnection("jdbc:clickhouse://hadoop102:8123?characterEncoding=utf8", "default", "");
        ps = cn.prepareStatement("insert into res values (?,?,?)");
    }

    @Override
    public void close() throws Exception {
        cn.close();
        ps.close();
    }

    @Override
    public void invoke(Row value, Context context) throws Exception {
        ps.setObject(1,value.getFieldAs(0));
        ps.setObject(2,value.getFieldAs(1));
        ps.setObject(3,value.getFieldAs(2));
        ps.executeUpdate();
    }
}