mysql导入数据到clickhouse

本文介绍了如何从MySQL通过SQL查询导出CSV文件,并详细展示了如何在ClickHouse中创建对应表并导入CSV数据的过程。涉及的技术包括JOIN操作和文件导出,以及ClickHouse的MergeTree引擎和CSV格式导入。

1、从mysql中导出csv文件

SELECT
	b.id,
	b.NO,
	b.type,
	b.in_or_out_time,
	b.photo,
	a.college_id,
	a.major_id,
	a.class_id INTO OUTFILE '/var/lib/mysql-files/stu_in_out_record.csv' FIELDS TERMINATED BY ',' OPTIONALLY ENCLOSED BY '"' LINES TERMINATED BY '\n' 
FROM
	stu a
	LEFT JOIN stu_record b ON a.NO = b.NO;
	

2、clickhouse创建对应的表、导入到clickhouse
创建表

CREATE TABLE cjrtest.stu_in_out_record(
                                                       `id` String,
                                                       `no` String,
                                                       `type` Int64,
                                                       `in_or_out_time` DateTime,
                                                       `photo` String,
                                                       `college_id` String,
                                                       `major_id` String,
                                                       `class_id` String

) ENGINE = MergeTree
      --PARTITION BY no
      ORDER BY (no);

导入到clickhouse

cat /var/lib/mysql-files/stu_in_out_record.csv | clickhouse-client --query="INSERT INTO cjrtest.stu_in_out_record FORMAT CSV"

在这里插入图片描述

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值