HANA import csv文件

最新推荐文章于 2025-05-04 06:07:10 发布

原创最新推荐文章于 2025-05-04 06:07:10 发布 · 1k 阅读

0 ·

本内容遵循CC 4.0 BY-SA版权协议

收录于

Hana

本文介绍了一种高效的方法来将CSV文件导入到SAP HANA数据库中。具体步骤包括：将文件上传到HANA服务器、配置系统参数以允许特定路径下的文件导入，以及编写SQL导入语句。实测显示，此方法可以实现高速的数据导入，380万条记录仅需8秒。

使用import from命令将csv文件load到hana的表里。

第一步：将文件拷贝到hana服务器上。

# scp ./weixinlog.csv.gz 192.xx.xx.xx:/tmp/testdata/

第二步：修改参数 csv_import_path_filter，禁止该参数的限制，并且指定文件夹路径。

ALTER SYSTEM ALTER CONFIGURATION ('indexserver.ini', 'system') set ('import_export', 'enable_csv_import_path_filter') = 'false' with reconfigure

ALTER SYSTEM ALTER CONFIGURATION ('indexserver.ini', 'system') set ('import_export', 'csv_import_path_filter') = '/tmp/testdata' with reconfigure

第三步：编写导入语句，该语句可以在sql console中执行，对于指定字段的导入需要使用column list。

import from csv file '/tmp/testdata/weixinlog.csv'

into test.weixinlog

with record delimited by '\n'

field delimited by ','

COLUMN LIST(ID,APPID,MSGID,FROMUSER,TOUSER,TYPE,ACT,EVENT,EVENTTIME,ISDELETE,CREATETIME,MODIFYTIME)

threads 10

经过实测，导入速度相当快，380万条数据，约700MB数据，只花费了8秒钟。

参考官方文档：
http://help.sap.com/saphelp_hanaplatform/helpdata/en/20/f712e175191014907393741fadcb97/frameset.htm