windows 本地 IDEA ,Spark 远程访问 Hive 并写回 。
最新推荐文章于 2026-05-06 07:10:02 发布
本文介绍了如何在Windows上的IntelliJ IDEA中,使用Scala编写的Spark程序远程连接到Hive并进行数据操作。关键步骤包括将hive-site.xml配置文件放入Spark的conf目录,启用Hive支持,配置元数据路径,并在操作时明确指定数据库和表名。环境配置为Scala 2.11.8,Spark 2.3.1,Hadoop 2.6.0-cdh5.15.1,Hive 1.1.0-cdh5.15.1,需要注意的是,MySQL驱动需使用5.x版本而非8.x版本。


1183

被折叠的 条评论
为什么被折叠?



