安装sqoop

news/2024/10/28 22:26:29/

解压: sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz

tar -zxvf sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz
ln -s sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz sqoop
在这里插入图片描述

替换 lib中commons-lang3.jar删除替换为commons-lang-2.6.jar
备注: https://mvnrepository.com/可以找到commons-lang-2.6.jar
在这里插入图片描述

修改配置:

sqoop-env.sh

mv sqoop-env-template.sh  sqoop-env.shvim sqoop-env.sh
export HADOOP_COMMON_HOME=/bigdata/server/hadoop
export HADOOP_MAPRED_HOME=/bigdata/server/hadoop
export HIVE_HOME=/bigdata/server/hive

测试是否成功:
条件mysql,hadoop
/bigdata/server/sqoop/bin/sqoop list-databases --connect jdbc:mysql://127.0.0.1:3306/ --username root -P

123456

mysql导入数据hdfs

/bigdata/server/sqoop/bin/sqoop import
–connect jdbc:mysql://ecs-qar1-0002:3306/test
–username root
–password 123456
–table zy_one
–target-dir /sqoop

hdfs数据查看

hadoop fs -cat /sqoop/*
在这里插入图片描述


http://www.ppmy.cn/news/147537.html

相关文章

持续集成部署-微前端 镜像可以有多小?

微前端 镜像可以有多小? 1. 需求2. 开整 1. 需求 目前项目前端的镜像大小基本在 150M 左右,试下能不能缩小到 20M? 看了下前端打包后的压缩包只有 几 兆; 想着有空调试下,第一反应应该是使用 alpine 镜像&#xff0…

Spring Boot如何实现分布式文件系统

Spring Boot如何实现分布式文件系统 随着数据量的不断增长,单机文件系统已经无法满足大规模数据存储和访问的需求,因此分布式文件系统变得越来越重要。本文将介绍如何使用 Spring Boot 实现分布式文件系统。 1. 分布式文件系统的设计 分布式文件系统是…

展锐8310充电笔记

充电主函数 CHGMNG_Init() 判断USB是否在位 CHG_PHY_IsChargerPresent() 充电检测 _CHGMNG_ChargeMonitorRoutine() 不同温度下的充电设置 _CHGMNG_CheckVbatTempMonitor()

tp6完全开发手册

tp6完全开发手册地址:序言 ThinkPHP6.0完全开发手册 看云 ThinkPHP6.0基于精简核心和统一用法两大原则在5.1的基础上对底层架构做了进一步的优化改进,并更加规范化。https://www.kancloud.cn/manual/thinkphp6_0/1037479

迈拓维矩DVI带本地环出光端机(MT-GD02D)

概述 DVI光端机MT-GD02D采用先进的非压缩数字高清视频和高速数字光纤传输技术,可以轻松地将计算机主机、高清视频信号源、高清DVD/DVR等设备输出的各种分辨率的DVI高清信号长距离传输到远端,抗干扰能力极强,保证信号的完整性,稳定…

化骨龙zeus 800mw 图传拆解

最近比较倒霉,飞飞机又炸鸡了,这次炸的有点狠,炸到水泥路上了,化骨龙小锤子天线炸断,电池炸坏一个,图传炸断天线座,电子炸坏一个,关键是电机这几天还不发货,也就放假这几…

高性价比掌机Retroid Pocket 3:搭载展锐芯片T310,采用PowerVR GPU

Retroid Pocket 3游戏掌机厂商GoRetroid凭借其可靠的产品,极具竞争力的价格,在掌机游戏市场有着较高的影响力。 2022年9月,在Goretroid长达数月的开发和推广后,Retroid Pocket 3终于发布了。基础版本价格119$,更高RAM版…

迈拓恢复出厂设置图解_迈拓维矩电脑切换器使用方法?

展开全部 迈拓维矩电脑切换器的使用方法有: 1、控制有些安装e5a48de588b662616964757a686964616f31333433616265JAVA不成功的系统 需要排查是否是网站下载的最新的JAVA程序,www.java.com,并需要查看下载的是32位还是64位的,是否和电脑的操作系统是否匹配。 2、调整屏幕显示…