kafka中topic的数据抽取不到hdfs上问题解决

ops/2024/11/20 2:40:42/

在上一个博客中有一个案例:

       将json文件抽取到kafka的消息队列(topic)中,再从topic中将数据抽取到hdfs

        https://blog.csdn.net/qq_62984376/article/details/143759037?spm=1001.2014.3001.5501

 

我们在从kafka中topic的数据抽到hdfs上的时候会出现 flume不报错,但也不抽取的情况

就卡在页面不动,hdfs上自然也没有数据产生

解决办法:

        其实这个也很简单,只需要在 /root/.flume下删除如图文件即可

再次执行flume命令就可以抽取成功了


http://www.ppmy.cn/ops/135130.html

相关文章

讯飞、阿里云、腾讯云:Android 语音合成服务对比选择

在 移动端 接入语音合成方面,讯飞和腾讯云等都是优秀的选择,但各有其特点和优势。咱们的需求是需要支持普通话/英语/法语三种语言,以下是对各个平台的详细比较: 一、讯飞语音合成介绍 与语音听写相反,语音合成是将一段…

【机器学习】回归模型(线性回归+逻辑回归)原理详解

线性回归 Linear Regression 1 概述 线性回归类似高中的线性规划题目。线性回归要做的是就是找到一个数学公式能相对较完美地把所有自变量组合(加减乘除)起来,得到的结果和目标接近。 线性回归分为一元线性回归和多元线性回归。 2 一元线…

htm + vue + quill 富文本编辑器案例

文章目录 前言一、Quill是什么?二、使用步骤1.快速开始2.主题 前言 Quill 编辑器与element-ui 配合使用,主要用于文章编辑 一、Quill是什么? Quill是一个跨平台的功能强大的富文本编辑器 二、使用步骤 1.快速开始 技术栈:vue…

【eNSP】路由基础与路由来源——静态路由实验

路由是数据包从源地址到目的地址的传输路径,静态路由是指网络管理员手动配置的路由条目,用于指定数据包从源地址到目的地址的固定路径。以下是关于静态路由的详细介绍。 一、路由的基础知识点 路由的定义: 路由是指在计算机网络中&#xff…

CnosDB 实时流式计算:优化时序数据处理与降采样解决方案

在处理时序数据时,数据写入周期通常与数据采集设备的频率相关,有时每秒钟就需要处理大量的数据点。长时间处理如此多的数据会导致存储问题。一个有效的解决方案是使用流式计算,将原始数据进行降采样。 流式计算在时序数据库中指对实时数据流…

JavaWeb之Vue

前言 这一节讲Vue 1. Vue概述 这些都是DOM的操作 原来模型和视图不能实现同步变化&#xff0c;但是Vue就可以了 2. 快速入门 1. 2. <script src"js/vue.js"></script><div id"app"> <!-- 准备一个input输入框,绑定一个模…

基本数据类型:Kotlin、Dart (Flutter)、Java 和 C++ 的比较

文章目录 一、基本数据类型的比较1.1 整数类型1.2 浮点类型1.3 字符类型1.4 布尔类型1.5 小结 二、有符号和无符号整数三、二进制补码表示四、精度丢失问题五、结论 在编程语言中&#xff0c;基本数据类型是构建更复杂数据结构的基础。在本文中&#xff0c;我们将比较 Kotlin、…

FFmpeg 4.3 音视频-多路H265监控录放C++开发十三.3:将AVFrame转换成AVPacket.封装。代码改动

请封装&#xff0c;保留ffmpeg结构体 现成安全处理 获取编码缓冲区数据 xencoder.h #pragma once#include <mutex> #include <vector>struct AVCodecContext; struct AVFrame; struct AVPacket; class XEncoder {public:AVCodecContext * Create(int code_id);/…