qq_42599616的博客

给 open*** 上不同角色分配不同的访问权限

在上一篇中，设置的 iptables 路由转发只是保存在内存当中，假设服务器重启，那么就会丢失该配置信息。本文中介绍如何安装 iptables（centos7 版本默认没有安装 iptables），并保存相关配置信息，做到开机自启动。...

以监控 mysql 数据为例，简单写了一个使用 Pulsar Admin API 来操作 Source 的 Demo

在 Windows 上使用 OpenVPN + Frp 技术组建本地局域网

本文使用 Open*** + Frp 技术组建本地局域网。

本文详细介绍了 pulsar 集群以及 pulsar io 环境的部署，并展示了如何在 pulsar 集群上使用 debezium mysql connector。

很多文章都是基于standalone模式运行，这里使用的是distribute模式运行，通过kafka-connect-oracle来实时同步oracle数据，再写入到kafka消息队列中。

本文使用的是debezium连接器来实时同步SQL server数据，再写入到kafka消息队列中。

HBase 学习总结之DeleteColumn标记删除时机原理1、原理1.1为什么DeleteColumn是在major_compact阶段删除而不是在Flush删除？2、总结1、原理学过HBase的应该都知道，在HBase当中，当发出Delete命令时，实际上数据并没有真正被删除，而是被打上了删除标记，使得这个被删除的数据对外不可见，即无法通过scan以及get方法获取数据，不过没有被系统自动Flush前仍可用以下方式来展示数据scan 'table_name',{RAW=>TRUE,V

java项目打包成.exe包含第三方依赖包如果需要打包的项目有用到其他的包，那么在maven项目的pom.xml文件中可以加上<build> <plugins> <plugin> <groupId>org.apache.maven.plugins</groupId>...

IDEA项目运行问题相信很多用IDEA的朋友有时候会出问题，这里就总结了几个问题以及解决方法问题1. java:-source 1.5 中不支持lambda表达式原因:只有java8版本开始才支持lambda表达式解决方法：Project language level需要配置为与jdk版本一致,Modules->Sources的Language level也是一样问题2.Inf...

netty 实现客户端与服务端的简单通信我这里话就不多说了，直接上代码。Server端import io.netty.bootstrap.ServerBootstrap;import io.netty.buffer.ByteBuf;import io.netty.channel.*;import io.netty.channel.group.ChannelGroup;import i...

目录一、编译运行过程遇到问题二、打包过程遇到问题三、上架App Store遇到的问题一、编译运行过程遇到问题1、控制台输出的报错信息中发现会有某些方法不存在，没有该命名的参数，或者是某些变量、参数不存在。解决方法：在Flutter项目中pubspec.yaml将出现问题的插件的版本号切换为指定版本，即去掉 ^ 符号，因为有些插件用最新的可能会出现不兼容的问题，同时确保Flutter版本与开发项目时所用的版本一致。2、[VERBOSE-2:platform_view_layer.cc(20)] Try

Canal To Mysql1.配置pom.xml文件2.main方法入口3.Canal客户端4.解析binlog5.Produce方法1.配置pom.xml文件<dependencies> <dependency> <groupId>com.alibaba.otter</groupId> <artifactId>canal.client</artifactId> <version

Kafka To Hudi1.配置pom.xml文件2.main方法入口1.配置pom.xml文件<dependency> <groupId>org.apache.spark</groupId> <artifactId>spark-core_2.12</artifactId> <version>2.4.5</version></dependency><dependency>

目录1、ack应答机制2、Exactly Once3、Producer 事务为保证 producer 发送的数据，能可靠的发送到指定的 topic，topic 的每个 partition 收到producer 发送的数据后，都需要向 producer 发送 ack（acknowledgement 确认收到），如果producer 收到 ack，就会进行下一轮的发送，否则重新发送数据。1、ack应答机制Kafka 为用户提供了三种可靠性级别，用户可根据对可靠性和延迟的要求进行权衡。0prod

Kafka Eagle安装问题一、问题描述二、解决方法三、Eagle链接一、问题描述com.mysql.jdbc.exceptions.jdbc4.MySQLNonTransientConnectionException:Could not create connection to database server.无法连接mysql二、解决方法其主要问题是mysql驱动过低， 需要用更高版本的的Eagle本人尝试过从1.2版本起，到2.0版本的Eagle，仍然无法连接上mysql 8.0.

Hadoop HA集群的搭建序言1、JDK的安装2、环境变量的配置3、映射主机名与IP地址3.1修改主机名(其它四台虚拟机也是要修改为对应的hostname)3.2修改hosts文件(每台虚拟机都要配置)3.3ping主机名4、分发配置信息到各个虚拟机5、配置SSH无秘钥连接6、同步虚拟机的时间7、安装zookeeper(安装在slave结点)8、安装Hadoop8.1解压安装包8.2修改配置文件...

shell脚本快速启动Hadoop HA集群1、编辑allzkServer.sh2、编辑alljournal.sh3、编辑allhdfs.sh4、启动集群1、编辑allzkServer.shvi allzkServer.sh#!/bin/bashcase $1 in"start"){ for i in slave1 slave2 slave3; do echo "*********$i zkServer start*********" ssh $i "source /et