Archives

2020 / 12

2020-12-04

Java 中间件 #Kafka

背景上一篇文章记录了kafka的副本机制和容错功能的说明，本篇则主要在上一篇文章的基础上，验证多分区Topic的消费者的功能验证；目录：消费组功能验证

kafka 消费者 3

2020-12-02

Java 中间件 #Kafka

./kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 2 --topic arnold_consumer_test_1 ./kafka-topics.sh --describ

2020 / 11

Cat 消息文件存储结构

2020-11-30

Java 中间件 #Cat

消息模型消息流水线消息文件存储 CAT 针对消息写多读少的场景，设

JVM 内存分析 Mat使用详解

2020-11-28

Java JVM

背景笔记中躺了很久的文章，今天用到Mat时发现之前写的内容还算清晰，分享出来; 如下所举例使用的dump文件是针对之前使用的ignite库溢出时的dump文件；关于ignite的概念此处不再叙述，本篇文章重点则在于Mat即可 Mat的作用 MAT是Memory Analyzer tool的缩写，是

MySql Binlog 说明 & Canal 集成MySql的更新异常说明 & MySql Binlog 常用命令汇总

2020-11-17

Java 中间件 #Canal

目录背景介绍开启MySql binlog binlog-format参数说明 binlog_row_image参数说明测试参数变更对Binlog日志记录内容的影响 binlog_row_image配置为FULL进行测试 binlog_row_image配置为MINIMAL测试常用的MySql

ElasticSearch 集群基本概念及常用操作汇总（建议收藏）

2020-11-10

Java 中间件 #ElasticSearch

目录： ElasticSearch集群特性 es部署安装，要踩的坑少不了 ElasticSearch CRUD操作 ElasticSearch Search操作 ElasticSearch 分词器analyzer ElasticSearch,集群特性 ES的集群是基于Master Slave架构的

Canal源码中好用的细节以及一些值得学习的部分

2020-11-07

Java 中间件 #Canal

在 IDEA Canal项目中直接全局搜索 “好用”；以及搜索 FIXME相关的内容： canal中的项目结构，以及项目的打包方式，项目的pom关联，以及项目的打包最终生成的项目结构，都值得再好好学习一下； canal中对于kafka的封装，es6，es7的一些封装，对一些其它的mq的封装，还有一

K8S Canal基于Prometheus进行实时指标监控

2020-11-06

Java 中间件 #Canal #P8S

部署canal的prometheus监控到k8s中 1、grafana的docker部署方式；https://grafana.com/grafana/download?platform=docker 2、prometheus的docker部署方式： https://github.com/promet

2020 / 09

Canal开发：CanalV2需优化项-20200901

2020-09-01

Java 中间件 #Canal

canal优化 1、配置的所有dataSource，默认项目启动时将会全部进行初始化；但是如果存在第三方库被删除等情况，导致jdbc连接不上时，此时canal异常需告警出去。 2、新建dataSource时，jdbcUrl错误导致ds初始化异常，此时异常应外抛给展示层 3、批量ETL时，如果此时SQ

2020 / 08

JDK14-ZGC调研初探

2020-08-24

Java JVM

背景公司ElasticSearch准备进行升级，而ElasticSearch7以上则是已经在支持使用JDK11了，JDK11中最大的特点就是 ZGC，更快的垃圾回收，更爽的快感，你懂的；所以，调研zgc的特性以及使用方式就迫在眉睫，再加上jdk14也已经刚出不久，所以则是直接以JDK14为基础，进

Previous 5 / 8 Next