熊喵君的博客

Thinking will not overcome fear but action will.

基于 CRON 库扩展的分布式 Crontab 的实现

基于 golang 的分布式定时器任务模型的通用实现

0x00 前言 最新项目中使用到了分布式定时器事件（场景是服务器定期修改密码），本篇文章小结下。 0x01 单机 CRON 库介绍 Golang CRON 库 Crontab 的使用与设计 前文介绍了单机 Cron 的使用及分析，但是在现实环境中，需要解决单个节点（进程）的高可用问题，保证定时任务正常执行不受影响。 应用的需求 保证任务不能被多个节点重复执行 单个节点宕机时能...

Posted by pandaychen on January 16, 2022

使用 Golang 实现 RDP 和 VNC（一）

rdp/vnc 协议基础 && 使用（入门篇）

0x00 前言 （RDP）Windows Remote Desktop Protocol、VNC（Virtual Network Computing）都是图形化的登录终端（远程桌面）协议。本文介绍基础概念及使用，涉及如下知识，参考 此文： RDP：RDP 远程桌面协议（支持 linux/windows） VNC：linux 中常用的屏幕分享协议 Guacamole Protoc...

Posted by pandaychen on January 12, 2022

微服务中的缓存（三）：缓存一致性原理 && 实践

一道美团的面试题：Redis 与 MySQL 双写一致性如何保证？

0x00 前言 前两篇文章介绍了微服务中的缓存常用概念及一致性的问题解决，本文以 go-zero 项目为例，看下其针对于多级缓存的实现分析。 微服务中的缓存（一）：Cache 使用与优化 微服务中的缓存（二）：微服务基础之多级服务缓存（Cache） 0x01 问题 本文汇总下微服务的缓存使用原理，再结合go-zero框架分析下如何优雅的针对一致性问题的实践。 0x...

Posted by pandaychen on January 1, 2022

关于 Kafka 应用开发知识点的整理（二）

Kafka 的高可用（可靠）及 sarama 库的使用细节

0x00 前言 本篇文章，总结下在项目中使用 sarama-kafka 库的一些经验及对 Kafka 集群高可用的一些认识。核心围绕着：如何主动感知到 push 到 kafka 的消息哪些未被消费（生产到消费的各个环节）以及如何避免这种情况的 0x01 Kafka 的基本概念 回顾下 kakfa 的架构： Producer：生产者，可以将数据发布到所选择的 topic 中 ...

Posted by pandaychen on January 1, 2022

使用 Golang 实现 SSH 和 SSHD（三）

Bash 中的控制字符功能说明 && 分析

0x00 前言 项目中，需要实现 OpenSSH 字符终端审计及输入命令还原，因而需要了解 Bash 中的特殊按键行为及其对终端屏显的影响。本篇文章梳理下特殊按键的行为。 0x01 常用按键对应的 ascii 码 按键 name ASCII-HEX ENTER 回车 ...

Posted by pandaychen on January 1, 2022

Golang 系统编程：如何实现对后台服务优雅的热重启？

网关的热重启机制：原理&&实现&&分析（fvbock/endless）

0x00 前言 基本概念 热重启（Graceful Restart），是一项保证服务可用性的手段。它允许服务重启期间，不中断已经建立的连接，老服务进程不再接受新连接请求，新连接请求将在新服务进程中受理。对于原服务进程中已经建立的连接，也可以将其设为读关闭，等待平滑处理完连接上的请求及连接空闲后再行退出。通过这种方式，可以保证已建立的连接不中断，连接上的事务（请求、处理、响应）可以正常...

Posted by pandaychen on November 20, 2021

Golang CRON 库 Crontab 的使用与设计

基于 golang 的定时任务模型分析

0x00 前言 cron 是一个用于管理定时任务的库（单机），基于 Golang 实现 Linux 中 crontab 的功能 0x01 使用 Linux 的 crontab crontab 基本格式： # 文件格式說明 # ┌──分钟（0 - 59） # │ ┌──小时（0 - 23） # │ │ ┌──日（1 - 31） # │ │ │ ┌─月（1 - 12） # ...

Posted by pandaychen on October 5, 2021

Golang httprouter 库分析

高效的路由框架 julienschmidt/httprouter 分析

0x00 前言 httprouter 非常高效的一个 http 路由框架，gin 框架的路由也基于此库。使用比较简单： func main() { router := httprouter.New() // 注册路由 router.GET("/", Index) router.GET("/hello/:name", Hello) log.Fat...

Posted by pandaychen on October 1, 2021

Golang 标准库：net/http 应用（二）

net/http 客户端在项目中的应用经验小结

0x00 前言 本文汇总下项目中使用 net.http 包的一些经验总结；在生产环境中，golang 自带的 http client 需要配置合适的参数才能适应项目场景。 0x01 http 连接池的使用 关于 net.http 的连接池，先给出一些结论： 长连接必须客户端与服务端都开启，任何一端不支持，连接池也就没效果了 http 客户端默认开启的是长连接（即 Disa...

Posted by pandaychen on October 1, 2021

Golang 并发协程池实现分析（三）

分析 Ants 协程池实现

0x00 前言 本文分析下协程池库 ants 的实现，仓库 在此，此库基于 fasthttp 的协程池实现。 0x01 ants 协程池使用 ants 提供了两种执行模式： 1、ants.NewPool(pool_size) 通过这种方式创建的 Pool，需要调用 pool.Submit(task) 提交任务，任务是一个无参数无返回值的函数，适合不关注结果的并发任务场景 2、ant...

Posted by pandaychen on September 1, 2021

FEATURED TAGS
Latex gRPC 负载均衡 OpenSSH Authentication Consul Etcd Kubernetes 性能优化 Python 分布式锁 WebConsole 后台开发 Golang OpenSource Nginx Vault 网络安全 Perl 分布式理论 Raft 正则表达式 Redis 分布式 限流 go-redis 微服务 反向代理 ReverseProxy Cache 缓存 连接池 OpenTracing GOMAXPROCS GoMicro 微服务框架 日志 zap Pool Kratos Hystrix 熔断 并发 Pipeline 证书 Prometheus Metrics PromQL Breaker 定时器 Timer Timeout Kafka Xorm MySQL Fasthttp bytebufferpool 任务队列 队列 异步队列 GOIM Pprof errgroup consistent-hash Zinx 网络框架 设计模式 HTTP Gateway Queue Docker 网关 Statefulset NFS Machinery Teleport Zero Trust Oxy 存储 Confd 热更新 OAuth SAML OpenID Openssl AES 微服务网关 IM KMS 安全 数据结构 hashtable Sort Asynq 基数树 Radix Crontab 热重启 系统编程 sarama Go-Zero RDP VNC 协程池 UDP hashmap 网络编程 自适应技术 环形队列 Ring Buffer Circular Buffer InnoDB timewheel GroupCache Jaeger GOSSIP CAP Bash websocket 事务 GC TLS singleflight 闭包 Helm network iptables MITM HTTPS Tap Tun 路由 wireguard gvisor Git NAT 协议栈 Envoy FRP DPI gopacket Cgroup Namespace DNS eBPF GoZero Gost Clash Tracee gopsutil Linux HIDS ELKEID XDP TC Systemd netlink Kernel rootkit bpftrace
ABOUT ME

✉️ ringbuffer@126.com

FRIENDS