熊喵君的博客

Thinking will not overcome fear but action will.

Linux 内核之旅(九):Docker 容器底层原理深度剖析

Namespace/pivot_root/OverlayFS/LXCFS/eBPF/Cgroups

0x00 前言 本文基于 Linux Kernel v5.4.241 源码,从内核视角深入理解 Docker 容器的核心底层技术,主要涵盖如下: Namespace 隔离与 pivot_root 机制 OverlayFS 联合文件系统(重点) LXCFS/FUSE 资源视图伪装 eBPF 容器场景下的差异分析 Cgroups 下资源限制 OverlayFS...

Linux 内核之旅(八):内核数据包接收

基础知识汇总

0x00 前言 笔者最近在研究基于ebpf的网络协议栈可观测及tracing,本文对协议栈的数据处理基础做了若干总结 本文代码主要基于 v4.11.6 版本,网卡类型选择 Intel 的 igb(千兆网卡)驱动实现(万兆网卡为ixgb) 推荐阅读: Linux 网络栈接收数据(RX):原理及内核实现(2022) 图解Linux网络包接收过程,基于2.6内核 0x01 ...

Linux 内核之旅(七):虚拟内存管理(下)

内核视角的虚拟内存管理

0x00 前言 前文Linux 内核之旅(三):虚拟内存管理(上)学习了进程虚拟内存空间在内核中的布局以及管理,本文继续学习下内核态的虚拟内存空间的布局及管理 对于进程虚拟内存空间而言,不同进程之间的虚拟内存空间是相互隔离的,彼此之间相互独立(相互无感知),使得进程以为自己拥有所有的内存资源。而内核态虚拟内存空间是所有进程共享的,不同进程进入内核态之后看到的虚拟内存空间全部是一样的 ...

BCC with libbpf

BCC all in one

0x00 前言 测试机内核版本5.4.119-1-tlinux4-0008,python版本3.6.8 代码来源: BCC-tools的实现 eunomia-tools 0x01 基础 内核态工具函数 1、offsetof //cc/libbpf/include/linux/kernel.h #ifndef offsetof #define offsetof(...

BCC with python3

BCC all in one

0x00 前言 本小节汇总下基于python开发BCC程序的相关知识点,基于tag-v0.35.0,不分代码来自官方最新版本 参考: BCC工具示例1 BCC工具示例2 bcc Python Developer Tutorial bcc Reference Guide 0x01 基础 C开发BPF内核态代码 在编译之前,对BPF程序进行rewr...

Linux 内核之旅(六):进程调度(CFS)

0x00 前言 本文学习下 CFS 调度算法(Completely Fair Scheduler,完全公平调度器)用于 Linux 系统中普通进程的调度,CFS 调度器的目标是让所有普通进程的vruntime尽可能接近,实现公平的调度。CFS 的设计理念是在真实硬件上实现理想的、精确的多任务 CPU。CFS 调度器和先前内核版本调度器不同之处在于没有时间片的概念,而是分配 cpu 使...

Linux 内核之旅(五):内核的可观测技术

内核追踪的工具入门:ftrace/bpftrace/perf

0x00 前言 本文 ftrace/perf 内核实现部分的代码引用基于 v4.11.6;bpftrace 依赖 eBPF 子系统,完整功能需要 kernel 4.15+(BTF 支持需要 5.2+),因此 bpftrace 部分以较新内核为参考 追踪类调试工具鸟瞰图 性能追踪 宏观:通过全链路监控找出整个分布式系统中的瓶颈组件 微观:快速地找出进程内的瓶颈函数,从(...

Linux 内核之旅(四):进程调度基础

从 CPU 视角到 CFS / 抢占 / 负载观测的大白话

0x00 前言 Linux 进程调度的本质是:在有限 CPU 上(进程数目远超 CPU 数目),依据某种调度算法分配 CPU 时间(有效地分配CPU的时间),既要保证进程的最快响应,也要保证进程之间的公平 本文主体机制分析基于 Linux v4.11.6。若无特殊说明,均以此版本为准 调度延迟可观测(tracepoint)章节基于 Linux v5.4.241 ...

Kubernetes 拾遗(持续补充)

0x00 前言 本文代码片段参考v1.21.1版本 0x01 基础知识 k8s基本架构 apiserver:资源操作的唯一入口,接收用户输入的命令,提供认证、授权、API注册和发现等机制,通过标准的RESTFul API,重新封装了对 ETCD 接口调用,提供系统内其他组件调用的代理入口 scheduler:负责集群资源调度,按照预定的调度策略将Pod调度到相应的nod...

EBPF 内核态代码学习(三):基于 XDP 技术的ACL/Firewall实现

基于ebpf技术实现的XDP应用分析

0x00 前言 本文分析下基于XDP技术的防火墙相关实现细节,主要涉及如下项目: oxdpus xdp-firewall TyrShield 0x01 oxdpus项目 oxdpus是一个基于XDP技术实现的包过滤项目,支持下面指令: add Appends a new IP address to the blacklist attac...