JVM

内存管理，解释执行虚拟机指令，即时编译

jvm的组成

• 类加载器
• jvm管理的内存
• 执行引擎
  • 即时编译器
  • 解释器
  • 垃圾回收器
• 本地接口

字节码文件

• 一般信息
  • 魔数：普通文件无法仅通过扩展名来创建，所以在文件的开头植入几个字符，去确定文件类型
  • 主版本号（减去46就是jdk版本），副版本号
  • 访问标识
• 常量池
  • 常量池会避免重复的定义
• 接口
• 字段
• 方法
• 属性

初识 Kafka

• zookeeper启动方式
• KRaft启动

安装Kafka

docker pull apache/kafka:3.7.0
docker run -p 9092:9092 apache/kafka:3.7.0
docker exec -it kafka sh
cd /opt/kafka/bin
./kafka-topic.sh

Redis

• redis的处理过程，源码解析

Redis 持久化

RDB( redis database backup)

AOF( append only file)

主从

slaveof ip port

概念

• 索引: 相同类型文档的集合
• 映射: 索引中文档的约束

安装

• es
• kibana
• 安装分词器 -- IK 分词器

操作索引库

mapping 属性

• type
  • text
  • keyword 精确值
  • long integer short byte double float
  • boolean
  • date
  • object
  • geo_point, geo_shape
• index 默认为true，默认设置倒排索引
• analyzer
• properties

Redis

缓存

缓存穿透

查询不存在的数据，导致没有数据写入缓存，直击数据库

• 缓存空数据
  • 内存占用高
• 布隆过滤器
  • 底层是bitmap
  • 可能发生误判，内存占用小

文档切分

• 保证前后划分的同一段文本里面，语义是统一的

文档检索

Word Embedding

向量数据库

• 嵌入文本
• 存储向量
• 相似度分析

RAG 优化

small to big

摘要检索

基础概念

快速入门

so eary

相关概念

• token
• 模型参数:
  • 温度: 控制文本生成的随机性，值越低越准确，
  • 核采样
  • 流式输出
  • message
    • system
    • user
    • assiant
    • tool
  • prompt

SpringAIAlibaba

没绷住系列

• @Slf4j来自Lombok

private static final Logger log =
    LoggerFactory.getLogger(A.class);  //作为某个类的私有字段

@Slf4j  // 可以替代上面那句话，也就是在编译期生成
        //所以这就解释了为啥我们需要Lombook插件，IDE 需要理解 Lombok 的 AST 变换
        //所以很多大厂不喜欢用，因为侵入编译流程