AI落地的一些建议与思考
一只产品汪啊
2024-11-21 15:37:20
📍文本切割的技巧及策略
✅基于模型(这里指的是大模型和embedding)选取chunk size
✅不同的文本切分策略
(1) CharacterTextSplitter
(2) RecursiveCharacterTextSplitter
(3) Document Specific Splitting
(4) Semantic Chunking
📍推荐的Embedding模型[之前有同学问到这点长上下文是否替代了RAG?
✅(1) 长上下文窗口的好处
✅(2) 长上下文窗口与RAG的对比适用场景
📍两者之间的关系和发展路径
0
阅读：0
