我要投稿
随着大模型上下文窗口扩大到100K-200K Token（开源）或者200万-1000万字（商业），不少人开始质疑检索增强生成（RAG）是否已经过时？
| 企业机构 | 模型名称 | 上下文长度 | 开/闭源 | 是否中文 | |
| 360 | 360Zhinao-7B-Chat-360K | 360K | 开源 | 是 | |
| 猎户星空 | Orion-14B-LongChat | 200K-320K | 开源 | 是 | |
| 元象XVERS | XVERSE-Long-256K | 256K | 开源 | 是 | |
| 上海AI Lab | InternLM2-Chat-7B/20B | 200K | 开源 | 是 | |
| 零一万物 | Yi-6B-200K | 200K | 开源 | 是 | |
| 百川智能 | Baichuan2-192K | 192K | 开源 | 是 | |
| NousResearch | Yarn-Mistral-7b-128k | 128K | 开源 | 否 | |
| Anima | Anima-7B-100K | 100K | 开源 | 否,中文需要申请 | |
| Anthropic | Claude 2.1 | 200K | 闭源 | 是 | |
| 智谱AI | GLM4 | 128K | 闭源 | 是 | |
| OpenAI | ChatGPT-Turbo | 128K | 闭源 | 是 | |
| 月之暗面 | Kimi Chat | 20万字 | 闭源 | 是 | |
| 月之暗面 | Kimi Chat Longer | 200万字 | 闭源 | 是 | |
| 通义千问 | qwen | 1000万字 | 开/闭源 | 是 | |
LangChain团队（Lance Martin 软件工程师）结合几个最新研究项目成果来探讨、分析这个问题。通过多针“大海捞针”方法，深入分析了长上下文大模型在事实推理和检索（reasoning & retrieval in long context LLMs）方面的局限性，接着分析了长上下文给RAG带来的新变化，如以文档为中心的索引技术（RAPTOR+Long embeddings）和RAG的流程变化（Self-RAG、CRAG）。
多针“大海捞针” ：https://blog.langchain.dev/multi-needle-in-a-haystackChallenge may be recency bias in LLMs：https://arxiv.org/pdf/2310.01427.pdfRAG from scratch：https://github.com/langchain-ai/rag-from-scratchRAG新突破RAPTOR： https://github.com/parthsarthi03/raptorDense X Retrieval: https://arxiv.org/pdf/2312.06648.pdfTogether Embeddings：https://www.together.ai/blog/embeddings-endpoint-releaseSelf-RAG：https://arxiv.org/abs/2310.11511CRAG：Corrective Retrieval Augmented Generation https://arxiv.org/abs/2401.15884
53AI，企业落地大模型首选服务商
产品：场景落地咨询+大模型应用平台+行业解决方案
承诺：免费场景POC验证，效果验证后签署服务协议。零风险落地应用大模型，已交付160+中大型企业
2025-05-19
淘天⾃营质量技术AI智能体的实践和思考
2025-05-19
BM25：RAG中的文本相关性排序
2025-05-19
RAG架构综述：探寻最适配RAG方案
2025-05-19
大模型RAG实战｜生成带有引用来源的回答
2025-05-19
三路检索+多模态融合！深度解析RAG 2.0如何攻克大模型落地难题
2025-05-19
重磅！用 Gemini 2.5 搭载 Cohere Embed v4，视觉RAG 终于不用 Markdown 绕路了！
2025-05-19
如何选择Embedding Model？关于嵌入模型的10个思考
2025-05-19
小米 Mi-BRAG 智能引擎：全模态文档问答与细粒度溯源的创新实践
2024-10-27
2024-09-04
2024-05-05
2024-07-18
2024-06-20
2024-06-13
2024-07-09
2024-07-09
2024-05-19
2024-07-07
2025-05-16
2025-05-15
2025-05-14
2025-05-14
2025-05-13
2025-05-11
2025-05-08
2025-05-05
回到顶部
粤ICP备17114055号