yaroslav/inkmark

🔧 工具yaroslav

一款基于 Rust 的高性能 Ruby Markdown 解析器，专为 AI 和 RAG 工作流优化。

Inkmark 弥合了高性能系统编程与 Ruby 应用开发之间的鸿沟。通过利用 Rust 的 pulldown-cmark，它在保持对 CommonMark 和 GFM 规范严格兼容的同时，实现了卓越的解析速度。其“AI 优先”的设计理念旨在为开发者提供从复杂 Markdown 文档中提取结构化数据的可靠方案。这对于 RAG（检索增强生成）管道尤为关键，因为准确的文本分块和语义保留至关重要。该 gem 可作为传统慢速纯 Ruby 解析器的直接替代品，为处理大量文档或用户生成内容的应用带来显著的性能提升。其架构确保了在转换过程中完整保留文档结构，从而更轻松地与向量数据库及 LLM 上下文窗口进行集成。

💡核心亮点

├─基于 Rust pulldown-cmark 构建
├─针对 RAG 场景优化文本分块
└─完全兼容 CommonMark 与 GFM

🎯适用人群

├─Ruby on Rails 开发者
└─AI 工程师

🔗链接

└─GitHub 仓库