挖掘有趣 Github 的猫。


有事联系:https://t.me/qumaobot
🍭 #PDF处理 #数据清洗 #大模型训练


🏵 Olmocr - PDF文档转换为LLM训练数据


🍥 简介:
Olmocr 是一套专门用于 PDF 文档线性化处理的工具集。该程序能够从复杂的 PDF 结构中提取并转换文本及布局信息,将其转化为适合大语言模型(LLM)训练的高质量数据集格式,从而优化模型对文档类数据的理解与分析能力。


🎈 【进入项目】


🗣 活动线报 | 掘金项目
🍭 #开源项目 #数据库 #大数据

🏵 Apache Doris - MPP架构实时分析型数据库

🍥 简介:
Apache Doris 是一款基于 MPP 架构的开源实时分析型数据库,支持高性能 SQL 分析与 Lakehouse 查询加速。该系统具备处理大规模数据的能力,并提供针对结构化数据、文本以及向量数据的混合搜索功能,适用于复杂的实时数据分析场景。

🎈 【进入项目】


🗣 活动线报 | 掘金项目
🍭 #大语言模型 #流式传输 #数据完整性 #系统防护


🏵 SIMURG - LLM流式传输完整性监控与异常重置


🍥 简介:
SIMURG 是一款专注于大语言模型流式输出的完整性监控工具。该程序可在响应生成过程中实时检测解码错误,并根据检测结果即时中断传输。对于窗口等待期产生的错误,系统会直接拦截;针对传输过程中出现的异常,程序可在数百字符内触发自动纠错机制,强制宿主系统重新生成响应内容,有效保障终端用户获取数据的准确性与连续性。


🎈 【进入项目】


🗣 活动线报 | 掘金项目
🍭 #大模型评估 #游戏逻辑测试


🏵 llm-bulls-and-cows-benchmark - LLM猜数字游戏逻辑评估框架

🍥 简介:
该轻量级框架旨在评估大语言模型在“猜数字”(Bulls and Cows)逻辑游戏中的性能表现。程序内置多种模型API接口,通过标准化测试流程量化模型的推理能力、逻辑遵循度及数字序列处理效率,为开发者提供客观的性能基准参考数据。

🎈 【进入项目】


🗣 活动线报 | 掘金项目
🍭 #AI工具 #本地部署 #大模型交互

🏵 Open WebUI - 自托管ChatGPT风格AI界面

🍥 简介:
Open WebUI 是一款专为本地大模型设计的自托管Web交互平台。该程序支持集成 Ollama 及兼容 OpenAI API 的模型,内置 RAG(检索增强生成)引擎、文件上传解析、实时网页搜索及多用户权限管理功能。通过 Docker 命令即可完成私有化部署,实现完全离线、自主可控的 AI 交互环境,适用于需要保护数据隐私及深度定制化服务的应用场景。

🎈 【进入项目】


🗣 活动线报 | 掘金项目
🍭 #AI开发工具 #大模型优化

🏵 Headroom - AI模型提示词与上下文压缩工具

🍥 简介:
Headroom 是一款本地化AI代理工具,通过压缩提示词、日志、文件及对话历史,显著降低LLM交互的Token消耗。该工具在保持输出质量的前提下,可实现60%至95%的压缩率。支持作为独立库、代理服务器、MCP服务器或代理包装器使用,在节省成本、提升处理速度的同时,支持完整还原原始数据,满足高效开发需求。

🎈 【进入项目】


🗣 活动线报 | 掘金项目
🍭 #AI工具 #大模型


🏵 ReMind - AI大模型安全交互平台

🍥 简介:
ReMind是一个AI交互平台,设计用于促进与大型语言模型的沟通。该平台集成了健壮的聊天历史管理功能,支持多模态附件处理,并内置高级安全特性。它为AI驱动的通信提供稳定且安全的环境,适用于需要高效数据处理和隐私保护的多种应用场景。

🎈 【进入项目】


🗣 活动线报 | 掘金项目
🍭 #医疗AI #大语言模型


🏵 MedLLMsPracticalGuide - 医疗大模型实践指南

🍥 简介:
本项目旨在提供医疗领域大语言模型(LLMs)的实践指导。内容涵盖LLMs在医疗场景的应用方法、技术框架及相关资源,系统性地汇集了包括概念树、数据表格与学术文章在内的专业资料,以支持医疗AI应用的开发与部署。

🎈 【进入项目】


🗣 活动线报 | 掘金项目
🍭 #AI框架 #大模型工具


🏵 MemOS - 大模型记忆操作系统

🍥 简介:
MemOS 是专为大语言模型设计的记忆增强操作系统,帮助模型实现长期记忆存储、检索和管理,显著提升上下文感知和推理表现。它通过模块化架构,支持文本记忆、激活缓存和参数记忆等多种类型,灵活扩展、便于集成不同数据源和模型。开发者可通过统一 API 快速实现记忆读写、用户管理和多种记忆操作,极大提升多轮对话、复杂推理和个性化场景下的 LLM 应用能力。适用于研究、产品开发及定制化智能体系统。

🎈 【进入项目】


🗣 羊毛撸货线报 | 合作/投稿
🍭 #大语言模型 #深度学习


🏵 Byte Latent Transformer - 字节级LLM架构

🍥 简介:
Byte Latent Transformer(BLT)是一种创新的字节级大模型架构,无需分词即可端到端处理原始字节流,极大提升了推理效率和健壮性。它通过动态分割字节为可变长度的“Patch”片段,实现按需分配算力,适应不同数据复杂度。BLT引入了新的注意力机制,增强了字节与Patch间的信息流动,并包含专用的字节序列记忆。官方代码支持大规模模型训练和推理,可直接加载权重并生成文本,适合探索高效、灵活的LLM新范式和大规模预训练研究。

🎈 【进入项目】


🗣 羊毛撸货线报 | 合作/投稿
🗣 每日羊毛线报 👈


🏵 Skywork-OR1 - 增强数学与代码推理

🍥 简介:
Skywork-OR1 (Open Reasoner 1) 是一个专注于提升大型语言模型在数学和代码领域推理能力的项目。其核心技术是采用基于规则的大规模强化学习(RL),并结合精心设计的数据集与训练流程。该项目发布了一系列模型,包括专精数学的 Skywork-OR1-Math-7B,以及通用推理预览版 Skywork-OR1-7B/32B-Preview。这些模型在数学(如 AIME 基准测试)和代码(如 LiveCodeBench)推理任务上展现出领先性能,部分模型甚至能媲美参数量远超自身的模型。项目已开源模型权重、RL 训练数据及相关代码。

🍭 #大语言模型 #强化学习


🎈 【进入项目】


🎯 关注频道 🤖 合作/投稿
 
 
Back to Top