挖掘有趣 Github 的猫。


有事联系:https://t.me/qumaobot
🍭 #数据库备份 #数据恢复 #运维工具


🏵 Portabase - 多数据库备份与恢复工具


🍥 简介:
Portabase 是一款数据库备份与恢复解决方案,支持 PostgreSQL、MySQL、MsSQL、MariaDB、Firebird SQL、SQLite、MongoDB、Redis 及 Valkey 等多种数据库系统。该程序通过自动化脚本实现数据备份与还原流程,适用于跨数据库平台的运维环境,能够有效保障多类型数据库的数据完整性与灾备需求。


🎈 【进入项目】


🗣 活动线报 | 掘金项目
🍭 #开源工具 #数据监控 #OSINT

🏵 ShadowBroker - 全球多源实时公开数据聚合平台

🍥 简介:
ShadowBroker 是一款开源数据可视化平台,旨在汇集全球60余个来源的实时公共数据。该系统通过交互式地图展示飞行轨迹、航海数据、卫星影像、监控画面及自然灾害与军事动态等信息。平台内置超过35个数据图层,集成人工智能代理分析功能,并提供去中心化即时通讯模块,适用于复杂地理空间数据的高效整合与实时监测。

🎈 【进入项目】


🗣 活动线报 | 掘金项目
🍭 #数据库 #备份工具 #PostgreSQL


🏵 pgBackRest - PostgreSQL高性能备份解决方案

🍥 简介:
pgBackRest 是一款专为 PostgreSQL 设计的备份与恢复工具。该程序支持多线程并行处理、增量备份、异地远程传输、数据加密以及 S3、Azure、GCS 等主流云存储集成。通过其高效的架构,可实现大规模数据库的快速备份与复杂环境下的数据恢复。目前该项目已停止维护。

🎈 【进入项目】


🗣 活动线报 | 掘金项目
🍭 #数据库工具 #数据备份 #开源软件


🏵 Portabase - 数据库备份与恢复管理工具

🍥 简介:
Portabase 是一款专注于简化数据库实例备份与恢复流程的专业工具。该程序通过与 Portabase 代理程序进行集成,实现对数据库操作的集中化管理。其设计核心在于确保数据备份过程的高效性与安全性,适用于需要对数据库实例进行标准化维护与灾难恢复的技术环境。

🎈 【进入项目】


🗣 活动线报 | 掘金项目
🍭 #AI工具 #数据预测


🏵 MiroFish - 智能数据预测平台

🍥 简介:
MiroFish是一款AI预测工具,基于用户数据(如新闻、政策、历史)构建数字世界。用户上传数据并设定目标后,系统将生成数千个具备人格与记忆的智能代理。这些代理交互模拟未来发展,提供详细预测报告及聊天功能。

🎈 【进入项目】


🗣 活动线报 | 掘金项目
🍭 #数据工具 #终端应用


🏵 DataTUI - 终端数据快速查看器

🍥 简介:
DataTUI是一款基于Rust和Ratatui构建的快速终端数据查看工具。它支持键盘操作,旨在高效处理数据。该工具可用于浏览CSV/TSV、Excel和SQLite文件中的数据,并提供多标签页视图、数据排序、过滤、以及通过Polars实现的SQL查询等核心功能,以满足终端数据分析需求。

🎈 【进入项目】


🗣 活动线报 | 掘金项目
🍭 #数据管理 #开源工具


🏵 Eidos - 可扩展个人数据管理平台

🍥 简介:
Eidos 是一款可扩展的个人数据管理平台。其核心功能是将 SQLite 数据库转换为个人便携式数据库,使用户能够轻松存储和管理各类个人数据。平台设计旨在提供高效的数据检索与访问能力,确保数据的可用性和便捷性,适用于多种个人数据管理场景。

🎈 【进入项目】


🗣 活动线报 | 掘金项目
🍭 #OSINT工具 #数据分析


🏵 Flowsint - 开源情报分析

🍥 简介:
Flowsint是一款开源的OSINT数据分析工具,致力于伦理调查、信息透明化及数据验证。该工具提供了一套高效方法,用于收集、处理和解读公开来源情报。它支持安全研究和风险评估,强调情报来源合法性与分析严谨性,旨在提升数据获取的准确性和可靠性。

🎈 【进入项目】


🗣 活动线报 | 掘金项目
🍭 #人工智能 #数据科学

🏵 AI数据科学团队 - AI驱动,任务加速10倍

🍥 简介:
该项目构建了一个由人工智能驱动的数据科学团队协作框架。其核心功能在于通过自动化和智能决策支持,显著加快标准数据分析任务的执行速度。该框架集成了先进的AI技术,使数据专业人员能够高效处理复杂的数据集,并将常规操作效率提升至传统模式的十倍,从而优化数据科学工作流程。

🎈 【进入项目】

🗣 活动线报 | 掘金项目
🍭 #数据处理 #格式转换


🏵 Edit Banana - 统计格式转换框架

🍥 简介:
Edit Banana 是一款专为统计数据格式转换设计的框架。它提供了一套工具和接口,能够高效地将各种统计数据格式解析并转化为可编辑的结构,便于用户进行后续的数据处理、分析与操作。该框架旨在简化数据格式转换的复杂性,提升数据处理的灵活性和效率。

🎈 【进入项目】


🗣 活动线报 | 掘金项目
🍭 #AI工具 #数据存储


🏵 MemU - AI记忆管理系统

🍥 简介:
MemU使AI系统能摄取对话、文档和媒体,将其转换为结构化记忆,并存储在三级文件系统中。它提供快速嵌入搜索和深度基于LLM的数据检索,支持多种数据类型以及云端或自托管部署,并配有简洁的API。

🎈 【进入项目】


🗣 活动线报 | 掘金项目
🍭 #数据提取 #AI工具


🏵 LangExtract - 提取结构化数据

🍥 简介:
LangExtract 是一个免费的 Python 库。它利用 Gemini 等人工智能模型,从报告、书籍等非结构化文本中提取结构化数据,如人名、情感或药物信息。该库旨在简化数据解析过程,提高数据处理效率。

🎈 【进入项目】


🗣 活动线报 | 掘金项目
🍭 #AI工具 #数据处理工具 #开源项目


🏵 CocoIndex - AI数据格式转换

🍥 简介:
CocoIndex是一款快速开源的数据处理工具,其核心使用Rust,外部接口采用Python。该工具专注于将原始数据高效转换为AI模型所需的特定格式,包括向量索引和知识图谱,以支持人工智能应用的数据预处理阶段。

🎈 【进入项目】


🗣 活动线报 | 掘金项目
🍭 #数据库工具 #模式迁移


🏵 Pgschema - PostgreSQL声明式模式迁移

🍥 简介:
Pgschema是一款命令行工具,专为PostgreSQL提供Terraform风格的声明式模式迁移功能。用户无需手动编写迁移文件,只需定义期望的数据库模式状态,Pgschema便能自动生成并执行相应的迁移计划。

🎈 【进入项目】


🗣 活动线报 | 掘金项目
🍭 #数据抓取 #爬虫框架


🏵 Scrapy - 强大的网站数据提取工具

🍥 简介:
Scrapy 是一款强大的网站数据提取工具,免费且运行稳定。它能够高效处理复杂的爬取任务,并支持同时管理大量请求,在大规模数据抓取场景下展现出卓越的速度和效率。

🎈 【进入项目】


🗣 活动线报 | 掘金项目
🍭 #数据层 #状态管理


🏵 LiveStore - 响应式SQLite数据层


🍥 简介:
LiveStore 是一个强大的应用程序数据层,利用响应式 SQLite 数据库管理数据,并实现设备间即时同步,包括离线模式。它取代了 Redux 等传统状态管理工具,支持以响应式方式查询和更新数据,通过事件溯源(event-sourcing)提供实时同步功能。


🎈 【进入项目】


🗣 活动线报 | 掘金项目
🍭 #备份工具 #数据安全


🏵 Kopia - 跨平台备份工具

🍥 简介:
Kopia是一款跨平台的备份工具,支持Windows、macOS和Linux系统。它提供快速增量备份、端到端加密、客户端数据压缩和去重功能。Kopia内置命令行界面(CLI)和图形用户界面(GUI),旨在高效、安全地管理用户数据备份,确保数据完整性与保密性。

🎈 【进入项目】


🗣 活动线报 | 掘金项目
🍭 #数据处理 #Python框架

🏵 Pathway - Python ETL/流处理框架

🍥 简介:
Pathway是Python框架,用于ETL、流处理、实时分析、LLM管道和RAG。它提供Python API,支持机器学习库集成。代码可在开发与生产环境运行,处理批处理和流式数据。同一代码适用于本地开发、CI/CD、批处理作业与数据流处理。

🎈 【进入项目】

🗣 活动线报 | 掘金项目
🍭 #网络爬虫 #数据抓取 #开发框架


🏵 Scrapy - 网页数据抓取框架

🍥 简介:
Scrapy是一个开源的网络爬虫框架,专为从网站高效提取结构化数据而设计。它提供了一整套工具集,用于构建、部署和管理复杂的爬虫项目,实现自动化数据收集。Scrapy支持多平台运行,具备高度可扩展性,并且要求Python 3.10或更高版本作为其运行环境,以确保最佳兼容性和性能。

🎈 【进入项目】


🗣 活动线报 | 掘金项目
🍭 #数据工具 #Python库


🏵 Pandas-datareader - 从网络源提取数据

🍥 简介:
Pandas-datareader 是一个 Python 库,用于从各种互联网数据源提取数据。该工具能够将获取的数据直接加载到 pandas DataFrame 结构中,旨在简化数据采集和预处理流程。它为开发者和数据科学家提供了一个高效、标准化的数据获取方案,便于快速集成外部数据进行分析和应用,提升工作效率。

🎈 【进入项目】


🗣 活动线报 | 掘金项目
 
 
Back to Top