每天认识一个组件:数据治理Apache Atlas
Apache Atlas 的核心价值,是把分散在数据平台中的技术元数据、业务语义、分类标签、血缘关系和安全策略组织到一个统一治理框架中。
30 万行 SQL 数据全是 NULL?别急着填,先看这 4 类字段的"命运"
很多数据分析师、后端开发都有过这种经历:拿到一张 30 万行的订单表,打开一看——customer_id 有空、pay_time 有空、coupon_amount 有空、address 也有空。下意识 UPDATE ...
PostgreSQL 18异步I/O:一行配置,读延迟直接下降60%
一、一次扎心的性能优化事故很多团队升级数据库新版本,都会抱着极高期待,希望新特性直接解决线上查询慢的痛点。Ark Protocol团队也一样,他们完成PostgreSQL 18版本升级,满心期待新版本的异步I/O能力,结果连续11天,数据库读取延迟没有任何改善。
数仓字段从哪来的?开源SQL解析工具一条条追
数仓指标不对,老板问 amount 字段上游是谁。三层嵌套三个 JOIN,人眼追一下午。自己写正则更惨:三天写完,三个月修不完 bug,注释里的 FROM 被匹配,子查询漏了。SqlParserX 是袋鼠云上个月刚开源的 SQL 解析引擎,Java 写的,Apache-2.
公司没预算买 Navicat,我推荐了 DBBridge,老板以为我花了几千块
一分钱没花,DBA 的工作效率翻了一倍——一个小预算团队的求生之路。说个真实的事。我们团队不大,3个后端+1个DBA(我)。日常要维护十几个数据库实例——开发库、测试库、预发布库、生产库。MySQL、PostgreSQL、SQLite 什么都有。
DuckDB 2.0:从嵌入式分析引擎到轻量级数据平台
根据官方消息,DuckDB 2.0 即将于今年秋季发布。这个版本不仅仅是一次简单的功能增强,而是涉及架构层面的重大演进,意味着它正在发展为一个现代化的通用数据平台。本文分享 DuckDB 2.0 中的几个亮点功能,最终的完整功能可以等待新版本正式发布。
如何将 MySQL 表从一个数据库复制到另一个数据库
探索将 MySQL 表从一个数据库复制到另一个数据库的多种方法,包括 SQL 查询、mysqldump、GUI 工具,以及用于自动化实时复制的 i2Stream。为什么需要将 MySQL 表从一个数据库复制到另一个数据库?
DuckDB数据分析实战:读写Excel文件
在企业数据分析场景中,Excel 几乎无处不在。为此,DuckDB 提供了专门的插件,让数据分析师和开发人员可以像查询数据库表一样直接查询 Excel 文件,同时支持将分析结果直接导出为 Excel 文件。