HackerNews中文版

在测试或预发布环境中使用生产级数据库可能会很痛苦——数据量大、速度慢，并且往往不符合隐私法规。如果您曾经需要一个干净且保持引用完整性的数据库子集，而不想编写复杂的 SQL 脚本，那么您一定要了解 Jailer。 什么是 Jailer？ Jailer 是一个强大的开源工具，具有以下功能： - 从关系数据库中提取一致的数据子集。 - 维护引用完整性（它会自动跟踪外键）。 - 创建测试数据集、迁移数据和匿名化敏感字段。 它支持 PostgreSQL、MySQL、Oracle、SQL Server、SQLite 等多种数据库。 为什么您应该使用它 <pre><code> 不再需要编写复杂的 JOIN SQL 来提取相关记录。非常适合测试数据的提供，尤其是对于复杂的模式。在数据隐私环境（如 GDPR、HIPAA）中，当不允许进行完整导出时表现良好。通过避免庞大的测试数据库，帮助加快 CI 管道的速度。 </code></pre> 一个简单的用例：提取客户及其订单 假设您想提取来自特定国家的所有客户，并包括他们所有相关的订单、项目和产品——但不包括其他内容。 使用 Jailer： - 选择客户作为主题表。 - 应用条件，例如： customer.country = 'Germany' - Jailer 将自动通过外键追踪相关的订单、订单项、产品等行。 - 将结果导出为 SQL 或直接复制到另一个数据库。 无需手动编写连接。没有破损的引用。没有头疼的问题。 <pre><code> 谁应该使用 Jailer？ - 需要从生产环境获取测试数据的 QA 工程师 - 迁移数据集的数据工程师 - 设置真实预发布环境的 DevOps 团队 - 需要控制和私密数据导出的合规团队 </code></pre> 资源 - GitHub: Wisser/Jailer - 官方文档: https://wisser.github.io/Jailer/ 最后的想法 Jailer 可能不够华丽，但对于任何处理大规模关系数据的人来说，它都是一颗隐藏的宝石。如果您关心数据的完整性、速度和简单性，不妨试试。您的 QA 团队（以及未来的您）会感谢您。

查看原文

Working with production-scale databases in test or staging environments can be painful — large, slow, and often non-compliant with privacy regulations. If you’ve ever needed a clean, referentially intact subset of your database without writing complex SQL scripts, you’ll want to meet Jailer.What is Jailer?Jailer is a powerful open-source tool for: - Extracting consistent data subsets from relational databases. - Maintaining referential integrity (it follows foreign keys for you). - Creating test datasets, migrating data, and anonymizing sensitive fields.It supports PostgreSQL, MySQL, Oracle, SQL Server, SQLite, and more.Why You Should Use It<pre><code> No more writing JOIN-heavy SQL to extract dependent records. Ideal for test data provisioning, especially for complex schemas. Works well in data privacy contexts (GDPR, HIPAA) when full exports aren’t allowed. Helps speed up CI pipelines by avoiding bloated test DBs. A Simple Use Case: Extract Customers with Their Orders </code></pre> Let’s say you want to extract all customers from a specific country and include all their associated orders, items, and products — but nothing else.With Jailer: - Select customer as the subject table. - Apply a condition like: customer.country = 'Germany' - Jailer will automatically trace related rows in orders, order_items, products, etc., via foreign keys. - Export results as SQL or directly copy to another DB.No hand-coded joins. No broken references. No headaches.<pre><code> Who Should Use Jailer? - QA engineers needing test data from production - Data engineers migrating datasets - DevOps teams setting up realistic staging environments - Compliance teams needing controlled, private data exports Resources - GitHub: Wisser/Jailer - Official Docs: https://wisser.github.io/Jailer/ Final Thoughts </code></pre> Jailer isn’t flashy, but it’s a hidden gem for anyone working with relational data at scale. If you care about data integrity, speed, and simplicity, give it a try. Your QA team (and your future self) will thank you.

轻松实现数据库子集管理的 Jailer：QA 和 DevOps 的必备工具