gmlove / gmlove.github.io

Personal blog
3 stars 0 forks source link

一个 ETL 自动化测试框架 | Bright LGM's Blog #94

Open gmlove opened 1 year ago

gmlove commented 1 year ago

https://brightliao.com/2021/04/25/data-testing-tool/

在前一篇文章《数据测试实践》中,我们探讨了数据应用如何做测试的问题。在数据测试中,ETL脚本的测试是个难题。一般而言,采用高集成度的测试方式(即运行ETL并比对结果,下文称集成测试)是更有效的做法。但是,这类测试的编写和维护却有较高的成本。如何降低ETL集成测试的成本呢?本文尝试从数据工具的角度分享一些我们的经验。