[英]What are the best practices to set up DEV and Pre-production environments and CI/CD for Bigquery
我被分配为我们即将推出的数据管道设计 CI/CD 框架。 我正在寻找将源代码控制、元数据和测试管理集成到我们的数据管道部署中的最佳方法。
我们想要一个开发环境，开发人员可以在其中测试数据管道（流式传输和批处理），然后自动推送代码以触发构建过程。
你明白了……
我找到了这两个文件，并从高层次上理解了什么是必要的。
我不明白的是如何创建/访问测试数据。
它提到了一个预生产环境，并建议与 prod 非常相似。 我们有一个庞大的数据仓库。 这是否意味着我们必须将存储空间翻倍才能在测试环境中工作？
此外，它还提到为每个开发人员创建一个项目来开发和测试代码。 我想更好地理解这个概念，因为它没有提供有关该方法的详细信息
你能给些建议么？
在 gitlab CI/CD 中使用 GOOGLE_APPLICATION_CREDENTIALS 的最佳实践
[英]Best practices for using GOOGLE_APPLICATION_CREDENTIALS in gitlab CI/CD
作为谷歌项目所有者，给自己最少特权的最佳做法是什么？
[英]As google project owner, what are best practices to give myself least privileges?
声明:本站的技术帖子网页，遵循CC BY-SA 4.0协议，如果您需要转载，请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.
