标签[databricks-repos] - 堆栈内存溢出

Databricks repos 笔记本被误删除（未提交，未版本化），是否可以恢复？ - Databricks repos notebook deleted by mistake (not commited, not versioned), is posible to restore it?

在任何提交之前，我不小心从我的数据块存储库中删除了一个笔记本，我希望从垃圾文件夹中恢复它，但笔记本不在那里。是否可以从服务器上的任何目录或类似目录中恢复？ ...

CI/CD 的文件夹结构符合 Databricks Repo - Folder Structure for CI/CD conform Databricks Repo

是否有任何最佳实践来组织您的项目文件夹，以便 CI/CD 管道保持简单？这里，使用了如下结构，看起来比较复杂：这里，建议采用以下结构：具体来说，我想知道：我应该为所有存储库和笔记本使用一个回购协议（如第一种方法中建议的那样）还是应该为每个库创建一个回购协议（这使得 CI/CD 更加努力， ...

如何将文件从 DBFS 复制到 Databricks 上的 REPOS？ - How do I copy a file from DBFS to REPOS on Databricks?

我目前正在将我在dbfs中生成的 python .whl文件移动到位于/Workspace/Repos/My_Repo/My_DBFS_File的存储库中，以将该文件提交给 Azure DevOps。由于 Databricks Repos 是一个只读位置，它不允许我以编程方式将文件复制到 Rep ...

Databricks Repos 分支的程序化签出 - Programmatic checkout of Databricks Repos branch

我有一个集成测试，它比较 output 从 2 个不同的分支（即主分支和功能分支）运行相同的脚本。目前，此测试从我的本地计算机开始，但我想将其迁移到 Databricks 作业，并完全从 Workflows 界面运行它。我可以使用 notebooks 和dbutils重新创建大部分现有的集成测试 ...

Azure Databricks - 自动同步 repo 文件 - Azure Databricks - Sync repo files automatically

在 Azure Databricks 中，我可以通过控制台手动在存储库中添加不同的 git 存储库。但如果我在源代码库中提交任何内容，则无法找到任何自动同步新文件的方法。 Azure 中有没有可以做这种工作的服务？谢谢 ...

Azure Databricks Repos 中的笔记本无法显示差异 - Notebook in Azure Databricks Repos cannot show difference

我正在尝试提交并将我的更改推送到分支，我无法加载差异。我没有更改很多单元格，每个单元格不超过笔记本文件中的 500 行。我想知道为什么会发生这种情况以及如何解决它？ ...

azure databricks 笔记本变基 - azure databricks notebook rebase

我正在尝试将我的功能分支重新定位到主分支的最新提交。在文档中我看到有一个 rebase 按钮，但在我的笔记本中我只看到创建分支按钮。知道如何在 azure databricks notebook 中做 rebase 吗？ ...

Azure databricks 笔记本缺少存储库 - Azure databricks notebook missing Repo

我是 azure databricks notebook 的初学者。我阅读了 azure databricks notebook 中的文档，侧边栏中应该有一个 Repo。但在我的一本笔记本中，我没有找到它。你知道为什么吗？是故意设置的吗？ ...

在 GIT 中拉取请求后更新 Databricks 工作区笔记本 - Update Databricks workspace notebook after pull request in GIT

我在 Azure Databricks 中集成了 GIT，并且希望能够在我每次向 Dev 发出拉取请求时在我的工作区中拥有一个更新的笔记本，从而使 GIT 中的任何更新也出现在我的工作区笔记本中。我相信有一种方法可以在发生这种情况时在 DevOps 中启动发布管道，并且可能有一个 API 可以帮助 ...

如何在 Databricks Repos 的另一个文件中导入模块？ - How does importing a module in another file in a Databricks Repos work?

我正在使用 databricks 存储库我有两个文件，我的函数在一个名为 func.py 的文件中，位于另一个名为 folder1 的文件夹中我在其中调用 lower_events 的主笔记本这会返回一个错误但这是有效的 ...

使用 python 脚本在 Azure DevOps 管道上调用 Databricks API 失败，但从本地计算机在 Postman 上成功运行 - Databricks API call fails on Azure DevOps pipelines using python script, but run successfully on Postman from local machine

在 Azure Databricks API 中，我尝试使用 Azure Databricks API 将最新更改拉到 Databricks 存储库中每个文件夹中的主分支。这就是我所指的地方：当我使用邮递员通过向以下端点发布请求来进行调用时，它会成功拉取，如下所示：端点：这是 ...

通过使用 Github 操作连接到 Databricks CLI 来更新 Databricks 工作区存储库 - Update Databricks Workspace Repo by Connecting to Databricks CLI with Github Actions

每次对存储库进行新推送时，我都会尝试将最新版本的 GitHub 存储库自动拉入我的 Databricks 工作区。一切正常，直到 Databricks CLI 请求主机 URL，之后它失败并显示“错误：进程已完成，退出代码 1”。我假设这是我的令牌和主机凭据存储为秘密未正确加载到环境中的问题。 ...

Azure databricks repos：如何通过 API 拉取 - Azure databricks repos: how to pull via API

我正在使用 Azure DevOps 的存储库将 Azure 数据块连接到我在 DevOps 中的存储库。我需要从 Azure DevOps 管道中自动提取。为此，我尝试使用 databricks API 进行拉取，但参考此链接没有拉取的方法。按照说明并查看招摇，唯一可用的方法是：有没有 ...

Databricks REST API 调用更新分支错误：用户设置 > Git 集成以设置 Azure DevOps 个人访问令牌 - Databricks REST API call for updating branch error : User Settings > Git Integration to set up an Azure DevOps personal access token

我在使用https://docs.databricks.com/dev-tools/api/latest/repos.html#operation/update-repo中提到的 databricks rest api 将 repo 更新到不同的分支时遇到错误。我已经使用服务主体进行了身份验证并 ...

是否可以在 Databricks 共享 git 文件夹中只设置一个分支（在屏幕截图中突出显示）？ - Is it possible to set only one branch at Databricks shared git folder(highlighted in screenshot)?

我想在数据块工作区的共享文件夹中只设置一个分支。附上屏幕截图以提供更多清晰度。所有数据工厂管道都使用共享文件夹位置来运行笔记本，如果有人将其更改为生产以外的其他分支，一切都会开始混乱。所以我想知道这个分支是否可以锁定，如果可以，如何锁定？请帮忙..！！ ...

使用 Databricks Repos API 将顶级生产文件夹中的 Repo 升级到最新版本 - Using the Databricks Repos API to bring Repo in top-level production folder to latest version

我在使用 Databricks Repos API 的 Github Actions 工作流程中遇到问题。我们希望在 Git Action 中调用 API 将我们的 Databricks Repos 顶级文件夹中的 Repo 带到合并到主分支中的最新版本。我们设置的 Github Actions ...

我如何从 Azure Devops 自动化 Databricks 笔记本 - How do i automate Databricks notebook from Azure Devops

我的所有代码都在 Azure Databricks 笔记本中。我想使用 azure devops 自动执行我的笔记本。我已将我的 Databricks Repos 与 Azure Repos 链接起来。创建了一个构建管道来创建我的代码的工件。在发布管道中。我能够将我的代码部署到较低的环境（ ...

在 Repos 中使用 Databricks CLI 导入 CSV 文件 - Import a CSV file using Databricks CLI in Repos

我们正在使用 Databricks 生成 ETL 脚本。第一步需要我们将小的 csvs 上传到 Repos 文件夹中。我可以在 Repos GUI 中使用 import window 手动执行此操作。但是，我想使用 databricks cli 以编程方式执行此操作。这可能吗？我试过使用 ...

如何使用 ci/cd 管道将 bitbucket 存储库自动化到 databricks repos - How to automate the bitbucket repository to databricks repos by using ci/cd pipeline

有人可以帮助解决如何使 ci/cd 管道自动化以更新和创建来自 bitbucket 存储库的数据块存储库中的新文件.. ...

如何在 Azure Databricks 上的两个项目之间共享代码 - How to sharing code between two projects on Azure Databricks

我在 Azure Databricks 上有两个 ML 项目，它们的工作方式几乎相同，只是它们用于不同的客户端。本质上，我想使用一些管理系统，这样我就可以在不同的项目中共享和重用相同的代码。（即存储对特征工程有用的函数的 python 文件、执行类似初始数据预处理的 Databricks 笔记 ...