簡體   English   中英

ClearML(以前的 Trains)可以在本地服務器上工作嗎?

[英]Can ClearML (formerly Trains) work a local server?

我正在嘗試從ClearML (以前稱為 Trains)開始。

我在 文檔中看到我需要在 ClearML 平台本身或使用 AWS 等的遠程機器上運行服務器。

我真的很想繞過這個限制並在我的本地機器上運行實驗,而不是連接到任何遠程目的地。

據此,我可以在任何遠程機器上安裝trains-server ,所以理論上我也應該能夠在我的本地機器上安裝它,但它仍然需要我有 Kubernetes 或 Docker,但我沒有使用它們中的任何一個.

有人在本地服務器上使用 ClearML(或 Trains,我認為它仍然與 API 和所有)完全相同嗎?

  • 我的操作系統是 Ubuntu 18.04。

免責聲明:我是 ClearML 團隊的成員(以前稱為 Trains)

我真的很想繞過這個限制並在我的本地機器上運行實驗,而不是連接到任何遠程目的地。

幾個選項:

  1. Clearml 免費試用版為您的實驗提供免費托管,這些實驗僅供您訪問,除非您特別想在您的同事之間分享它們。 這可能是最簡單的入門方法。
  2. 安裝 ClearML-Server 基本上你只需要安裝 docker 就可以了。 這里有完整的說明,這是摘要:
echo "vm.max_map_count=262144" > /tmp/99-trains.conf
sudo mv /tmp/99-trains.conf /etc/sysctl.d/99-trains.conf
sudo sysctl -w vm.max_map_count=262144
sudo service docker restart

sudo curl -L "https://github.com/docker/compose/releases/latest/download/docker-compose-$(uname -s)-$(uname -m)" -o /usr/local/bin/docker-compose
sudo chmod +x /usr/local/bin/docker-compose

sudo mkdir -p /opt/trains/data/elastic_7
sudo mkdir -p /opt/trains/data/mongo/db
sudo mkdir -p /opt/trains/data/mongo/configdb
sudo mkdir -p /opt/trains/data/redis
sudo mkdir -p /opt/trains/logs
sudo mkdir -p /opt/trains/config
sudo mkdir -p /opt/trains/data/fileserver

sudo curl https://raw.githubusercontent.com/allegroai/trains-server/master/docker-compose.yml -o /opt/trains/docker-compose.yml
docker-compose -f /opt/trains/docker-compose.yml up -d
  1. ClearML 還支持完全離線模式(即不建立外部連接)。 實驗完成后,您可以手動將運行導入您的服務器(自托管或免費層服務器)
from clearml import Task
Task.set_offline(True)
task = Task.init(project_name='examples', task_name='offline mode experiment')

當該過程結束時,您將獲得一個指向 zip 文件的鏈接,該文件包含整個離線 session 的 output:

ClearML Task: Offline session stored in /home/user/.clearml/cache/offline/offline-2d061bb57d9e408a9420c4fe81e26ad0.zip

稍后您可以使用以下命令導入 session:

from clearml import Task
Task.import_offline_session('/home/user/.clearml/cache/offline/offline-2d061bb57d9e408a9420c4fe81e26ad0.zip')

暫無
暫無

聲明:本站的技術帖子網頁,遵循CC BY-SA 4.0協議,如果您需要轉載,請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.

 
粵ICP備18138465號  © 2020-2024 STACKOOM.COM