[英]unable to import large database to docker mysql container
我正在嘗試將大型數據庫導入 mysql 容器。 我已將主機目錄安裝為 mysql 容器的卷。 所以數據在主機上是持久的。 導入的 sql 文件為14 GB
+。 mysql 容器在導入中途變得無響應。 當我運行docker stats
我可以看到一旦 mysql 容器吃掉所有可用內存, CPU %
使用率就會變為< 1
。 我嘗試將 docker 的內存增加到10 GB
,當我為 Docker 分配更多內存時,它會從導入中創建更多表。 但是我不能從主機分配超過10GB
。
以下是我docker-compose.yml
文件
mysql:
image: mysql:5.6
environment:
- MYSQL_ROOT_PASSWORD=12345678
volumes:
- ./mysql/lib:/var/lib/mysql
- ./mysql/conf.d:/etc/mysql/conf.d
- ./mysql/log:/var/log/mysql
- /tmp:/tmp
ports:
- "3306:3306"
我正在使用Docker for mac
,它的 docker 版本為1.12.1
我正在使用docker exec -it docker_mysql_1 /bin/bash
登錄到容器並從/tmp
導入 sql 文件
我還嘗試了 mysql repo 推薦的方式,將 sql 文件掛載到/docker-entrypoint-initdb.d
。 但這也停止了mysql init。
更新 1
$ docker info
Containers: 1
Running: 0
Paused: 0
Stopped: 1
Images: 2
Server Version: 1.12.1
Storage Driver: aufs
Root Dir: /var/lib/docker/aufs
Backing Filesystem: extfs
Dirs: 18
Dirperm1 Supported: true
Logging Driver: json-file
Cgroup Driver: cgroupfs
Plugins:
Volume: local
Network: host bridge null overlay
Swarm: inactive
Runtimes: runc
Default Runtime: runc
Security Options: seccomp
Kernel Version: 4.4.20-moby
Operating System: Alpine Linux v3.4
OSType: linux
Architecture: x86_64
CPUs: 4
Total Memory: 9.744 GiB
Name: moby
ID: 43S4:LA5E:6MTG:IFOG:HHJC:HYLX:LYIT:YU43:QGBQ:K5I5:Z6LP:AENZ
Docker Root Dir: /var/lib/docker
Debug Mode (client): false
Debug Mode (server): true
File Descriptors: 16
Goroutines: 27
System Time: 2016-10-12T07:52:58.516469676Z
EventsListeners: 1
No Proxy: *.local, 169.254/16
Registry: https://index.docker.io/v1/
Insecure Registries:
127.0.0.0/8
$ df -h
Filesystem Size Used Avail Capacity iused ifree %iused Mounted on
/dev/disk1 233Gi 141Gi 92Gi 61% 2181510 4292785769 0% /
devfs 193Ki 193Ki 0Bi 100% 668 0 100% /dev
map -hosts 0Bi 0Bi 0Bi 100% 0 0 100% /net
map auto_home 0Bi 0Bi 0Bi 100% 0 0 100% /home
/dev/disk2s2 466Gi 64Gi 401Gi 14% 1857 4294965422 0% /Volumes/mac
/dev/disk2s3 465Gi 29Gi 436Gi 7% 236633 3575589 6% /Volumes/PORTABLE
/dev/disk3s1 100Mi 86Mi 14Mi 86% 12 4294967267 0% /Volumes/Vagrant
我正在使用 /dev/disk1 目錄來掛載卷。
嘗試將大 sql 文件加載到我的數據庫時,我遇到了類似的問題。 我只需要增加容器中的最大數據包大小,導入按預期工作。 例如,您想將 SQL 文件的最大大小增加到 512 MB,並且您的容器名為my_mysql ,您可以使用以下命令調整正在運行的容器中的包大小:
docker exec -it my_mysql bash -c "echo 'max_allowed_packet = 512M' >> /etc/mysql/mysql.conf.d/mysqld.cnf"
這會將行附加到配置文件中。 在此之后,您需要重新啟動容器:
docker restart my_mysql
我通過更改 docker-compose.yml 中的環境變量解決了 phpmyadmin->import of large Database 錯誤
上傳限制=1G
myadmin:
image: phpmyadmin/phpmyadmin
container_name: phpmyadmin
ports:
- "8083:80"
environment:
- UPLOAD_LIMIT=1G
- PMA_ARBITRARY=1
- PMA_HOST=${MYSQL_HOST}
restart: always
depends_on:
- mysqldb
甚至我也遇到過類似的問題。 按照以下過程,這可能對您有所幫助:首先將您的 sql 文件(filename.sql)復制到 db 容器中。
docker cp filename.sql docker_db_container:/filename.sql
稍后登錄到您的 db 容器,並使用此(filename.sql)文件填充 db。 為了將您的文件(filename.sql)插入數據庫,轉到 mysql 到 db 容器中,使用要存儲數據庫的 db,即。 use database_name;
source /filename.sql
但是,如果您遇到大數據包大小的問題,請增加容器數據包大小
docker exec -it docker_db_container bash -c "echo 'max_allowed_packet = 1024M' >> /etc/mysql/mysql.conf.d/mysqld.cnf"
聲明:本站的技術帖子網頁,遵循CC BY-SA 4.0協議,如果您需要轉載,請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.