it-swarm.dev

如何使用泊坞窗,撰写为蒙戈数据库播种?

我正在尝试分发一组在几个链接容器中运行的连接应用程序,其中包含一个mongo数据库,该数据库需要:

  • 分发包含一些种子数据;
  • 允许用户添加其他数据。

理想情况下,数据也将保存在链接的数据卷容器中。

我可以使用mongo基本实例将数据放入mongo容器中,该实例不安装任何卷(dockerhub image:psychemedia/mongo_nomount - 这实际上是没有VOLUME /data/db语句的基本mongo Dockerfile)和Dockerfile配置沿着以下行:

ADD . /files
WORKDIR /files
RUN mkdir -p /data/db && mongod --fork --logpath=/tmp/mongodb.log && sleep 20 && \
mongoimport  --db testdb --collection testcoll  --type csv --headerline --file ./testdata.csv  #&& mongod --shutdown

其中./testdata.csv与Dockerfile位于同一目录(./mongo-with-data)中。

我的docker-compose配置文件包括以下内容:

mongo:
  #image: mongo
  build: ./mongo-with-data
  ports:
    - "27017:27017"
  #Ideally we should be able to mount this against a Host directory
  #volumes:
  #  - ./db/mongo/:/data/db
  #volumes_from:
  #  - devmongodata

#devmongodata:
#    command: echo created
#    image: busybox
#    volumes: 
#       - /data/db

每当我尝试安装VOLUME时,似乎删除了存储在/data/db中的原始种子数据。我想当一个卷安装到/data/db时,它会替换当前的任何内容。

也就是说, docker用户指南 建议: 创建容器时初始化卷。如果容器的基本映像包含指定安装点的数据,则在卷初始化时将现有数据复制到新卷中 ?因此,如果我在播种RUN命令之后放置了VOLUME命令,我预计数据会持续存在吗?

那么我做错了什么?

长远来看,我希望自动构建多个链接容器,然后分发一个Vagrantfile/docker-compose YAML文件,该文件将启动一组链接的应用程序,其中包括预先播种的mongo数据库(部分预先 - 填充的)持久数据容器。

51
psychemedia

我使用另一个docker容器执行此操作,其唯一目的是为mongo提供种子,然后退出。我怀疑这与 ebaxt s的想法相同,但当我在寻找答案时,我只是想看到一个快速而又肮脏但又直截了当的例子。所以这是我的:

docker-compose.yml

mongodb:
  image: mongo
  ports:
    - "27017:27017"

mongo-seed:
  build: ./mongo-seed
  links:
    - mongodb

# my webserver which uses mongo (not shown in example)
webserver:
  build: ./webserver
  ports:
    - "80:80"
  links:
    - mongodb

mongo-seed/Dockerfile

FROM mongo

COPY init.json /init.json
CMD mongoimport --Host mongodb --db reach-engine --collection MyDummyCollection --type json --file /init.json --jsonArray

mongo-seed/init.json

[
  {
    "name": "Joe Smith",
    "email": "[email protected]",
    "age": 40,
    "admin": false
  },
  {
    "name": "Jen Ford",
    "email": "[email protected]",
    "age": 45,
    "admin": true
  }
]
76
Jeff Fairley

我发现使用Docker自定义映像和使用卷是有用的,而不是为播种创建另一个容器。

文件结构

.
├── docker-compose.yml
├── mongo
│   ├── data
│   ├── Dockerfile
│   └── init-db.d
│       └── seed.js

Dockerfile/docker-compose.yml中提到的每个文件位置都与docker-compose.yml的位置有关。

_ dockerfile _

FROM mongo:3.6

COPY ./init-db.d/seed.js /docker-entrypoint-initdb.d

docker-compose.yml

version: '3'

services:
  db:
    build: ./mongo
    restart: always
    volumes:
      - ./mongo/data:/data/db #Helps to store MongoDB data in `./mongo/data`
    environment:
      MONGO_INITDB_ROOT_USERNAME: {{USERNAME}}
      MONGO_INITDB_ROOT_PASSWORD: {{PWD}}
      MONGO_INITDB_DATABASE: {{DBNAME}}

seed.js

// Since Seeding in Mongo is done in alphabetical order... It's is important to keep
// file names alphabetically ordered, if multiple files are to be run.

db.test.drop();
db.test.insertMany([
  {
    _id: 1,
    name: 'Tensor',
    age: 6
  },
  {
    _id: 2,
    name: 'Flow',
    age: 10
  }
])

docker-entrypoint-initdb.d可以用于创建不同的用户和mongodb管理相关的东西,只需创建一个按字母排序的命名 js脚本到createUser etc ...

有关如何自定义MongoDB Docker服务的更多详细信息,请阅读 this

此外,最好保护您的密码和用户名免受公开, 不要在公共git上推送凭据 ,而是使用 Docker Secrets 。另请阅读本文 秘密教程

请注意,没有必要进入docker-swarm模式来使用秘密。 Compose Files也支持秘密。检查

秘密也可用于 MongoDB Docker Services

4
Subroto

以下是我们如何使用一次性容器清洁和播种图像的文章 https://blog.ardoq.com/dynamic-database-seeding-with-docker

3
ebaxt

目前的答案基于@Jeff Fairley 答案 并根据新的Docker文档进行了更新

docker-compose.yml

version: "3.5"

services:
  mongo:
    container_name: mongo_dev
    image: mongo:latest
    ports:
      - 27017:27017
    networks:
      - dev

  mongo_seed:
    container_name: mongo_seed
    build: .
    networks:
      - dev
    depends_on:
      - mongo

networks:
  dev:
    name: dev
    driver: bridge

Dockerfilename__

FROM mongo:latest
COPY elements.json /elements.json
CMD mongoimport --Host mongo --db mendeleev --collection elements --drop --file /elements.json --jsonArray

可能需要重建当前图像

1
while1pass

你可以使用 Mongo Seeding Docker图像

为什么?

  • 你准备好了Docker镜像
  • 您不依赖于JSON文件 - 也支持JavaScript和TypeScript文件(包括使用TypeScript的可选模型验证)

Docker Compose的示例用法:

version: '3'
services:
  database:
    image: 'mongo:3.4.10'
    ports:
    - '27017:27017'
  api:
    build: ./api/
    command: npm run dev
    volumes: 
    - ./api/src/:/app/src/
    ports:
    - '3000:3000'
    - '9229:9229'
    links:
    - database
    depends_on:
    - database
    - data_import
    environment: 
    - &dbName DB_NAME=dbname
    - &dbPort DB_PORT=27017 
    - &dbHost DB_Host=database
  data_import:
    image: 'pkosiec/mongo-seeding:3.0.0'
    environment:
    - DROP_DATABASE=true
    - REPLACE_ID=true
    - *dbName
    - *dbPort
    - *dbHost
    volumes:
    - ./data-import/dev/:/data-import/dev/
    working_dir: /data-import/dev/data/
    links:
    - database
    depends_on:
    - database

免责声明:我是这个图书馆的作者。

1
pkosiec

您可以使用此 image 为许多作业提供docker容器(导入,导出,转储)

查看 example using docker-compose

0
bwnyasse

回答我自己的问题:

  • 简单的YAML文件,用于创建链接到数据卷容器的简单mongo容器,由Vagrant docker compose启动。
  • 在Vagrantfile中,代码如下:

config.vm.provision :Shell, :inline => <<-SH docker exec -it -d vagrant_mongo_1 mongoimport --db a5 --collection roads --type csv --headerline --file /files/AADF-data-minor-roads.csv SH

导入数据。

包装盒子。

分发盒子。

对于用户来说,一个简单的Vagrantfile可以加载该框并运行一个简单的docker-compose YAML脚本来启动容器并将mongo db安装到数据卷容器中。

0
psychemedia

非常值得看看这个答案: https://stackoverflow.com/a/42917632/5209935

基本的想法是stock mongo图像有一个特殊的入口点,你可以重载它以提供一个种子数据库的脚本。

0
Matthew