Catégorie : Docker

[Docker] Stopper et supprimer tous les containers et images Docker

15/07/2020 / admin

Sources: Stop and remove all docker containers and images et I have a helper function to nuke everything so that our Continuous blah, cycle can be tested, erm… continuously.

To clear containers:

docker rm -f $(docker ps -a -q)

To clear images:

docker rmi -f $(docker images -a -q)

To clear volumes:

docker volume rm $(docker volume ls -q)

To clear networks:

docker network rm $(docker network ls | tail -n+2 | awk '{if($2 !~ /bridge|none|host/){ print $1 }}')

List all containers (only IDs)

docker ps -aq

1	docker ps -aq

Stop all running containers

docker stop $(docker ps -aq)

1	docker stop $(docker ps -aq)

Remove all containers

docker rm $(docker ps -aq)

1	docker rm $(docker ps -aq)

Remove all images

docker rmi $(docker images -q)

1	docker rmi $(docker images -q)

[Docker][NodeJS] Utiliser Docker pour créer un environnement de développement NodeJS

15/07/2020 / admin

Source: Use Docker to Create a Node Development Environment et version PDF pour la postérité. Tutoriel (en anglais) extrêmement détaillé et très bien expliqué.

Repo Git: Use Docker to Create a Front-End Node JS Development Environment.

Ce tutoriel m’a permis:

d’exécuter NPM depuis un container Docker sans avoir à procéder à une installation locale de NodeJS (écarte les problèmes liés à l’obligation de jongler avec différentes version de Node/NPM en fonction de l’âge du projet).
de lancer un serveur Node JS via Express.
d’accéder à localhost dans un navigateur.

Pour aller encore plus loin (pas lu l’article en entier, mais il est ressorti dans mes résultats de recherche lorsque j’ai trouvé le tuto dont je parle juste au-dessus et me paraît intéressant à conserver pour améliorer ma pratique de Docker): A Better Way to Develop Node.js with Docker (I’ve seen a lot of articles lately suggesting how to use Docker for development. I haven’t seen one yet that does it correctly). Version PDF pour la postérité.

[Docker] Importer une base de données en copiant le fichier SQL dans le container DB avec docker cp

12/05/2020 / admin

Nous allons utiliser la commande docker cp pour copier un fichier disponible sur notre host dans un dossier tmp du container guest:

$ docker cp <CHEMIN_VERS_LE_DUMP_DEPUIS_L'EMPLACEMENT_OU_ON_EXECUTE_CETTE_COMMANDE>.sql <NOM_DU_CONTAINER_DANS_LEQUEL_ON_VEUT_COPIER_LE_FICHIER>:/tmp

1	$ docker cp <CHEMIN_VERS_LE_DUMP_DEPUIS_L'EMPLACEMENT_OU_ON_EXECUTE_CETTE_COMMANDE>.sql <NOM_DU_CONTAINER_DANS_LEQUEL_ON_VEUT_COPIER_LE_FICHIER>:/tmp

Puis se connecter au container db et taper la commande:

$ mysql –u <DB_USERNAME> –p<DB_PASSWORD> < /tmp/<DUMP>.sql <NOM_DE_LA_BASE_DANS_LAQUELLE_ON_VEUT_IMPORTER_LE_DUMP>

1	$ mysql –u <DB_USERNAME> –p<DB_PASSWORD> < /tmp/<DUMP>.sql <NOM_DE_LA_BASE_DANS_LAQUELLE_ON_VEUT_IMPORTER_LE_DUMP>

ATTENTION: vous allez probablement obtenir un message mysql: [Warning] Using a password on the command line can be insecure.. Votre dump sera tout-de-même importé.

pour la petite histoire, les volumes ça s’exprime sous la forme host:guest. guest est toujours un chemin absolu. host peut être :

un path absolu (/bidule/…) ou relatif (./bidule, ../bidule) => un dossier ou un fichier du host est monté sur le path du guest
un nom (mysql-data, pas de référence absolue ou relative) => il s’agit d’un volume nommé, on n’interagit pas avec, c’est géré de manière transparente pour toi par docker. Tu peux le voir via docker volumes ls, c’est stocké normalement dans /var/lib/docker/filesystems/… ou un truc du genre

[Docker] Compiler les sources de Foundation (Zurb Template) dans un conteneur

14/11/2018 / admin

Note: déprécié au profit de [Docker][NodeJS] Utiliser Docker pour créer un environnement de développement NodeJS.

Accès rapide aux commandes Docker utiles

Docker for Gulp Build Tasks et version PDF pour la postérité. Cet article m’a permis de mettre en place un Docker pour compiler mes sources Front-End via NPM (workflow utilisant Bower et Gulp). Et ça marche!!!

ATTENTION: ce Docker fonctionne bien (les sources en local sont compilées via le conteneur), à l’exception de Browsersync qui ne recharge pas l’aperçu dans le navigateur.

TODOs

Les fichiers compilés (dossier dist/) sont bien modifiés en local, mais on ne voit pas les modifications en front dans le navigateur. Hypothèse: on voit les fichiers présents dans le conteneur (qui eux ne sont pas modifiés) et pas les fichiers locaux.

le truc c’est t’utilise pas du tout de volumes
donc en gros t’es sources sont accessible dans l’image docker, que parce que y’a un copy dans ton Dockerfile
ca arrive qu’une fois lors du build de l’image
donc si tu modifie ton code après coup, ton image docker le verra pas, car le code updaté ne lui est pas fourni

Pourquoi Docker?

Par souci de portabilité de l’environnement de travail.

Problème de versions de nodeJS et de ses dépendances d’un poste de travail à l’autre…

Prérequis

Avoir Docker d’installé, avoir Git d’installé.

Conventions pour ce tutoriel

Nous partirons du principe que nos fichiers de travail se trouvent dans un dossier docker/fzt-master. Vous pouvez créer le dossier docker/ via la commande mkdir docker, mais ne créez pas le dossier fzt-master/ pour le moment.

Attention: si vous utilisez un IDE, il est important que les fins de lignes dans vos fichiers soient au format « Unix ». Dans Sublime Text 3 par exemple, menu View > Line endings > Unix.

Mon environnement de travail est un Ubuntu server dans une VM que je lance depuis un Windows 10 via Virtual Box.

Rapatriement des sources de Foundation

A la racine d’un dossier nommé docker/, exécuter la commande suivante pour récupérer les sources de Foundation Zurb Template (branche master) en local via Git dans un dossier fzt-master/: git clone https://github.com/zurb/foundation-zurb-template.git ftz-master

Se placer à la racine du dossier fzt-master (commande cd fzt-master), créer un fichier Dockerfile (commande touch Dockerfile) et l’éditer pour y placer les lignes de code suivantes (commande vim Dockerfile ou vi Dockerfile si vim n’est pas installé sur votre machine) :

Dans vim, on passe en mode « insertion » en tapant la touche Inser du clavier, ce qui nous permet d’éditer le fichier. La combinaison de touches :wq! nous permet ensuite de sauvegarder les modifications apportées au fichier et de quitter.

Dockerfile:

FROM ubuntu:16.04

WORKDIR /home/app/
COPY . /home/app/

ADD setup_8.x /tmp/setup_8.x
RUN bash /tmp/setup_8.x

RUN apt-get update
RUN apt-get install -y build-essential nodejs

RUN /usr/bin/npm install -g yarn gulp babel-core babel-preset-env babel-register babel-loader gulp-babel browser-sync

#RUN rm -rf node_modules/
RUN npm install
RUN yarn

CMD ["yarn", "start"]

FROM ubuntu:16.04

WORKDIR /home/app/

COPY . /home/app/

ADD setup_8.x /tmp/setup_8.x

RUN bash /tmp/setup_8.x

RUN apt-get update

RUN apt-get install -y build-essential nodejs

RUN /usr/bin/npm install -g yarn gulp babel-core babel-preset-env babel-register babel-loader gulp-babel browser-sync

#RUN rm -rf node_modules/

RUN npm install

RUN yarn

CMD ["yarn", "start"]

docker-compose.yml

De manière à pouvoir exploiter browser-sync et le live reload, il faut également créer un fichier docker-compose.yml qui va s’occuper de rediriger les ports du conteneur vers notre machine locale afin que nous ayons accès au résultat de nos fichiers compilés dans notre navigateur préféré (explication ici) :

version: '2'

services:
  fzt-master:
    image: fzt-master
    build:
      context: ./
      dockerfile: Dockerfile
    ports:
      - 4000:8000

version: '2'

services:

fzt-master:

image: fzt-master

build:

context: ./

dockerfile: Dockerfile

ports:

- 4000:8000

Vos sources devraient être accessibles dans votre navigateur depuis l’URL: http://localhost:4000 ou ip.de.votre.vm:4000

Pour récupérer l’IP de votre VM, taper la commande ifconfig. Choisir celle qui commence par 192.168..

gulpfile.babel.js

Il faudra également éditer le fichier gulpfile.babel.js en local pour ajouter le paramètre open: false à la fonction server:

// Start a server with BrowserSync to preview the site in
function server(done) {
  browser.init({
    server: PATHS.dist, port: PORT, open: false
  }, done);
}

// Start a server with BrowserSync to preview the site in

function server(done) {

browser.init({

server: PATHS.dist, port: PORT, open: false

}, done);

}

Initialiser le conteneur Docker

~~Builder le conteneur: docker build -t fzt-master .~~ edit: la tâche de build sera effectuée par le docker-compose, juste en-dessous.

A la racine du dossier où se trouvent les fichiers Dockerfile et docker-compose.yml, exécuter la commande: docker-compose up -d

Puis (la première fois et à chaque modification du fichier package.json) installer, via le conteneur, les dépendances NPM en local: docker run --rm -v ~/docker/fzt-master:/home/app/ fzt-master npm install edit: la commande npm install a été ajoutée d’office dans le Dockerfile.

Image for service fzt-master was built because it did not already exist. To rebuild this image you must use docker-compose build or docker-compose up --build.

Exploiter le conteneur Docker

Lancer le conteneur afin qu’il exécute la commande par défaut (yarn start) : docker run --rm --pid=host -v ~/docker/fzt-master:/home/app/ fzt-master

L’argument --pid=host sert à stopper la tâche de compilation des sources dans votre conteneur en utilisant le traditionnel raccourci ctrl + c.

ATTENTION: ce billet est expérimental. Il ne garantit en rien que vous puissiez réellement être en mesure de compiler les sources de Foundation dans un conteneur en suivant les directives ci-dessous. Je suis en-train de mettre en place le Dockerfile qui permettra de le faire. Ce billet constitue des notes de travail. En fonction de mon avancement, vous arriverez peut-être à quelque chose. Je retirerai ce message lorsque le Dockerfile sera fonctionnel comme je l’entends.

Pour aller plus loin:

uwegerdes/frontend-development

Browsersync within a Docker container

How to run livereload with gulp within a docker container?

FROM ubuntu:16.04

WORKDIR /home/app/
COPY . /home/app/

#ADD setup_0.12 /tmp/setup_0.12
#RUN bash /tmp/setup_0.12
ADD setup_4.x /tmp/setup_4.x
RUN bash /tmp/setup_4.x
#ADD setup_11.x /tmp/setup_11.x
#RUN bash /tmp/setup_11.x

RUN apt-get update && apt-get install -y build-essential nodejs git
RUN /usr/bin/npm install -g npm@4 bower babel-core babel-loader babel-preset-es2015 babel-register browser-sync gulp gulp-babel gulp-cli

RUN /usr/bin/npm install
RUN /usr/bin/bower install

CMD ["npm", "start"]

FROM ubuntu:16.04

WORKDIR /home/app/

COPY . /home/app/

#ADD setup_0.12 /tmp/setup_0.12

#RUN bash /tmp/setup_0.12

ADD setup_4.x /tmp/setup_4.x

RUN bash /tmp/setup_4.x

#ADD setup_11.x /tmp/setup_11.x

#RUN bash /tmp/setup_11.x

RUN apt-get update && apt-get install -y build-essential nodejs git

RUN /usr/bin/npm install -g npm@4 bower babel-core babel-loader babel-preset-es2015 babel-register browser-sync gulp gulp-babel gulp-cli

RUN /usr/bin/npm install

RUN /usr/bin/bower install

CMD ["npm", "start"]

Le Dockerfile décortiqué

Pour paramétrer correctement le Dockerfile, il convient d’aller chercher quelques informations dans les fichiers readme.md et package.json du repo Git de Foundation que nous venons de cloner. Attention à bien chercher ces informations dans la branche que nous venons de cloner (v6.4). Le framework évolue sans arrêt et les informations, les paquets NPM (et leurs versions) et les commandes dont nous avons besoin pour, respectivement, constituer le Dockerfile et compiler notre code source sans erreurs sont différents d’une branche à l’autre du projet.

Embarquer la bonne version de nodeJS

Premièrement, vérifier la version de nodeJS à installer pour faire fonctionner correctement les dépendances utilisées lors de la compilation des sources. La section Installation du fichier readme.md nous renseigne sur ce point:

NodeJS (0.12 or greater)

Nous pourrons trouver ce fichier qui constitue le script d’installation de la version 0.12 de nodeJS sur le repository Git officiel du projet node. Il est à récupérer et à copier/coller dans le dossier fzt64, à la racine (au même niveau que le Dockerfile).

Pour d’autres versions du framework Foundation ou d’autres projets dont la compilation des sources reposent sur NPM, la liste des scripts d’installation de l’ensemble des distributions de nodeJS se trouve ici.

ADD setup_0.12 /tmp/setup_0.12
RUN bash /tmp/setup_0.12

1 2	ADD setup_0.12 /tmp/setup_0.12 RUN bash /tmp/setup_0.12

Edit: pour des raisons que j’ignore (quoique, peut-être un problème relatif à la version 16.04 d’ubuntu server que je déclare et qui serait trop récente… je n’ai pas testé avec une petite 14.04 mais je devrais…), le build du container semble ne pas fonctionner avec la version 0.12 de nodeJS préconisée dans la branche v6.4 de Foundation. Peut-être une erreur de mise à jour dans leur readme…

Step 9/13 : RUN /usr/bin/npm install -g babel-core
—> Running in 510dcfa93753
/bin/sh: 1: /usr/bin/npm: not found
The command ‘/bin/sh -c /usr/bin/npm install -g babel-core’ returned a non-zero code: 127

Je la remplace donc par la version 4.x qui lui succède chronologiquement.

ADD setup_4.x /tmp/setup_4.x
RUN bash /tmp/setup_4.x

1 2	ADD setup_4.x /tmp/setup_4.x RUN bash /tmp/setup_4.x

Je pourrais tenter de la remplacer par la version en cours (11.x au moment où j’écris ces lignes…), mais je m’expose à des incompatibilités avec les versions de certains paquets NPM utilisés dans la branche v6.4 de la stack Zurb (trop grand gap de versions entre nodeJS et les paquets). C’est notamment ce problème que nous essayons d’éviter en mettant à profit Docker.

Troubleshooting et installation des applications et devDependencies manquantes

On ne peut pas toujours deviner quelles applications et devDependencies doivent être obligatoirement installées dans le conteneur. Il y a bien un fichier package.json dans le projet, mais toutes les devDependencies ne doivent pas obligatoirement être installées via le Dockerfile. Il faut y aller à tâtons et fixer une à une les erreurs retournées par le terminal lors du build du conteneur.

https://github.com/zurb/foundation-zurb-template/blob/v6.4/package.json#L16

$ docker run –rm -v ~/docker/fzt64:/home/app/ fzt64

> foundation-zurb-template@1.0.0 start /home/app
> gulp

[14:26:11] Failed to load external module @babel/register
[14:26:11] Failed to load external module babel-register
[14:26:11] Failed to load external module babel-core/register
[14:26:11] Failed to load external module babel/register
[14:26:11] Local gulp not found in /home/app
[14:26:11] Try running: npm install gulp

RUN /usr/bin/npm install -g bower babel-core babel-register gulp

1	RUN /usr/bin/npm install -g bower babel-core babel-register gulp

Step 9/11 : RUN /usr/bin/npm install
—> Running in 95a31683f7c9
npm ERR! git clone –template=/root/.npm/_git-remotes/_templates –mirror git@github.com:gulpjs/gulp.git /root/.npm/_git-remotes/git-github-com-gulpjs-gulp-git-ed33b0aa: undefined
npm ERR! git clone –template=/root/.npm/_git-remotes/_templates –mirror git@github.com:gulpjs/gulp.git /root/.npm/_git-remotes/git-github-com-gulpjs-gulp-git-ed33b0aa: undefined
npm WARN deprecated gulp-uncss@1.0.6: Use UnCSS through gulp-postcss instead.
npm WARN deprecated babel-preset-es2015@6.24.1: ???? Thanks for using Babel: we recommend using babel-preset-env now: please read babeljs.io/env to update!
npm ERR! Linux 4.4.0-57-generic
npm ERR! argv « /usr/bin/node » « /usr/bin/npm » « install »
npm ERR! node v4.9.1
npm ERR! npm v2.15.11
npm ERR! code ENOGIT

npm ERR! not found: git
npm ERR!
npm ERR! Failed using git.
npm ERR! This is most likely not a problem with npm itself.
npm ERR! Please check if you have git installed and in your PATH.

npm ERR! Please include the following file with any support request:
npm ERR! /home/app/npm-debug.log
The command ‘/bin/sh -c /usr/bin/npm install’ returned a non-zero code: 1

npm ERR! not found: git. Il faut ajouter Git à la liste des paquets à installer.

RUN apt-get update && apt-get install -y build-essential nodejs git

1	RUN apt-get update && apt-get install -y build-essential nodejs git

Step 8/10 : RUN /usr/bin/npm install
—> Running in f25efff29bd2
npm WARN deprecated gulp-uncss@1.0.6: Use UnCSS through gulp-postcss instead.
npm WARN deprecated babel-preset-es2015@6.24.1: ???? Thanks for using Babel: we recommend using babel-preset-env now: please read babeljs.io/env to update!
npm ERR! git rev-list -n1 4.0: fatal: ambiguous argument ‘4.0’: unknown revision or path not in the working tree.
npm ERR! git rev-list -n1 4.0: Use ‘–‘ to separate paths from revisions, like this:
npm ERR! git rev-list -n1 4.0: ‘git […] — […]’
npm ERR! git rev-list -n1 4.0:
npm ERR! git rev-list -n1 4.0: fatal: ambiguous argument ‘4.0’: unknown revision or path not in the working tree.
npm ERR! git rev-list -n1 4.0: Use ‘–‘ to separate paths from revisions, like this:
npm ERR! git rev-list -n1 4.0: ‘git […] — […]’
npm ERR! git rev-list -n1 4.0:
npm ERR! git clone –template=/root/.npm/_git-remotes/_templates –mirror git@github.com:gulpjs/gulp.git /root/.npm/_git-remotes/git-github-com-gulpjs-gulp-git-ed33b0aa: Cloning into bare repository ‘/root/.npm/_git-remotes/git-github-com-gulpjs-gulp-git-ed33b0aa’…
npm ERR! git clone –template=/root/.npm/_git-remotes/_templates –mirror git@github.com:gulpjs/gulp.git /root/.npm/_git-remotes/git-github-com-gulpjs-gulp-git-ed33b0aa: Host key verification failed.
npm ERR! git clone –template=/root/.npm/_git-remotes/_templates –mirror git@github.com:gulpjs/gulp.git /root/.npm/_git-remotes/git-github-com-gulpjs-gulp-git-ed33b0aa: fatal: Could not read from remote repository.
npm ERR! git clone –template=/root/.npm/_git-remotes/_templates –mirror git@github.com:gulpjs/gulp.git /root/.npm/_git-remotes/git-github-com-gulpjs-gulp-git-ed33b0aa:
npm ERR! git clone –template=/root/.npm/_git-remotes/_templates –mirror git@github.com:gulpjs/gulp.git /root/.npm/_git-remotes/git-github-com-gulpjs-gulp-git-ed33b0aa: Please make sure you have the correct access rights
npm ERR! git clone –template=/root/.npm/_git-remotes/_templates –mirror git@github.com:gulpjs/gulp.git /root/.npm/_git-remotes/git-github-com-gulpjs-gulp-git-ed33b0aa: and the repository exists.
npm ERR! Linux 4.4.0-57-generic
npm ERR! argv « /usr/bin/node » « /usr/bin/npm » « install »
npm ERR! node v4.9.1
npm ERR! npm v2.15.11
npm ERR! code 128

npm ERR! Command failed: git clone –template=/root/.npm/_git-remotes/_templates –mirror git@github.com:gulpjs/gulp.git /root/.npm/_git-remotes/git-github-com-gulpjs-gulp-git-ed33b0aa
npm ERR! Cloning into bare repository ‘/root/.npm/_git-remotes/git-github-com-gulpjs-gulp-git-ed33b0aa’…
npm ERR! Host key verification failed.
npm ERR! fatal: Could not read from remote repository.
npm ERR!
npm ERR! Please make sure you have the correct access rights
npm ERR! and the repository exists.
npm ERR!
npm ERR!
npm ERR! If you need help, you may report this error at:
npm ERR!

npm ERR! Please include the following file with any support request:
npm ERR! /home/app/npm-debug.log
The command ‘/bin/sh -c /usr/bin/npm install’ returned a non-zero code: 1

Il faut ajouter gulp-cli à la liste des dépendances NPM à installer. Voir ici et là.

RUN /usr/bin/npm install -g bower babel-core babel-loader babel-preset-es2015 babel-register browser-sync gulp gulp-babel gulp-cli

1	RUN /usr/bin/npm install -g bower babel-core babel-loader babel-preset-es2015 babel-register browser-sync gulp gulp-babel gulp-cli

Builder le container

Pour builder le container (que je vais appeler « fzt64 »), j’exécute la commande: docker build -t fzt64 .

Installer les paquets node en local, via le container

Then open the folder in your command line, and install the needed dependencies:

cd projectname
npm install
bower install

Commande à exécuter obligatoirement avant toute autre pour récupérer les dépendances NPM du projet (dossier node_modules) en local.

Pour exécuter la commande npm install à l’intérieur de mon container (et ainsi récupérer les dépendances node propres au projet Foundation en local sur ma machine, à la racine du dossier home/intlangf/docker/fzt64/ où se trouve le fichier package.json), j’exécute la commande docker run --rm -v ~/docker/fzt64:/home/app/ fzt64 npm install

Pareil pour Bower: docker run --rm -v ~/docker/fzt64:/home/app/ fzt64 bower install

Commande par défaut

La section Manual setup du fichier readme.md nous renseigne sur les différentes commandes fournies par la stack Zurb:

Finally, run npm start to run Gulp. Your finished site will be created in a folder called dist, viewable at this URL:
http://localhost:8000
To create compressed, production-ready assets, run npm run build.

La commande npm start est la commande par défaut dans notre Dockerfile.

CMD ["npm", "start"]

1	CMD ["npm", "start"]

Ceci signifie que lorsqu’on exécute la commande docker run --rm -v ~/docker/fzt64:/home/app/ fzt64 dans notre terminal, c’est en réalité la commande npm start qui sera exécutée dans notre container. Elle génèrera un dossier dist/ en local (à la racine du dossier docker/fzt64/) qui contiendra le résultat de la compilation des différentes sources de Foundation.

Exécuter une commande autre que celle par défaut

On voit que d’autres commandes sont disponibles au sein de la stack Zurb.

docker run --rm -v ~/docker/fzt64:/home/app/ fzt64 npm run build

Commandes utiles

Supprimer des images Docker

Lister les images disponibles: docker images -a.

Supprimer des images en utilisant leurs IDs ou leurs tags: docker rmi <Image> <Image>.

[Docker] Utiliser node, npm, grunt, gulp, webpack, bower, yarn, etc.

05/05/2018 / admin

Mes sources pour ce billet:

Avec Foundation Zurb Template

Création de la Dockerfile

Dans home/intlangf/docker/ je fais un git clone https://github.com/zurb/foundation-zurb-template.git fzt (pour récupérer les sources du framework CSS Foundation).

Ensuite, cd fzt pour entrer dans le dossier créé par Git. Puis touch Dockerfile et vim Dockerfile pour créer et éditer un fichier Dockerfile dans lequel je place le code ci-dessous:

FROM ubuntu:16.04

WORKDIR /home/app/
COPY . /home/app/

ADD setup_8.x /tmp/setup_8.x
RUN bash /tmp/setup_8.x

RUN apt-get update
RUN apt-get install -y build-essential
RUN apt-get install -y nodejs
RUN /usr/bin/npm install -g yarn
RUN /usr/bin/npm install -g gulp
RUN /usr/bin/npm install -g babel-core
RUN /usr/bin/npm install -g babel-preset-env
RUN /usr/bin/npm install -g babel-register
RUN /usr/bin/npm install -g babel-loader
RUN /usr/bin/npm install -g gulp-babel

RUN yarn

#VOLUME ["/home/app/"]
CMD ["yarn", "start"]

FROM ubuntu:16.04

WORKDIR /home/app/

COPY . /home/app/

ADD setup_8.x /tmp/setup_8.x

RUN bash /tmp/setup_8.x

RUN apt-get update

RUN apt-get install -y build-essential

RUN apt-get install -y nodejs

RUN /usr/bin/npm install -g yarn

RUN /usr/bin/npm install -g gulp

RUN /usr/bin/npm install -g babel-core

RUN /usr/bin/npm install -g babel-preset-env

RUN /usr/bin/npm install -g babel-register

RUN /usr/bin/npm install -g babel-loader

RUN /usr/bin/npm install -g gulp-babel

RUN yarn

#VOLUME ["/home/app/"]

CMD ["yarn", "start"]

Builder le container

Pour builder le container (que je vais appeler « fzt »), j’exécute la commande: docker build -t fzt .

Exécuter une commande à l’intérieur du container: récupérer les paquets NPM

Commande à exécuter obligatoirement avant toute autre pour récupérer les dépendances NPM du projet (dossier node_modules) en local.

Pour exécuter npm install à l’intérieur de mon container (et ainsi récupérer les dépendances node propres au projet Foundation en local sur ma machine, à la racine du dossier home/intlangf/docker/fzt/ où se trouve le fichier package.json), j’exécute la commande docker run --rm -v ~/docker/knacss:/home/app/ fzt npm install.

Exécuter une commande à l’intérieur du container: yarn start

Les sources dans Foundation se compilent via la commande yarn start qu’on exécute ainsi: docker run --rm -v ~/docker/knacss:/home/app/ fzt.

Ici on ne précise pas de commande à la suite du nom de l’image Docker, car la commande par défaut dans le fichier Dockerfile est CMD ["yarn", "start"].

Résultat: un dossier dist/ est généré en local avec les sources CSS, JS, etc, compilées via notre image Docker!

Avec KNACSS

Création de la Dockerfile

Dans home/intlangf/docker/ je fais un git clone https://github.com/alsacreations/KNACSS.git knacss (pour récupérer les sources du framework CSS Knacss).

Ensuite, cd knacss pour entrer dans le dossier créé par Git. Puis touch Dockerfile et vim Dockerfile pour créer et éditer un fichier Dockerfile dans lequel je place le code ci-dessous:

# Use an official node runtime as a parent image FROM node:10 # Set the working directory to /home/app WORKDIR /home/app/ # Bundle app source COPY . /home/app/ # If you are building your code for production # RUN npm install --only=production RUN npm install # Make port 8000 available to the world outside this container EXPOSE 8000 CMD npm run dev

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17

# Use an official node runtime as a parent image
FROM node:10

# Set the working directory to /home/app
WORKDIR /home/app/

# Bundle app source
COPY . /home/app/

# If you are building your code for production
# RUN npm install --only=production
RUN npm install

# Make port 8000 available to the world outside this container
EXPOSE 8000

CMD npm run dev

Builder le container

Pour builder le container (que je vais appeler « test »), j’exécute la commande: docker build -t test .

Exécuter une commande à l’intérieur du container

Pour exécuter npm install à l’intérieur de mon container (et ainsi récupérer les dépendances node propres au projet Knacss en local sur ma machine, à la racine du dossier home/intlangf/docker/knacss/ où se trouve le fichier package.json), j’exécute la commande docker run --rm -v ~/docker/knacss:/home/app/ test npm install.

Expériences plus anciennes

NodeJs development with Docker (Webpack + ES6 + Babel) + repo git.

Avec une Dockerfile

Container with ready-to-run gulp-tasks sur hub.docker.com.

git clone https://github.com/ipunkt/docker-gulp-tasks.git; cd docker-gulp-tasks; docker build -t ipunktbs/gulp-tasks .

1
2
3

git clone https://github.com/ipunkt/docker-gulp-tasks.git;
cd docker-gulp-tasks;
docker build -t ipunktbs/gulp-tasks .

copy the contents of the example directory to your project.

change the gulpfile.js to meet your requirements (sass or less, copy included?)

change the gulp_config.js to meet your requirements

4. make the gulp-File executable

Well you can make it by doing as chmod +x filename.sh so it will execute when you call it will ./filename.sh.

5. run ./gulp build:dev or ./gulp watch

see gulp running for you, without having to worry with nodejs, module dependencies, complex tasks configuration

Avec Docker Compose

Using Docker Compose for NodeJS Development

docker-compose-nodejs-examples – Express app with Gulp.js build system

Running gulp in Docker compose – does not create files

Develop on Docker Without Slow Dependencies – docker, containers, nodejs, gulp, nodemon, volumes

docker-node-gulp – fichiers très proches de ce qu’on trouve dans Foundation

Comment installer gulp sur un docker avec docker-compose

Here’s my minimal setup to write a piece of typescript code

An Exhaustive Guide to Writing Dockerfiles for Node.js Web Apps

A basic workflow for Docker (Compose) with MEAN stack – dev/prod

Bonus:

How To Remove Docker Images, Containers, and Volumes

Remove all images and containers

#!/bin/bash # Delete all containers docker rm $(docker ps -a -q) # Delete all images docker rmi $(docker images -q)

1
2
3
4
5

#!/bin/bash
# Delete all containers
docker rm $(docker ps -a -q)
# Delete all images
docker rmi $(docker images -q)

Workflow front-end : un nouvel espoir (partie 1), Workflow front-end : un nouvel espoir (partie 2), Workflow front-end : un nouvel espoir (partie 3) et versions PDF pour la postérité troopers.agency-Workflow front-end un nouvel espoir partie 1, troopers.agency-Workflow front-end un nouvel espoir partie 2, troopers.agency-Workflow front-end un nouvel espoir partie 3.

Utiliser NPM/Gulp sous Docker (18 janvier 2018). petegore.fr-Utiliser NPMGulp sous Docker (PDF).

docker-npm sous Git. node, npm, bower, grunt, gulp, yarn, etc.

[Docker] Mettre en place un container workflow de développement Front-End incluant NodeJS, NPM, Bower, Gulp, etc …

19/02/2018 / admin

Note: déprécié au profit de [Docker][NodeJS] Utiliser Docker pour créer un environnement de développement NodeJS.

Docker for Gulp Build Tasks et version PDF pour la postérité. Cet article m’a permis de mettre en place un Docker pour compiler mes sources Front-End via NPM (workflow utilisant Bower et Gulp). Et ça marche!!!

Ressources en ligne

Tutoriels

grand-est:docker:tools:astuces

Docker for Gulp Build Tasks et la version PDF (en anglais) pour la postérité

Repositories

Le projet docker-npm de nkenney sous Git. Un node, npm, yarn, bower, grunt and gulp runner.

[Docker] Quelques notes de prise en main et résolution d’erreurs

05/07/2016 / admin

Voir aussi: Résolution des problèmes et recommandations pour les troubleshooting.

Objectif : faire tourner un projet Change 3.x dans une VM Ubuntu 14.xx qui intègre une version de PHP (5.5.x) trop récente pour la solution. Le projet que nous essayons de faire tourner est alainflou.

Doc interne :

Change

docker-compose.yml

Déployer le projet sur la VM

Ce projet a été déployé sur la VM à l’aide de l’outil RBS cooking vers le chemin /home/<utilisateur_de_la_VM>/change30/alainflou. Les sources du projet sont accessibles depuis le repository git de Netapsys.

Les instructions principales pour la partie : Déployer le projet sur la VM

Stopper le serveur Apache : sudo service apache2 stop

Démarrer un conteneur Docker : docker-compose up -d

Stopper un conteneur Docker : docker-compose down -v

Visualiser les conteneurs Docker qui tournent : docker ps

Se logguer dans un conteneur Docker : docker exec -ti alainflou_change_1 bash (où alainflou_change_1 est le nom du Docker en question; on peut trouver ce nom en tapant la commande docker ps, sous la colonne NAMES).

Se logguer dans un conteneur Docker pour un projet déployé avec Cook : cook utf e:local m2.shell (ou utf est le nom du projet).

Utiliser le Docker dcompass

Deux pré-requis:

Le fichier config.rb doit se trouver à la racine du theme (exemple: projet/skin/frontend/package/theme/config.rb)

On exécute la commande depuis projet/skin/frontend/package/theme/

dcompass -w skin/frontend/package/theme compile

1

dcompass -w skin/frontend/package/theme compile

Liens d’accès rapide pour la partie : Déployer le projet sur la VM

Installer Docker sur la VM Ubuntu Server

Lancer le conteneur Docker Change35

Relier le projet alainflou à l’image dockérisée de Change35

Accèder au site en local via un navigateur

Config au niveau de Change

Résolution des problèmes et recommandations

Installer Docker sur la VM Ubuntu Server

Installer Docker pour Ubuntu à la racine de /home/<utilisateur_de_la_VM>/.

Récupérer les conteneurs Docker pour Change

Dans le dossier /home/intlangf/Docker, récupérer sur le Git Netapsys les images Docker mises à notre disposition. Celle qui nous intéresse plus particulièrement est /docker-images/change/35 mais on va les récupérer toutes.

Lancer le conteneur Docker Change35

Se rendre ensuite dans le dossier /home/intlangf/Docker/docker-images/change/35 et lancer la commande make.
Un message qui doit ressembler à :

docker build -t "netapsys/change35:0.1" . Sending build context to Docker daemon 12.35 MB

1
2

docker build  -t "netapsys/change35:0.1" .
Sending build context to Docker daemon 12.35 MB

…devrait apparaître suivi d’une succession d’étapes (Steps) pour enfin afficher un message qui ressemble à peu près à :

Successfully built 0a2bd8f88854 Tag netapsys/change35:0.1 as latest

1
2

Successfully built 0a2bd8f88854
Tag netapsys/change35:0.1 as latest

On peut ensuite vérifier que l’image Docker de Change35 a bien été lancée en tapant la commande docker ps qui affichera l’ensemble des images qui sont actuellement lancées. Normalement vous devriez avoir au moins celle-ci :

CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES ad3f8ab33cea netapsys/change35 "/startup.sh" About an hour ago Up About an hour 80/tcp, 443/tcp alainflou_change_1

1
2

CONTAINER ID        IMAGE                 COMMAND                  CREATED             STATUS              PORTS                                      NAMES
ad3f8ab33cea        netapsys/change35     "/startup.sh"            About an hour ago   Up About an hour    80/tcp, 443/tcp                            alainflou_change_1

Relier le projet alainflou à l’image dockérisée de Change35

Retour à la racine du dossier Docker pour créer un dossier alainflou et y placer un fichier docker-compose.yml qui contient les informations suivantes (où intlangf est le nom d’utilisateur de la VM) :

change: image: netapsys/change35 environment: - VIRTUAL_HOST=alainflou.vmchange.rbs.fr - SERVER_NAME=alainflou.vmchange.rbs.fr - WEBEDIT_HOME=/home/intlangf/change30/alainflou - DOCUMENT_ROOT=/home/intlangf/change30/alainflou/webapp/www - VOLUME_UID=1000 - VOLUME_GID=1000 - CHANGE35_MEMORY_LIMIT=256M volumes: - /var/run/docker.sock:/var/run/docker.sock:ro - /var/run/mysqld/mysqld.sock:/var/run/mysqld/mysqld.sock - /home/intlangf/change30:/home/intlangf/change30 - /home/intlangf/bin:/home/intlangf/bin # - /home/netapsys/netapsys/gits:/home/netapsys/netapsys/gits # - /data/alainflou/log/apache2:/var/log/apache2 - ./custom-apache:/etc/apache2/conf.d/netapsys - /tmp:/tmp - /home/intlangf/repository:/home/intlangf/repository expose: - "80" # - "10443:443" # external_links: # !! By using fqdn instead of IPs, the service port # of redis instances must be (re-set to 6379 in # project.<profile>.xml config file also !! # - mariadb_mariadb_1:mysql.localhost # - solr_solr_1:solr.localhost # - devtools_mailcatcher_1:mail.localhost working_dir: /home/intlangf/change30/alainflou links: - solr solr: image: docker.netapsys.fr/wfsolr:3.6 environment: - VOLUME_UID=1000 - VOLUME_GID=1000 volumes: - /var/run/docker.sock:/var/run/docker.sock:ro - ./data/solr/cores_data:/home/solr/cores_data - ./data/solr/log:/home/solr/wfsolr/tomcat/logs

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43

change:
  image: netapsys/change35
  environment:
  - VIRTUAL_HOST=alainflou.vmchange.rbs.fr
  - SERVER_NAME=alainflou.vmchange.rbs.fr
  - WEBEDIT_HOME=/home/intlangf/change30/alainflou
  - DOCUMENT_ROOT=/home/intlangf/change30/alainflou/webapp/www
  - VOLUME_UID=1000
  - VOLUME_GID=1000
  - CHANGE35_MEMORY_LIMIT=256M
  volumes:
  - /var/run/docker.sock:/var/run/docker.sock:ro
  - /var/run/mysqld/mysqld.sock:/var/run/mysqld/mysqld.sock
  - /home/intlangf/change30:/home/intlangf/change30
  - /home/intlangf/bin:/home/intlangf/bin
#  - /home/netapsys/netapsys/gits:/home/netapsys/netapsys/gits
#  - /data/alainflou/log/apache2:/var/log/apache2
  - ./custom-apache:/etc/apache2/conf.d/netapsys
  - /tmp:/tmp
  - /home/intlangf/repository:/home/intlangf/repository
  expose:
  - "80"
#  - "10443:443"
#  external_links:
# !! By using fqdn instead of IPs, the service port
# of redis instances must be (re-set to 6379 in
# project.<profile>.xml config file also !!
#  - mariadb_mariadb_1:mysql.localhost
#  - solr_solr_1:solr.localhost
#  - devtools_mailcatcher_1:mail.localhost
  working_dir: /home/intlangf/change30/alainflou
  links:
  - solr

solr:
  image: docker.netapsys.fr/wfsolr:3.6
  environment:
  - VOLUME_UID=1000
  - VOLUME_GID=1000
  volumes:
  - /var/run/docker.sock:/var/run/docker.sock:ro
  - ./data/solr/cores_data:/home/solr/cores_data
  - ./data/solr/log:/home/solr/wfsolr/tomcat/logs

Notez que le paramètre image (ligne 2) correspond au libellé de la colonne IMAGE dans la liste des Dockers actuellement en-train de tourner.

Lancer ensuite le conteneur en tapant la commande : docker-compose up -d. Normalement, un message Creating alainflou_change_1 s’affiche.
Taper dans la foulée la commande docker exec -ti alainflou_change_1 bash et vous voilà connecté sur votre conteneur (normalement et suivant comment votre VM est configurée, l’indicateur de commande de votre terminal doit passer de quelque chose comme intlangf@ubuntu2:~/docker/alainflou$ à quelque chose comme root@ad3f8ab33cea:/home/intlangf/change30/alainflou#).

Il est à noter que les commandes change seront à exécuter depuis le docker et non depuis l’instance Change installée dans la VM précédemment à l’aide de l’outil Cook.

De même, pour stopper une machine docker, lancer la commande docker-compose down -v.

Accèder au site en local via un navigateur

Récupérer les bonnes IPs et écrire les fichiers de configuration

L’URL pour accéder au site depuis un navigateur est (selon les données consignées dans notre fichier de configuration /alainflou/docker-compose.yml) alainflou.vmchange.rbs.fr. On le trouve ligne 5 - SERVER_NAME=alainflou.vmchange.rbs.fr.

Afin d’y accéder, il faut ajouter le site dans les hosts de la VM. Pour ce faire, taper un ifconfig et localiser l’IP de docker0 (la 2ème ligne normalement qui ressemble à :

docker0 Link encap:Ethernet HWaddr 02:42:ac:a4:a1:f3 inet adr:172.17.0.1 Bcast:0.0.0.0 Masque:255.255.0.0

1
2

docker0   Link encap:Ethernet  HWaddr 02:42:ac:a4:a1:f3
          inet adr:172.17.0.1  Bcast:0.0.0.0  Masque:255.255.0.0

Taper sudo vim /etc/hosts pour éditer les hosts et ajouter la ligne 172.17.0.1 alainflou.vmchange.rbs.fr.

Sous Windows, modifier les hosts également avec l’ip divulguée sous eth1, à savoir 192.168.56.110 alainflou.vmchange.rbs.fr.

eth1 Link encap:Ethernet HWaddr 08:00:27:f1:b9:a2 inet adr:192.168.56.110 Bcast:192.168.56.255 Masque:255.255.255.0

1
2

eth1      Link encap:Ethernet  HWaddr 08:00:27:f1:b9:a2
          inet adr:192.168.56.110  Bcast:192.168.56.255  Masque:255.255.255.0

Couper le serveur Apache de la VM et passer par un proxy dockerisé

Pour afficher notre projet Change dans un navigateur, il va falloir stopper le serveur Apache de notre VM et passer par un proxy dockerisé.

Sous /home/intlangf/Docker/</p>, créer un dossier <code>proxy et y placer un fichier docker-compose.yml (conf spécifique pour les projets Docker) dans lequel on écrira :

proxy: image: jwilder/nginx-proxy ports: - "80:80" - "443:443" volumes: - ./certs:/etc/nginx/certs - /var/run/docker.sock:/tmp/docker.sock:ro

1
2
3
4
5
6
7
8

proxy:
    image: jwilder/nginx-proxy
    ports:
        - "80:80"
        - "443:443"
    volumes:
        - ./certs:/etc/nginx/certs
        - /var/run/docker.sock:/tmp/docker.sock:ro

Il est possible que la création d’un dossier certs laissé vide dans /home/intlangf/Docker/proxy/ soit requise pour assurer le bon fonctionnement de notre proxy.

On peut ensuite vérifier que l’image Docker du proxy a bien été lancée en tapant la commande docker ps qui affichera l’ensemble des images qui sont actuellement lancées. A ce stade du tuto, vous devriez avoir au moins celles-ci :

CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES ad3f8ab33cea netapsys/change35 "/startup.sh" About an hour ago Up About an hour 80/tcp, 443/tcp alainflou_change_1 30859a7db66f jwilder/nginx-proxy "/app/docker-entrypoi" About an hour ago Up About an hour 0.0.0.0:80->80/tcp, 0.0.0.0:443->443/tcp proxy_proxy_1

1
2
3

CONTAINER ID        IMAGE                 COMMAND                  CREATED             STATUS              PORTS                                      NAMES
ad3f8ab33cea        netapsys/change35     "/startup.sh"            About an hour ago   Up About an hour    80/tcp, 443/tcp                            alainflou_change_1
30859a7db66f        jwilder/nginx-proxy   "/app/docker-entrypoi"   About an hour ago   Up About an hour    0.0.0.0:80->80/tcp, 0.0.0.0:443->443/tcp   proxy_proxy_1

A noter que l’image jwilder/nginx-proxy est téléchargée depuis le repo distant : https://hub.docker.com/explore/. Ce n’est pas nous qui nous occupons de la récupérer et de la stocker sur la VM comme celle de Change (vu tout en haut).

Couper Apache avec la commande sudo service apache2 stop. On y est presque… Encore un peu de config au niveau de Change et on pourra accéder à notre site en local depuis un navigateur.

Config au niveau de Change

Editer le fichier alainflou/config/project.intlangf.xml (où intlangf est votre propre user : ne modifiez pas le vrai fichier intlangf !!! – Pour connaître votre user, regardez dans le fichier profile présent à la racine de votre projet Change) et changer toutes les IPs en fonction de celle donnée pour docker0 lorsqu’on tape un ifconfig dans la VM (voir plus haut). Dans notre cas :

<?xml version="1.0" encoding="utf-8"?> <project> <defines> <define name="MOD_NOTIFICATION_SENDER_HOST">alainflou.vmchange.rbs.fr</define> <define name="SOLR_INDEXER_URL">http://solr:8080/solr/fo</define> <define name="SOLR_BO_INDEXER_URL">http://solr:8080/solr/bo</define> </defines> <config> <general> <entry name="server-fqdn">alainflou.vmchange.rbs.fr</entry> </general> <databases> <webapp> <entry name="host">172.17.0.1</entry> <entry name="port">3306</entry> </webapp> </databases> <mail> <entry name="host">172.17.0.1</entry> </mail> </config> </project>

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22

<?xml version="1.0" encoding="utf-8"?>
<project>
  <defines>
    <define name="MOD_NOTIFICATION_SENDER_HOST">alainflou.vmchange.rbs.fr</define>
    <define name="SOLR_INDEXER_URL">http://solr:8080/solr/fo</define>
    <define name="SOLR_BO_INDEXER_URL">http://solr:8080/solr/bo</define>
  </defines>
  <config>
    <general>
      <entry name="server-fqdn">alainflou.vmchange.rbs.fr</entry>
    </general>
    <databases>
      <webapp>
        <entry name="host">172.17.0.1</entry>
        <entry name="port">3306</entry>
      </webapp>
    </databases>
    <mail>
      <entry name="host">172.17.0.1</entry>
    </mail>
  </config>
</project>

Dans notre conteneur dockerisé (accessible, pour rappel, en tapant la commande docker exec -ti alainflou_change_1 bash) taper les commandes :

php framework/bin/change.php cconf; php framework/bin/change.php ssu;

1
2

php framework/bin/change.php cconf;
php framework/bin/change.php ssu;

Le site est désormais accessible en local dans un navigateur avec l’URL alainflou.vmchange.rbs.fr.

Résolution des problèmes et recommandations

disque plus visible dans l’explorateur, problèmes de droits d’écriture sur les fichiers du projet stockés sur la VM

Au cours du déploiement du projet, j’ai eu plusieurs fois des problèmes d’accès à ma VM sous Windows via Samba (disque plus visible dans l’explorateur, problèmes de droits d’écriture sur les fichiers du projet stockés sur la VM). Ne pas hésiter à redémarrer la VM dans ces cas là.

Le conteneur Change n’accède pas à la base de données stockée sur la VM

[intlangf@localhost:22] Checking database Fatal error: run() received nonzero return code 1 while executing! Requested: docker exec -i -u www-data aacall_change_1 /tmp/cook-cd /home/intlangf/change30/aacall/./. mysql -A -hdb -P3306 --batch -r -uadmin-webedit -padmin-webedit C4_aacall -e 'show databases' Executed: /bin/bash -l -c "cd /home/intlangf/change30/aacall/./. >/dev/null && docker exec -i -u www-data aacall_change_1 /tmp/cook-cd /home/intlangf/change30/aacall/./. mysql -A -hdb -P3306 --batch -r -uadmin-webedit -padmin-webedit C4_aacall -e 'show databases'" ============================================================================================================== Standard output ============================================================================================================== ERROR 1044 (42000): Access denied for user 'admin-webedit'@'%' to database 'C4_aacall' ============================================================================================================================================================================================================================================= Aborting. Fatal error: One or more hosts failed while executing task 'c.deploy.update' Aborting.

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18

[intlangf@localhost:22] Checking database

Fatal error: run() received nonzero return code 1 while executing!

Requested: docker exec -i -u www-data aacall_change_1 /tmp/cook-cd /home/intlangf/change30/aacall/./. mysql -A -hdb -P3306 --batch -r -uadmin-webedit -padmin-webedit C4_aacall -e 'show databases'
Executed: /bin/bash -l -c "cd /home/intlangf/change30/aacall/./. >/dev/null && docker exec -i -u www-data aacall_change_1 /tmp/cook-cd /home/intlangf/change30/aacall/./. mysql -A -hdb -P3306 --batch -r -uadmin-webedit -padmin-webedit C4_aacall -e 'show databases'"

============================================================================================================== Standard output ==============================================================================================================

ERROR 1044 (42000): Access denied for user 'admin-webedit'@'%' to database 'C4_aacall'

=============================================================================================================================================================================================================================================

Aborting.

Fatal error: One or more hosts failed while executing task 'c.deploy.update'

Aborting.

Il faut modifier les droits d’accès aux bases de données pour l’utilisateur admin-webedit.

Via la VM (et pas le conteneur), se connecter à mysql en root en tapant mysql -u root -p<mot_de_passe_de_votre_VM>.

Vérifier les droits : show grants for 'admin-webedit'@'%';

Taper à la suite les instructions :

GRANT USAGE ON *.* TO 'admin-webedit'@'%' IDENTIFIED BY 'admin-webedit';

FLUSH PRIVILEGES;

GRANT ALL ON *.* TO 'admin-webedit'@'%';

Le conteneur Change n’accède pas à la base de données stockée sur la VM (autre cas)

====================================================================================== Standard output ====================================================================================== ERROR 1227 (42000) at line 22: Access denied; you need (at least one of) the SUPER privilege(s) for this operation read unix @->/var/run/docker.sock: read: connection reset by peer =============================================================================================================================================================================================

1
2
3
4
5
6

====================================================================================== Standard output ======================================================================================

ERROR 1227 (42000) at line 22: Access denied; you need (at least one of) the SUPER privilege(s) for this operation
read unix @->/var/run/docker.sock: read: connection reset by peer

=============================================================================================================================================================================================

Se connecter au containter DB puis à mysql à l’intérieur de ce container:

mysql -u root -p<votre_mot_de_passe_root>

1

mysql -u root -p<votre_mot_de_passe_root>

Vous trouverez votre mot de passe root dans le fichier docker-compose.yml, sous:

services: db: environment: MYSQL_ROOT_PASSWORD: <ici>

1
2
3
4

services:
    db:
        environment:
            MYSQL_ROOT_PASSWORD: <ici>

Puis taper à la suite les instructions:

GRANT SUPER ON *.* TO 'admin-webedit'@'%' IDENTIFIED BY 'admin-webedit';

FLUSH PRIVILEGES;

Le conteneur Change n’accède pas à la base de données stockée sur la VM (autre cas)

[intlangf@localhost:22] Checking database Fatal error: run() received nonzero return code 1 while executing! Requested: docker exec -i -u www-data aacall_change_1 /tmp/cook-cd /home/intlangf/change30/aacall/./. mysql -A -hlocalhost -P3306 --batch -r -uis-user -pis-password C4_aacall -e 'show databases' Executed: /bin/bash -l -c "cd /home/intlangf/change30/aacall/./. >/dev/null && docker exec -i -u www-data aacall_change_1 /tmp/cook-cd /home/intlangf/change30/aacall/./. mysql -A -hlocalhost -P3306 --batch -r -uis-user -pis-password C4_aacall -e 'show databases'" ============================================================================================================== Standard output ============================================================================================================== ERROR 2002 (HY000): Can't connect to local MySQL server through socket '/var/run/mysqld/mysqld.sock' (2) ============================================================================================================================================================================================================================================= Aborting. Fatal error: One or more hosts failed while executing task 'c.deploy.update' Aborting.

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18

[intlangf@localhost:22] Checking database

Fatal error: run() received nonzero return code 1 while executing!

Requested: docker exec -i -u www-data aacall_change_1 /tmp/cook-cd /home/intlangf/change30/aacall/./. mysql -A -hlocalhost -P3306 --batch -r -uis-user -pis-password C4_aacall -e 'show databases'
Executed: /bin/bash -l -c "cd /home/intlangf/change30/aacall/./. >/dev/null && docker exec -i -u www-data aacall_change_1 /tmp/cook-cd /home/intlangf/change30/aacall/./. mysql -A -hlocalhost -P3306 --batch -r -uis-user -pis-password C4_aacall -e 'show databases'"

============================================================================================================== Standard output ==============================================================================================================

ERROR 2002 (HY000): Can't connect to local MySQL server through socket '/var/run/mysqld/mysqld.sock' (2)

=============================================================================================================================================================================================================================================

Aborting.

Fatal error: One or more hosts failed while executing task 'c.deploy.update'

Aborting.

Vérifier la présence d’un fichier config/project.<user_profile_name>.xml à votre nom (intlangf pour moi, donc config/project.intlangf.xml) dans le repo git du projet.

Checker la cohérence des hostnames et ports ouverts ci-dessous avec ce qui est déclaré dans le fichier docker-compose.yml du projet:

<?xml version="1.0" encoding="utf-8"?> <project> <defines> <define name="SOLR_INDEXER_URL">http://solr:8983/solr</define> </defines> <config> <databases> <webapp> <entry name="database">aacall</entry> <entry name="host">db</entry> </webapp> </databases> <mail> <entry name="type">Smtp</entry> <entry name="host">mail</entry> <entry name="port">1025</entry>  </mail> </config> </project>

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21

<?xml version="1.0" encoding="utf-8"?>
<project>
  <defines>
    <define name="SOLR_INDEXER_URL">http://solr:8983/solr</define>
  </defines>
  <config>
    <databases>
      <webapp>
        <entry name="database">aacall</entry>
        <entry name="host">db</entry>
      </webapp>
    </databases>
    <mail>
      <entry name="type">Smtp</entry>
      <entry name="host">mail</entry>
      <entry name="port">1025</entry>
      
    </mail>
  </config>
</project>

services: db: hostname: db expose: - "3306" environment: MYSQL_DATABASE: aacall solr: hostname: solr expose: - "8080" mail: hostname: mail image: mailhog/mailhog:latest # mailhog, donc "smtp"! expose: - "1025"

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19

services:
    db:
        hostname: db
        expose:
            - "3306"
        environment:
            MYSQL_DATABASE: aacall

    solr:
        hostname: solr
        expose:
            - "8080"

    mail:
        hostname: mail
        image: mailhog/mailhog:latest
        # mailhog, donc "smtp"!
        expose:
            - "1025"

Pusher le fichier config/project.intlangf.xml modifié dans la branche Git dont vous allez vous servir pour faire votre deploy avec cook.

Lancez votre deploy en suivant les instructions du wiki.

Facultatif (parce que c’est probablement pas ça qui va résoudre le problème)

Faire $ docker ps pour obtenir la liste des containers.

Entrer dans le container qui concerne la base de données: $ docker exec -it <nom_du_container> bash.

Se logguer à mysql avec les infos retournées dans le message d’erreur obtenu, ici: $ mysql -u is-user -pis-password.

Faire un show databases; et vérifier la présence de la base de données retournée dans le message d’erreur (dans notre cas C4_aacall) et que son nom soit orthographié comme dans le fichier docker-compose.yml du projet. Sous:

services: db: environment: MYSQL_DATABASE: C4_aacall

1
2
3
4

services:
    db:
        environment:
            MYSQL_DATABASE: C4_aacall

ERROR 1049 (42000): Unknown database ‘C4_aacall’

[intlangf@localhost:22] Checking database Fatal error: run() received nonzero return code 1 while executing! Requested: docker exec -i -u www-data aacall_change_1 /tmp/cook-cd /home/intlangf/change30/aacall/./. mysql -A -hdb -P3306 --batch -r -uadmin-webedit -padmin-webedit C4_aacall -e 'show databases' Executed: /bin/bash -l -c "cd /home/intlangf/change30/aacall/./. >/dev/null && docker exec -i -u www-data aacall_change_1 /tmp/cook-cd /home/intlangf/change30/aacall/./. mysql -A -hdb -P3306 --batch -r -uadmin-webedit -padmin-webedit C4_aacall -e 'show databases'" ============================================================================================================== Standard output ============================================================================================================== ERROR 1049 (42000): Unknown database 'C4_aacall' ============================================================================================================================================================================================================================================= Aborting. Fatal error: One or more hosts failed while executing task 'c.deploy.update' Aborting.

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18

[intlangf@localhost:22] Checking database

Fatal error: run() received nonzero return code 1 while executing!

Requested: docker exec -i -u www-data aacall_change_1 /tmp/cook-cd /home/intlangf/change30/aacall/./. mysql -A -hdb -P3306 --batch -r -uadmin-webedit -padmin-webedit C4_aacall -e 'show databases'
Executed: /bin/bash -l -c "cd /home/intlangf/change30/aacall/./. >/dev/null && docker exec -i -u www-data aacall_change_1 /tmp/cook-cd /home/intlangf/change30/aacall/./. mysql -A -hdb -P3306 --batch -r -uadmin-webedit -padmin-webedit C4_aacall -e 'show databases'"

============================================================================================================== Standard output ==============================================================================================================

ERROR 1049 (42000): Unknown database 'C4_aacall'

=============================================================================================================================================================================================================================================

Aborting.

Fatal error: One or more hosts failed while executing task 'c.deploy.update'

Aborting.

Voir un point plus haut pour comparer le nom de la base de donnée dans le docker-compose.yml et dans le profile.intlangf.xml de Change (racine > dossier config).

ERROR: Get https://docker.netapsys.fr/v2/wfsolr/manifests/3.6: unknown: Authentication is required

Taper docker login docker.netapsys.fr puis renseigner username et password heldapp.

~~cat ~/.dockercfg~~

aufs au_opts_parse:1155:docker[ç_-]: unknow option dirperm1

$ docker-compose pull

1

$ docker-compose pull

Installer des extensions PHP supplémentaires dans un conteneur

J’ai une erreur de ce type en front : Fatal error: Class 'NumberFormatter' not found in /home/intlangf/change30/afflelou/modules/project/lib/services/PhysicalpropertytypeService.class.php on line 102. Comme expliqué ici, il faut installer une extension PHP intl.

$ docker exec -ti afflelou_change_1 bash $ apt-get update $ apt-get install php5-intl $ service apache2 restart

1
2
3
4

$ docker exec -ti afflelou_change_1 bash
$ apt-get update
$ apt-get install php5-intl
$ service apache2 restart

Puis redémarer la VM et relancer le conteneur Docker.

En front: 503 Service Temporarily Unavailable nginx

Attention à ce qui est déclaré dans le fichier hosts de Windows. Le problème venait du fait que l’URL d’accès était déclaré&e à plusieurs reprises, mais avec une IP différente.

Error starting userland proxy: listen tcp 0.0.0.0:3306: bind: address already in use

intlangf@ubuntu2-frank:~/docker/docker-lesechos$ ./start Creating dockerlesechos_mailcatcher_1 Creating dockerlesechos_session_1 Creating dockerlesechos_db_1 Creating dockerlesechos_cache_1 Creating dockerlesechos_nginx-proxy_1 ERROR: for db driver failed programming external connectivity on endpoint dockerlesechos_db_1 (28879168c7985dfc839519644039eb151e7c1cd992f7ba16a74d40bf84a5f2f1): Error starting userland proxy: listen tcp 0.0.0.0:3306: bind: address already in use Traceback (most recent call last): File "<string>", line 3, in <module> File "compose/cli/main.py", line 63, in main AttributeError: 'ProjectError' object has no attribute 'msg' docker-compose returned -1

1
2
3
4
5
6
7
8
9
10
11
12

intlangf@ubuntu2-frank:~/docker/docker-lesechos$ ./start
Creating dockerlesechos_mailcatcher_1
Creating dockerlesechos_session_1
Creating dockerlesechos_db_1
Creating dockerlesechos_cache_1
Creating dockerlesechos_nginx-proxy_1
ERROR: for db  driver failed programming external connectivity on endpoint dockerlesechos_db_1 (28879168c7985dfc839519644039eb151e7c1cd992f7ba16a74d40bf84a5f2f1): Error starting userland proxy: listen tcp 0.0.0.0:3306: bind: address already in use
Traceback (most recent call last):
  File "<string>", line 3, in <module>
  File "compose/cli/main.py", line 63, in main
AttributeError: 'ProjectError' object has no attribute 'msg'
docker-compose returned -1

Une instance de mysql tourne sur la VM. Pour la stopper, taper la commande :

$ sudo service mysql stop

1

$ sudo service mysql stop

ERROR: for nginx-proxy Cannot start service nginx-proxy

Erreur complète :

ERROR: for nginx-proxy Cannot start service nginx-proxy: driver failed programming external connectivity on endpoint dockersupreme_nginx-proxy_1 (21e9e8d4a58f792dfd8a21cbe21db8366e8c66b4fed800df8de8f8292d7b29bb): Error starting userland proxy: listen tcp 0.0.0.0:80: bind: address already in use

1

ERROR: for nginx-proxy  Cannot start service nginx-proxy: driver failed programming external connectivity on endpoint dockersupreme_nginx-proxy_1 (21e9e8d4a58f792dfd8a21cbe21db8366e8c66b4fed800df8de8f8292d7b29bb): Error starting userland proxy: listen tcp 0.0.0.0:80: bind: address already in use

Une instance d’Apache2 tourne sur la VM. Pour la stopper, taper la commande :

$ sudo service apache2 stop

1

$ sudo service apache2 stop

Site inaccessible (ERR_CONNECTION_REFUSED)

Vérifier que le conteneur proxy est lancé et qu’il tourne normalement.

Disparition de la base de données

Dans le dossier du projet (à la racine), pour vérifier la présence d’une base de données:

sudo ls -alh /var/lib/docker/volumes/euroairport_mysql-data/_data/euroairport

ERROR: {« message »: »Get https://docker.netapsys.fr/v2/wfsolr/manifests/3.6: unauthorized: BAD_CREDENTIAL »}

Lorsque je lance un docker-compose up -d et que j’ai ce type de message d’erreur:

intlangf@ubuntu:~/docker/euroairport$ docker-compose up -d Pulling solr (docker.netapsys.fr/wfsolr:3.6)... ERROR: {"message":"Get https://docker.netapsys.fr/v2/wfsolr/manifests/3.6: unauthorized: BAD_CREDENTIAL"}

Taper :

docker login docker.netapsys.fr

Et renseigner ses login/mdp.

[Docker] Les bases de l’utilisation de Docker

25/02/2015 / admin

Lancer son Docker

A la racine du répertoire qui contient votre Docker :

sudo ./run.sh

1

sudo ./run.sh

Pour continuer à utiliser le même shell, ajouter un caractère & à la fin de la commande pour lancer le script en tâche de fond :

sudo ./run.sh &

1

sudo ./run.sh &

Si vous obtenez un message d’erreur de type : FATA[0000] Error response from daemon: Conflict. The name « [nom_de_votre_projet] » is already in use by container 0d615cabbd75. You have to delete (or rename) that container to be able to reuse that name., il faut supprimer le container 0d615cabbd75 en tapant :

sudo docker rm 0d615cabbd75

1

sudo docker rm 0d615cabbd75

Se connecter en shell à son conteneur

Une fois le dock lancé, dans un autre terminal :

sudo docker exec -ti <nom_du_conteneur> /bin/bash

1

sudo docker exec -ti <nom_du_conteneur> /bin/bash

Supprimer un volume Docker

Source, documentation officielle: docker volume rm

Depuis le terminal de votre VM : docker volume ls.

Pour supprimer un volume Docker : docker volume rm <nom_de_la_base>.

Supprimer tous les conteneurs persistants (exited containers)

docker ps -a | grep Exit | cut -d ' ' -f 1 | xargs sudo docker rm

1

docker ps -a | grep Exit | cut -d ' ' -f 1 | xargs sudo docker rm

Error response from daemon: Unable to remove volume, volume still in use:

Si, en voulant supprimer une base, vous obtenez un message de type Error response from daemon: Unable to remove volume, volume still in use: remove gpvmagento_mysql-data: volume is in use - [a2d529aed4f462276ac45e58849e983f26a72a9f51e2925603215813dbfc996a], faites un docker ps -a pour obtenir la liste des containers encore montés. Exemple:

intlangf@ubuntu:~$ docker ps -a CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES a9b28a41d9b7 docker.netapsys.fr/debian7-mariadb:v5.5 "/init" 3 minutes ago Up 3 minutes 3306/tcp euroairport_db_1 ad46c49d607c docker.netapsys.fr/wfsolr:3.6 "/startup.sh" 3 minutes ago Up 3 minutes 8080/tcp euroairport_solr_1 ddc950f7548e docker.netapsys.fr/change3-apache2-php53:v0.1 "/init" 3 minutes ago Up 3 minutes 80/tcp, 443/tcp euroairport_change_1 8182d6f4b50a mailhog/mailhog:latest "MailHog" 3 minutes ago Up 3 minutes 1025/tcp, 8025/tcp euroairport_mail_1 b43f8c49db89 jwilder/nginx-proxy "/app/docker-entry..." 3 minutes ago Up 3 minutes 0.0.0.0:80->80/tcp, 0.0.0.0:443->443/tcp proxy_nginx_1 982a2a9ec6e4 mailhog/mailhog:latest "MailHog" 3 months ago Exited (2) 3 months ago gpvmagento_mail_1 5cddb440e903 docker.netapsys.fr/magento-nginx-php56:v0.2-dev "/init" 3 months ago Exited (143) 3 months ago gpvmagento_web_1 a2d529aed4f4 docker.netapsys.fr/debian7-mariadb:v10.0 "/init" 3 months ago Exited (143) 3 months ago gpvmagento_db_1 acdf5c4b333a mailhog/mailhog:latest "MailHog" 7 months ago Exited (2) 7 months ago magento215_mail_1 44f5f6f4d899 docker.netapsys.fr/debian8-pxc:v5.6 "/init" 7 months ago Exited (143) 7 months ago magento215_db_1 dc71b9ff22fc docker.netapsys.fr/magento2-nginx-php56:v0.2 "/init" 7 months ago Exited (143) 7 months ago magento215_web_1

1
2
3
4
5
6
7
8
9
10
11
12
13

intlangf@ubuntu:~$ docker ps -a
CONTAINER ID        IMAGE                                             COMMAND                  CREATED             STATUS                      PORTS                                      NAMES
a9b28a41d9b7        docker.netapsys.fr/debian7-mariadb:v5.5           "/init"                  3 minutes ago       Up 3 minutes                3306/tcp                                   euroairport_db_1
ad46c49d607c        docker.netapsys.fr/wfsolr:3.6                     "/startup.sh"            3 minutes ago       Up 3 minutes                8080/tcp                                   euroairport_solr_1
ddc950f7548e        docker.netapsys.fr/change3-apache2-php53:v0.1     "/init"                  3 minutes ago       Up 3 minutes                80/tcp, 443/tcp                            euroairport_change_1
8182d6f4b50a        mailhog/mailhog:latest                            "MailHog"                3 minutes ago       Up 3 minutes                1025/tcp, 8025/tcp                         euroairport_mail_1
b43f8c49db89        jwilder/nginx-proxy                               "/app/docker-entry..."   3 minutes ago       Up 3 minutes                0.0.0.0:80->80/tcp, 0.0.0.0:443->443/tcp   proxy_nginx_1
982a2a9ec6e4        mailhog/mailhog:latest                            "MailHog"                3 months ago        Exited (2) 3 months ago                                                gpvmagento_mail_1
5cddb440e903        docker.netapsys.fr/magento-nginx-php56:v0.2-dev   "/init"                  3 months ago        Exited (143) 3 months ago                                              gpvmagento_web_1
a2d529aed4f4        docker.netapsys.fr/debian7-mariadb:v10.0          "/init"                  3 months ago        Exited (143) 3 months ago                                              gpvmagento_db_1
acdf5c4b333a        mailhog/mailhog:latest                            "MailHog"                7 months ago        Exited (2) 7 months ago                                                magento215_mail_1
44f5f6f4d899        docker.netapsys.fr/debian8-pxc:v5.6               "/init"                  7 months ago        Exited (143) 7 months ago                                              magento215_db_1
dc71b9ff22fc        docker.netapsys.fr/magento2-nginx-php56:v0.2      "/init"                  7 months ago        Exited (143) 7 months ago                                              magento215_web_1

Taper docker rm <ID_du_container_à_supprimer> pour supprimer le container.

List all containers (only IDs)

Stop all running containers

Remove all containers

Remove all images

TODOs

Pourquoi Docker?

Prérequis

Conventions pour ce tutoriel

Rapatriement des sources de Foundation

docker-compose.yml

gulpfile.babel.js

Initialiser le conteneur Docker

Exploiter le conteneur Docker

Pour aller plus loin:

Le Dockerfile décortiqué

Embarquer la bonne version de nodeJS

Troubleshooting et installation des applications et devDependencies manquantes

Builder le container

Installer les paquets node en local, via le container

Commande par défaut

Exécuter une commande autre que celle par défaut

Commandes utiles

Avec Foundation Zurb Template

Création de la Dockerfile

Builder le container

Exécuter une commande à l’intérieur du container: récupérer les paquets NPM

Exécuter une commande à l’intérieur du container: yarn start

Avec KNACSS

Création de la Dockerfile

Builder le container

Exécuter une commande à l’intérieur du container

Expériences plus anciennes

Avec une Dockerfile

Avec Docker Compose

Bonus:

Remove all images and containers

Ressources en ligne

Tutoriels

Repositories

Déployer le projet sur la VM

Les instructions principales pour la partie : Déployer le projet sur la VM

Utiliser le Docker dcompass

Liens d’accès rapide pour la partie : Déployer le projet sur la VM

Installer Docker sur la VM Ubuntu Server

Récupérer les conteneurs Docker pour Change

Lancer le conteneur Docker Change35

Relier le projet alainflou à l’image dockérisée de Change35

Accèder au site en local via un navigateur

Récupérer les bonnes IPs et écrire les fichiers de configuration

Couper le serveur Apache de la VM et passer par un proxy dockerisé

Config au niveau de Change

Résolution des problèmes et recommandations

disque plus visible dans l’explorateur, problèmes de droits d’écriture sur les fichiers du projet stockés sur la VM

Le conteneur Change n’accède pas à la base de données stockée sur la VM

Le conteneur Change n’accède pas à la base de données stockée sur la VM (autre cas)

Le conteneur Change n’accède pas à la base de données stockée sur la VM (autre cas)

Facultatif (parce que c’est probablement pas ça qui va résoudre le problème)

ERROR 1049 (42000): Unknown database ‘C4_aacall’

ERROR: Get https://docker.netapsys.fr/v2/wfsolr/manifests/3.6: unknown: Authentication is required

aufs au_opts_parse:1155:docker[ç_-]: unknow option dirperm1

Installer des extensions PHP supplémentaires dans un conteneur

En front: 503 Service Temporarily Unavailable nginx

Error starting userland proxy: listen tcp 0.0.0.0:3306: bind: address already in use

ERROR: for nginx-proxy Cannot start service nginx-proxy

Site inaccessible (ERR_CONNECTION_REFUSED)

Disparition de la base de données

ERROR: {« message »: »Get https://docker.netapsys.fr/v2/wfsolr/manifests/3.6: unauthorized: BAD_CREDENTIAL »}

Lancer son Docker

Se connecter en shell à son conteneur

Supprimer un volume Docker

Supprimer tous les conteneurs persistants (exited containers)

Error response from daemon: Unable to remove volume, volume still in use:

Exécuter une commande à l’intérieur du container: `yarn start`