Merge pull request #14 from Lemoncode/feature/gitlab

Feature/gitlab

Author: JaimeSalas

03-cd/02-gitlab/README.md

@@ -0,0 +1,84 @@
+# GitLab BOOTCAMP
+![](https://about.gitlab.com/images/press/logo/jpg/gitlab-logo-gray-rgb.jpg)
+
+> El entorno está preparado para funcionar tanto en docker(Recomendado) en local o con una maquina virtual vagrant
+## Versiones de software
+- Vagrant: >= 2.2.x
+- Docker Engine: >= 19
+- [Docker Compose >= 1.27.4](https://docs.docker.com/compose/install/)
+- VirtualBox >= 6.x
+
+## Creación del entorno
+1. Permitimos registry inseguro a docker
+* En Linux En el fichero /etc/docker/daemon.json
+```
+{"insecure-registries" : ["gitlab.local:5001"]}
+```
+* En windows lo hacemos via Docker Desktop
+
+2a. Preparando el entorno con docker(Linux y windows). 
+>> Es necesario permisos sudo (Linux) o Administrador(Windows)
+```bash
+user@localhost:~$ cd 02-gitlab/gitlab/docker/
+user@localhost:~02-gitlab/gitlab/docker$ sudo docker-compose up -d
+```
+2b. Preparando el entorno con Vagrant y Virtualbox
+```bash
+user@localhost:~$ cd 02-gitlab/
+user@localhost:~02-gitlab/$ sudo vagrant up
+```
+3. Añadimos entrada al fichero hosts la entrada -> <Direccion_ip_local> gitlab.local
+* Linux en el fichero /etc/hosts 
+* Windows en el fichero c:\windows\system32\drivers\etc\hosts 
+
+
+## Enlaces de documentación necesaria
+- [¿Què es gitlab?](https://about.gitlab.com/)
+- [Un poco de arquitectura](https://docs.gitlab.com/ee/development/img/architecture_simplified.png)
+
+## ¿Qué vamos a aprender?
+- Gestion de Usuarios
+- Gestión de proyectos(repositorios)
+- Entendiendo los pipelines
+- Creacion de pipelines de build,test y deploy
+- Uso de container registry
+- Pipelines de creación de imagenes Base
+- Usar nuestras Imágenes
+- Gitlab Pages
+
+## Cheatsheet
+### [Variables Predefinidas](https://docs.gitlab.com/ee/ci/variables/predefined_variables.html)
+### [Referencia configuración de pipeline](https://docs.gitlab.com/ce/ci/yaml/)
+
+## Guía de Clase
+1. Nuestro primer acceso con Gitlab
+2. Damos de alta un usuario sin role de administrador
+3. Creamos nuestro primer grupo para contener los proyectos de la bootcamp
+4. Creamos nuestro primer repositorio hola_mundo con el user creado
+5. Creamos nuestro primer pipeline en el repositorio hola_mundo
+- Creamos el branch develop
+- ¿Cuando se ejecuta un pipeline? ¿Un commit, un merge, manual? ¿y en que branch? ¿AutoDevOps? Vaya lio!
+- Conociendo LINT y Web IDE
+- Estructura básica de un pipeline con Hola Mundo
+- Mostrando las variables predefinidias
+- Control sobre que branch se ejecuta cada job
+- Merge Request
+- ¿y si falla un job? ¿Se puede puede omitir el fallo?
+- ¿y un Environment qué es? ¿Para que sirve?
+- ¿Se puede hacer un redeploy?
+- La hemos liado! Necesito un rollback!
+6. El juego de las variables de grupo, proyecto y pipeline
+7. Nuestra primera aplicación en flask
+- Como se hace un build de una app en docker
+- Deploy
+- Redeploy de la aplicación
+- Rollback de la aplicación
+8. Ejemplo de aplicación spring con tests
+9. Conatiner Registry
+- Creando nuestras propias imágenes base
+- usando nuestras propias imágenes base
+10. Gitlab Pages
+
+
+
+

03-cd/02-gitlab/Vagrantfile

@@ -0,0 +1,45 @@
+# -*- mode: ruby -*-
+# vi: set ft=ruby :
+$install_docker = <<-SCRIPT
+    apt-get update
+    apt-get install apt-transport-https ca-certificates curl gnupg-agent software-properties-common -y
+	curl -fsSL https://download.docker.com/linux/ubuntu/gpg | sudo apt-key add -
+	apt-key fingerprint 0EBFCD88
+	add-apt-repository "deb [arch=amd64] https://download.docker.com/linux/ubuntu $(lsb_release -cs) stable"
+	apt-get update
+	apt-get install docker-ce=5:19.03.13~3-0~ubuntu-focal docker-ce-cli=5:19.03.13~3-0~ubuntu-focal containerd.io -y
+	curl -L "https://github.com/docker/compose/releases/download/1.27.4/docker-compose-$(uname -s)-$(uname -m)" -o /usr/local/bin/docker-compose
+	chmod +x /usr/local/bin/docker-compose
+
+SCRIPT
+
+$configure_docker = <<-SCRIPT
+echo '{"insecure-registries" : ["gitlab.local:5001"]}' > /etc/docker/daemon.json
+sed -i "/ExecStart/ s/$/  -H tcp:\\/\\\/0.0.0.0:2375/" /lib/systemd/system/docker.service && systemctl daemon-reload && systemctl restart docker
+echo "172.40.0.2 gitlab.local" >> /etc/hosts
+SCRIPT
+
+
+# All Vagrant configuration is done below. The "2" in Vagrant.configure
+# configures the configuration version (we support older styles for
+# backwards compatibility). Please don't change it unless you know what
+# you're doing.
+Vagrant.configure("2") do |config|
+  config.vm.box = "ubuntu/focal64"
+  config.vm.box_version = "20201112.1.0"
+  config.vm.network "private_network", ip: "192.168.10.150"
+  config.vm.hostname = "bootcampVM"  
+  #config.vagrant.plugins = ["vagrant-vbguest"]
+  config.vm.provider "virtualbox" do |vb|
+  vb.name = "bootcampVM"
+  vb.memory = "6144"
+  vb.cpus = 4
+  end
+  # add swap
+  config.vm.provision :shell, inline: "fallocate -l 4G /swapfile && chmod 0600 /swapfile && mkswap /swapfile && swapon /swapfile && echo '/swapfile none swap sw 0 0' >> /etc/fstab"
+  config.vm.provision :shell, inline: "echo vm.swappiness = 10 >> /etc/sysctl.conf && echo vm.vfs_cache_pressure = 50 >> /etc/sysctl.conf && sysctl -p"
+  config.vm.provision "file", source: "gitlab", destination: "$HOME/"
+  config.vm.provision "shell", inline: $install_docker
+  config.vm.provision "shell", inline: $configure_docker
+  config.vm.provision "shell", inline: "cd gitlab/docker; docker-compose up -d"
+end

03-cd/02-gitlab/flaskapp/Dockerfile

@@ -0,0 +1,9 @@
+FROM python:3.8-slim
+MAINTAINER Sergio Ramírez  "sergio@localhost"
+COPY ./requirements.txt /app/requirements.txt
+WORKDIR /app
+RUN pip install -r requirements.txt
+COPY bootcamp.py /app/
+ENTRYPOINT [ "python" ]
+CMD [ "bootcamp.py" ]
+EXPOSE 8080

03-cd/02-gitlab/flaskapp/README.md

@@ -0,0 +1 @@
+

03-cd/02-gitlab/flaskapp/bootcamp.py

@@ -0,0 +1,10 @@
+from flask import Flask
+app = Flask(__name__)
+
+@app.route("/")
+def welcome():
+    return "Welcome to Gitlab Bootcamp!!!!"
+
+if __name__ == "__main__":
+    app.run(host='0.0.0.0',port=8080)
+

03-cd/02-gitlab/flaskapp/requirements.txt

@@ -0,0 +1 @@
+Flask==1.1.2

03-cd/02-gitlab/gitlab/docker/docker-compose.yml

@@ -0,0 +1,66 @@
+version: "3.8"
+services:
+  gitlab:
+    image: 'gitlab/gitlab-ce:13.6.2-ce.0'
+    restart: always
+    hostname: 'gitlab'
+    container_name: gitlab 
+    environment:
+      GITLAB_OMNIBUS_CONFIG: |
+              external_url 'http://gitlab.local:8888'
+              registry_external_url 'http://gitlab.local:5001'
+              gitlab_rails['registry_enabled'] = true
+              registry['enable'] = true
+              pages_external_url "http://gitlab.local:8888"
+              gitlab_pages['enable'] = true
+              gitlab_pages['inplace_chroot'] = true
+    ports:
+      - '8888:8888'
+      - '8443:8443'
+      - '2222:22'
+      - '5001:5001'
+    volumes:
+      - 'gitlab-config:/etc/gitlab'
+      - 'gitlab-logs:/var/log/gitlab'
+      - 'gitlab-data:/var/opt/gitlab'
+    networks:
+      bootcamp_network:
+        ipv4_address: 172.40.0.2
+    extra_hosts:
+            - "gitlab.local:172.40.0.2"
+  gitlabrunner:
+    image: 'gitlab/gitlab-runner:v13.6.0'
+    container_name: gitlab-runner
+    depends_on:
+      - gitlab
+    restart: always
+    volumes:
+      - '/var/run/docker.sock:/var/run/docker.sock'
+      - 'gitlab-runner-config:/etc/gitlab-runner'
+    networks:
+      bootcamp_network:
+        ipv4_address: 172.40.0.3
+    extra_hosts:
+            - "gitlab.local:172.40.0.2"
+  portainer:
+    image: portainer/portainer-ce
+    restart: always
+    container_name: portainer
+    ports:
+      - '9000:9000'
+    volumes: 
+      - '/var/run/docker.sock:/var/run/docker.sock'
+      - 'portainer_data:/data'
+volumes:
+  gitlab-config:
+  gitlab-data:
+  gitlab-logs:
+  gitlab-runner-config:
+  portainer_data:
+networks:
+  bootcamp_network:
+    name: bootcamp_network
+    ipam:
+      driver: default
+      config:
+        - subnet: 172.40.0.0/24

03-cd/02-gitlab/gitlab/docker/id_rsa

@@ -0,0 +1,27 @@
+-----BEGIN OPENSSH PRIVATE KEY-----
+b3BlbnNzaC1rZXktdjEAAAAABG5vbmUAAAAEbm9uZQAAAAAAAAABAAABFwAAAAdzc2gtcn
+NhAAAAAwEAAQAAAQEA1/f6aOABW5L2WS7/DtX3AFbfmRzxNm+qqm8B19WvTIB0S0A48Oky
+5m7MtoN5jvPiDGgS8KdnXaYx8l82dIzP2bk1s1saA9Z9dkIQzjFBF7p8c7OUB5c/mgLfG7
+qvjS3dUXRIBb3Qn/5b1IphJZAgbzitvQdvNidxsPtFJtFkeYz5jGq6WXgPNXVIcUvUjRQm
+M7gmIL2TyV65Qpyg4Y93W2RXBTevVrqLCBj6xjrTwviKHfxmbsKYvyEx8+TCrVyXl8L3Cl
+jRFyRbjKBAFLrgwiQJ69unurq35ryai1RX+joPNoQipW05WDhWwfOHXxmgmNvUdJoqvlHd
+MauPGv124QAAA8iZtBYTmbQWEwAAAAdzc2gtcnNhAAABAQDX9/po4AFbkvZZLv8O1fcAVt
++ZHPE2b6qqbwHX1a9MgHRLQDjw6TLmbsy2g3mO8+IMaBLwp2ddpjHyXzZ0jM/ZuTWzWxoD
+1n12QhDOMUEXunxzs5QHlz+aAt8buq+NLd1RdEgFvdCf/lvUimElkCBvOK29B282J3Gw+0
+Um0WR5jPmMarpZeA81dUhxS9SNFCYzuCYgvZPJXrlCnKDhj3dbZFcFN69WuosIGPrGOtPC
++Iod/GZuwpi/ITHz5MKtXJeXwvcKWNEXJFuMoEAUuuDCJAnr26e6urfmvJqLVFf6Og82hC
+KlbTlYOFbB84dfGaCY29R0miq+Ud0xq48a/XbhAAAAAwEAAQAAAQBPqLLfbghyK4HcIV6I
+rVke8ewlgKxkBMoxdSJ75uBy2kqK2xRln85benDdvR7gIIq3QsgBpe2VeFCh8oaWdL3Rs+
+Pf1PGCiuHZ9cJXG4nD49A1qP4n0pzuBLMgejp4W3tvqPFL1NiXuu1KNwRgI4ojHAfRWmWl
+1uSzf+rgx4lE35IGfGK3f4NcmFTgQmmmlakVpZIcDs3u3JPR2ZhTxP//r0HLVTXho//CBv
+pXEz8mZpgDRPawZIBbGoEwKZSBBT3WjcKsW9jyKhVLuUxHalc96SXCMji+IIV0bZhJ9Tvu
+V7unh40Xurp6NL8VMz+fs7phqpNGYUlxLxhu7TXOaBS1AAAAgFeBqOE9Rc878qD491Q54Y
+G+8muSfX0TYZ3j8fCh+7QrP2J1e/GRgBPpYStsegAT7u/saC2raU4cLliIbfw/4wpVGV6x
+MDOY1XxJ4dsHlWmar4pJaykeczn7NYPzj5pAVuErL3FaCJhfVcLeE9AupJ2y86Xh6PhQwM
+VHHWe42+feAAAAgQD5VO+lSXtlvgtDIJOMbpxtZdWuUpUw07VWjQYUvvmXcSEIP3fTSX4l
+CZUme6R0savFQo0J+5d25bMaiAejH5aYtiErFo+c18V82G1lKLbZ8FWqFdb22MD+Ta2iyK
+UtcBDr7DVpiwCtotjDaG0Jt7yBpZqt2+M8YRXTUVIUzMotVwAAAIEA3b6enwuJXdb8CQQC
+0/bd/FB3j6tTu51iyIJ209aeGGAetop0Q3fD6yrT42SBnKdxEXgTqPCmuVkhM97YbLgbDE
+0uWV/P99RgTitNQb8YeDfW/5ZkT8lyC8+mrWD2NQ90QUzr0DrCF5t/sWfXCDqOFD/zOk48
+yL4LrTX0dZ42IocAAAARZW1haWxAZXhhbXBsZS5jb20BAg==
+-----END OPENSSH PRIVATE KEY-----

03-cd/02-gitlab/gitlab/docker/id_rsa.pub

@@ -0,0 +1 @@
+ssh-rsa AAAAB3NzaC1yc2EAAAADAQABAAABAQDX9/po4AFbkvZZLv8O1fcAVt+ZHPE2b6qqbwHX1a9MgHRLQDjw6TLmbsy2g3mO8+IMaBLwp2ddpjHyXzZ0jM/ZuTWzWxoD1n12QhDOMUEXunxzs5QHlz+aAt8buq+NLd1RdEgFvdCf/lvUimElkCBvOK29B282J3Gw+0Um0WR5jPmMarpZeA81dUhxS9SNFCYzuCYgvZPJXrlCnKDhj3dbZFcFN69WuosIGPrGOtPC+Iod/GZuwpi/ITHz5MKtXJeXwvcKWNEXJFuMoEAUuuDCJAnr26e6urfmvJqLVFf6Og82hCKlbTlYOFbB84dfGaCY29R0miq+Ud0xq48a/Xbh email@example.com

03-cd/02-gitlab/gitlab/docker/runner_register.sh

@@ -0,0 +1,10 @@
+#!/bin/bash -x
+
+# Redirect all stdout and stderr to mytest.log
+exec > mytest.log 2>&1
+while ! curl -f -LI localhost:8888;do echo sleeping; sleep 5;done;
+echo Connected!;
+export gitlab_id=$(sudo docker ps --filter "name=^gitlab$" --format "{{.ID}}")
+export runner_token=$(docker exec -i $gitlab_id /opt/gitlab/bin/gitlab-rails runner -e production "puts Gitlab::CurrentSettings.current_application_settings.runners_registration_token")
+export runner_id=$(docker ps --filter "name=^gitlab-runner$" --format "{{.ID}}")
+docker exec -i $runner_id gitlab-runner register  --non-interactive   --url "http://gitlab.local:8888/"   --registration-token $runner_token   --executor "docker"   --docker-image docker:19.03.13   --description "docker-runner" --docker-volumes /var/run/docker.sock:/var/run/docker.sock  --tag-list "docker"   --run-untagged="true"   --locked="false"   --access-level="not_protected"   --env "DOCKER_DRIVER=overlay2" --env "DOCKER_TLS_CERTDIR="  --docker-privileged  --docker-network-mode "bootcamp_network"   --docker-extra-hosts "gitlab.local:172.40.0.2" --docker-pull-policy if-not-present