feed.xml

<?xml version="1.0" encoding="utf-8"?><feed xmlns="http://www.w3.org/2005/Atom" ><generator uri="https://jekyllrb.com/" version="3.8.6">Jekyll</generator><link href="/feed.xml" rel="self" type="application/atom+xml" /><link href="/" rel="alternate" type="text/html" /><updated>2019-08-17T03:39:46+00:00</updated><id>/feed.xml</id><title type="html">图解我的私房菜</title><subtitle>Write an awesome description for your new site here. You can edit this line in _config.yml. It will appear in your document head meta (for Google search results) and in your feed.xml site description.</subtitle><entry><title type="html">Golang按行解析日志神器之ldetool</title><link href="/%E5%A4%A7%E6%95%B0%E6%8D%AE/2019/08/15/Golang%E6%8C%89%E8%A1%8C%E8%A7%A3%E6%9E%90%E6%97%A5%E5%BF%97%E7%A5%9E%E5%99%A8%E4%B9%8Bldetool.html" rel="alternate" type="text/html" title="Golang按行解析日志神器之ldetool" /><published>2019-08-15T00:00:00+00:00</published><updated>2019-08-15T00:00:00+00:00</updated><id>/%E5%A4%A7%E6%95%B0%E6%8D%AE/2019/08/15/Golang%E6%8C%89%E8%A1%8C%E8%A7%A3%E6%9E%90%E6%97%A5%E5%BF%97%E7%A5%9E%E5%99%A8%E4%B9%8Bldetool</id><content type="html" xml:base="/%E5%A4%A7%E6%95%B0%E6%8D%AE/2019/08/15/Golang%E6%8C%89%E8%A1%8C%E8%A7%A3%E6%9E%90%E6%97%A5%E5%BF%97%E7%A5%9E%E5%99%A8%E4%B9%8Bldetool.html">&lt;p&gt;为什么称为神器，&lt;a href=&quot;https://blog.csdn.net/orangleliu/article/details/85038304&quot;&gt;请看&lt;/a&gt;
此文章解析日志的性能和使用方便测试&lt;/p&gt;

&lt;h2 id=&quot;0安装&quot;&gt;0.安装&lt;/h2&gt;

&lt;pre&gt;&lt;code class=&quot;language-bash&quot;&gt;go get -u github.com/sirkon/ldetool
&lt;/code&gt;&lt;/pre&gt;

&lt;h2 id=&quot;1使用命令行如下&quot;&gt;1.使用命令行如下&lt;/h2&gt;

&lt;pre&gt;&lt;code class=&quot;language-bash&quot;&gt;ldetool generate --package 包名 规则文件.lde
&lt;/code&gt;&lt;/pre&gt;

&lt;p&gt;生成Golang规则类的文件，在Golang中调它的方法如下&lt;/p&gt;

&lt;pre&gt;&lt;code class=&quot;language-go&quot;&gt;//规则定义的类名
l := &amp;amp;Line{}
str :=&quot;hello world&quot;
if ok, err := l.Extract(str);ok &amp;amp;&amp;amp; err ==nil{
    //Time是规则定的属性
    fmt.Sprintf(&quot;%s&quot;,l.Time)
}
&lt;/code&gt;&lt;/pre&gt;

&lt;h2 id=&quot;2实际例子&quot;&gt;2.实际例子&lt;/h2&gt;

&lt;h3 id=&quot;21日志内容&quot;&gt;2.1日志内容&lt;/h3&gt;

&lt;pre&gt;&lt;code class=&quot;language-bash&quot;&gt;27.154.70.117 - - [20/Nov/2018:20:23:56 +0800] 2 &quot;GET http://7img1.tianlaikge.com/tv/homeimage/201709/shengridangao.zip HTTP/1.1&quot; 200 842186 841382 &quot;-&quot; &quot;-&quot; &quot;Dalvik/2.1.0 (Linux; U; Android 7.1.2; vivo Y79A Build/N2G47H)&quot; &quot;-&quot; 219082621 &quot;HIT&quot; 27.159.73.35
&lt;/code&gt;&lt;/pre&gt;

&lt;h3 id=&quot;22-ldetool规则文件&quot;&gt;2.2 ldetool规则文件&lt;/h3&gt;

&lt;pre&gt;&lt;code class=&quot;language-bash&quot;&gt;vim nginx.lde
&lt;/code&gt;&lt;/pre&gt;

&lt;pre&gt;&lt;code class=&quot;language-yml&quot;&gt;Nginx =
    IP(string) &quot; &quot;
    ^&quot;- - [&quot; Time(string) ']'
    ^&quot; &quot;Cost(uint32)&quot; &quot;
    ^'&quot;'Request(string)'&quot;'
    ^&quot; &quot;Status(int64)&quot; &quot;
    ByteSend(int64)&quot; &quot;
    BodyByteSend(int64)&quot; &quot;
    ^'&quot;'Referer(string)'&quot;'
    ^&quot; &quot;
    ^'&quot;'Cookie(string)'&quot;'
    ^' '
    ^'&quot;'UserAgent(string)'&quot;'
    ^' '
    ^'&quot;'Xfor(string)'&quot;'
    ^' 'ConnID(string)' '
    ^'&quot;'Hit(string)'&quot;'
    ^&quot; &quot;
    ServerIp(string)
;
&lt;/code&gt;&lt;/pre&gt;

&lt;p&gt;格式是&lt;/p&gt;

&lt;pre&gt;&lt;code class=&quot;language-yml&quot;&gt;类名=
##IP则它义定的属性，因为golang的原因，首字母要大写，如果是id则要ID都得大写
IP(string) &quot; &quot;
;
&lt;/code&gt;&lt;/pre&gt;

&lt;h2 id=&quot;3规则详解&quot;&gt;3.规则详解&lt;/h2&gt;

&lt;h3 id=&quot;31-规则列表&quot;&gt;3.1 规则列表&lt;/h3&gt;

&lt;p&gt;&lt;img src=&quot;img/规则.png&quot; alt=&quot;规则&quot; title=&quot;ldetool 规则&quot; /&gt;&lt;/p&gt;

&lt;h3 id=&quot;32-原理&quot;&gt;3.2 原理&lt;/h3&gt;

&lt;p&gt;排号系统，意思是说叫到号的人走出休息区。休息区是等待叫号的人，休息区则是要匹配的字符串.
比如：匹配字符串则休息区是【休息区是等待叫号的人】，排号系统叫到【等待】，那匹配规则是【_等待】,
匹配系统则会将等待之前的字符走到休息区，则休息区此时变为【叫号的人】.&lt;/p&gt;

&lt;h3 id=&quot;33-规则解释&quot;&gt;3.3 规则解释&lt;/h3&gt;

&lt;ul&gt;
  &lt;li&gt;&lt;code&gt;_[N:]&lt;/code&gt;是匹配可以不重复N个字符,比如_“test”[:3] Filed(float64) “ “,那休息区开头必须是【[前面三个任意字符]test 878787】&lt;/li&gt;
  &lt;li&gt;&lt;code&gt;*&lt;/code&gt; 是匹配重复N个字符，也是&lt;code&gt;_[N:]&lt;/code&gt;一种特例&lt;/li&gt;
  &lt;li&gt;&lt;code&gt;^&lt;/code&gt; 是匹配前缀的字符&lt;/li&gt;
  &lt;li&gt;&lt;code&gt;^&lt;/code&gt; 或 &lt;code&gt;_&lt;/code&gt; 都是有序的，就是顺序是固定的，如果顺序是随机的话则在前面加上 &lt;code&gt;?&lt;/code&gt;&lt;/li&gt;
  &lt;li&gt;&lt;code&gt;@&lt;/code&gt; 或 &lt;code&gt;..&lt;/code&gt; 则包括匹配词，&lt;code&gt;@&lt;/code&gt; 是字符串，&lt;code&gt;..&lt;/code&gt; 则是字符&lt;/li&gt;
  &lt;li&gt;&lt;code&gt;_[N:M]&lt;/code&gt; ,&lt;code&gt;?&lt;/code&gt; &lt;code&gt;..|@&lt;/code&gt; 可以组成使用&lt;/li&gt;
&lt;/ul&gt;

&lt;h2 id=&quot;4参考文章&quot;&gt;4.参考文章&lt;/h2&gt;

&lt;p&gt;&lt;a href=&quot;https://github.com/sirkon/ldetool&quot;&gt;ldetool官方源代码&lt;/a&gt;&lt;/p&gt;

&lt;p&gt;&lt;a href=&quot;https://blog.csdn.net/orangleliu/article/details/85038304&quot;&gt;ldetool性能分析&lt;/a&gt;&lt;/p&gt;</content><author><name></name></author><category term="[&quot;大数据&quot;]" /><category term="golang" /><category term="工具" /><category term="日志" /><summary type="html">为什么称为神器，请看 此文章解析日志的性能和使用方便测试</summary></entry><entry><title type="html">玩转docker-composer基础篇</title><link href="/%E4%BA%91%E8%AE%A1%E7%AE%97/2019/07/18/docker-composer%E5%9F%BA%E7%A1%80%E7%9F%A5%E8%AF%86.html" rel="alternate" type="text/html" title="玩转docker-composer基础篇" /><published>2019-07-18T00:00:00+00:00</published><updated>2019-07-18T00:00:00+00:00</updated><id>/%E4%BA%91%E8%AE%A1%E7%AE%97/2019/07/18/docker-composer%E5%9F%BA%E7%A1%80%E7%9F%A5%E8%AF%86</id><content type="html" xml:base="/%E4%BA%91%E8%AE%A1%E7%AE%97/2019/07/18/docker-composer%E5%9F%BA%E7%A1%80%E7%9F%A5%E8%AF%86.html">&lt;h2 id=&quot;0docker-composer安装&quot;&gt;0.docker-composer安装&lt;/h2&gt;

&lt;p&gt;从github上下载docker-compose二进制文件安装&lt;/p&gt;

&lt;pre&gt;&lt;code class=&quot;language-shell&quot;&gt;##下载最新版的docker-compose文件
curl -L https://github.com/docker/compose/releases/download/1.16.1/docker-compose-`uname -s`-`uname -m` \
 -o /usr/local/bin/docker-compose

##添加可执行权限
chmod +x /usr/local/bin/docker-compose

##测试安装结果
docker-compose --version
&lt;/code&gt;&lt;/pre&gt;

&lt;h2 id=&quot;1基本概念&quot;&gt;1.基本概念&lt;/h2&gt;

&lt;ul&gt;
  &lt;li&gt;使用Docker Compose不再需要使用shell脚本来启动容器&lt;/li&gt;
  &lt;li&gt;Compose 通过一个配置文件来管理多个Docker容器，在配置文件中，所有的容器通过services来定义，然后使用docker-compose脚本来启动，停止和重启应用，和应用中的服务以及所有依赖服务的容器&lt;/li&gt;
  &lt;li&gt;Compose 项目由 Python 编写，实现上调用了 Docker 服务提供的 API 来对容器进行管理&lt;/li&gt;
  &lt;li&gt;服务 (service)：一个应用的容器，实际上可以包括若干运行相同镜像的容器实例。&lt;/li&gt;
  &lt;li&gt;项目 (project)：由一组关联的应用容器组成的一个完整业务单元，在 docker-compose.yml 文件中定义。&lt;/li&gt;
&lt;/ul&gt;

&lt;h2 id=&quot;2基本命令的使用技巧&quot;&gt;2.基本命令的使用技巧&lt;/h2&gt;

&lt;p&gt;docker-compose  –help 参数 可以查看调用的参数的格式&lt;/p&gt;

&lt;pre&gt;&lt;code class=&quot;language-shell&quot;&gt;##容器相关操作的命令

docker-compose --help 


Define and run multi-container applications with Docker.

Usage:
  docker-compose [-f &amp;lt;arg&amp;gt;...] [options] [COMMAND] [ARGS...]
  docker-compose -h|--help

Options:
  -f, --file FILE             Specify an alternate compose file
                              (default: docker-compose.yml)
  -p, --project-name NAME     Specify an alternate project name
                              (default: directory name)
  --verbose                   Show more output
  --log-level LEVEL           Set log level (DEBUG, INFO, WARNING, ERROR, CRITICAL)
  --no-ansi                   Do not print ANSI control characters
  -v, --version               Print version and exit
  -H, --host HOST             Daemon socket to connect to

  --tls                       Use TLS; implied by --tlsverify
  --tlscacert CA_PATH         Trust certs signed only by this CA
  --tlscert CLIENT_CERT_PATH  Path to TLS certificate file
  --tlskey TLS_KEY_PATH       Path to TLS key file
  --tlsverify                 Use TLS and verify the remote
  --skip-hostname-check       Don't check the daemon's hostname against the
                              name specified in the client certificate
  --project-directory PATH    Specify an alternate working directory
                              (default: the path of the Compose file)
  --compatibility             If set, Compose will attempt to convert deploy
                              keys in v3 files to their non-Swarm equivalent

Commands:
  build              Build or rebuild services
  bundle             Generate a Docker bundle from the Compose file
  config             Validate and view the Compose file
  create             Create services
  down               Stop and remove containers, networks, images, and volumes
  events             Receive real time events from containers
  exec               Execute a command in a running container
  help               Get help on a command
  images             List images
  kill               Kill containers
  logs               View output from containers
  pause              Pause services
  port               Print the public port for a port binding
  ps                 List containers
  pull               Pull service images
  push               Push service images
  restart            Restart services
  rm                 Remove stopped containers
  run                Run a one-off command
  scale              Set number of containers for a service
  start              Start services
  stop               Stop services
  top                Display the running processes
  unpause            Unpause services
  up                 Create and start containers
  version            Show the Docker-Compose version information


&lt;/code&gt;&lt;/pre&gt;

&lt;h2 id=&quot;3-docker-composer-常用的命令&quot;&gt;3. docker-composer 常用的命令&lt;/h2&gt;

&lt;ul&gt;
  &lt;li&gt;ps：列出所有运行容器&lt;/li&gt;
&lt;/ul&gt;

&lt;pre&gt;&lt;code class=&quot;language-shell&quot;&gt;docker-compose ps
&lt;/code&gt;&lt;/pre&gt;

&lt;ul&gt;
  &lt;li&gt;logs：查看服务日志输出&lt;/li&gt;
&lt;/ul&gt;

&lt;pre&gt;&lt;code class=&quot;language-shell&quot;&gt;docker-compose logs eureka
&lt;/code&gt;&lt;/pre&gt;

&lt;ul&gt;
  &lt;li&gt;build：构建或者重新构建服务&lt;/li&gt;
&lt;/ul&gt;

&lt;pre&gt;&lt;code class=&quot;language-shell&quot;&gt;docker-compose build .

##或者
docker-compose build -f xx.yml

&lt;/code&gt;&lt;/pre&gt;

&lt;ul&gt;
  &lt;li&gt;rm：删除指定服务的容器&lt;/li&gt;
&lt;/ul&gt;

&lt;pre&gt;&lt;code class=&quot;language-shell&quot;&gt;docker-compose rm eureka
&lt;/code&gt;&lt;/pre&gt;

&lt;ul&gt;
  &lt;li&gt;start：启动指定服务已存在的容器&lt;/li&gt;
&lt;/ul&gt;

&lt;pre&gt;&lt;code class=&quot;language-shell&quot;&gt;docker-compose stop eureka
&lt;/code&gt;&lt;/pre&gt;

&lt;ul&gt;
  &lt;li&gt;stop：停止已经处于运行状态的容器，但不删除它&lt;/li&gt;
&lt;/ul&gt;

&lt;pre&gt;&lt;code class=&quot;language-shell&quot;&gt;docker-compose stop eureka
&lt;/code&gt;&lt;/pre&gt;

&lt;ul&gt;
  &lt;li&gt;restart:重启项目中的服务&lt;/li&gt;
&lt;/ul&gt;

&lt;pre&gt;&lt;code class=&quot;language-shell&quot;&gt;docker-compose restart eureka
&lt;/code&gt;&lt;/pre&gt;

&lt;ul&gt;
  &lt;li&gt;up：构建、启动容器&lt;/li&gt;
&lt;/ul&gt;

&lt;pre&gt;&lt;code class=&quot;language-shell&quot;&gt;docker-compose up -d
&lt;/code&gt;&lt;/pre&gt;

&lt;ul&gt;
  &lt;li&gt;down：停用移除所有容器以及网络相关&lt;/li&gt;
&lt;/ul&gt;

&lt;pre&gt;&lt;code class=&quot;language-shell&quot;&gt;docker-compose down
&lt;/code&gt;&lt;/pre&gt;

&lt;h2 id=&quot;4docker-composeyml-属性&quot;&gt;4.docker-compose.yml 属性&lt;/h2&gt;

&lt;ul&gt;
  &lt;li&gt;version：指定 docker-compose.yml 文件的写法格式&lt;/li&gt;
&lt;/ul&gt;

&lt;pre&gt;&lt;code class=&quot;language-yml&quot;&gt;version: '3'
&lt;/code&gt;&lt;/pre&gt;

&lt;ul&gt;
  &lt;li&gt;services：多个容器集合&lt;/li&gt;
&lt;/ul&gt;

&lt;pre&gt;&lt;code class=&quot;language-yml&quot;&gt;version: '3'
services:
    php-fpm:
    java:
    go:
&lt;/code&gt;&lt;/pre&gt;

&lt;ul&gt;
  &lt;li&gt;build：配置构建时，Compose 会利用它自动构建镜像，该值可以是一个路径，也可以是一个对象，用于指定 Dockerfile 参数&lt;/li&gt;
&lt;/ul&gt;

&lt;pre&gt;&lt;code class=&quot;language-yml&quot;&gt;version: '3'
services:
    php-fpm:
    build:
        context: ./php-fpm ##目录
        dockerfile: Dockerfile ##配置文件
    java:
    build:
        context: ./java
    go:
    build:
        context: ./go
&lt;/code&gt;&lt;/pre&gt;

&lt;ul&gt;
  &lt;li&gt;command：覆盖容器启动后默认执行的命令&lt;/li&gt;
&lt;/ul&gt;

&lt;pre&gt;&lt;code class=&quot;language-yml&quot;&gt;version: '3'
services:
    php-fpm:
    build:
        context: ./php-fpm ##目录
        dockerfile: Dockerfile ##配置文件
    java:
    build:
        context: ./java
        command:  [bundle,exec,thin,-p,3000]
    go:
    build:
        context: ./go
&lt;/code&gt;&lt;/pre&gt;

&lt;ul&gt;
  &lt;li&gt;environment：环境变量配置，可以用数组或字典两种方式&lt;/li&gt;
&lt;/ul&gt;

&lt;pre&gt;&lt;code class=&quot;language-yml&quot;&gt;environment:
    RACK_ENV: development
    SHOW: 'ture'
-------------------------
environment:
    - RACK_ENV=development
    - SHOW=ture
&lt;/code&gt;&lt;/pre&gt;

&lt;pre&gt;&lt;code class=&quot;language-yml&quot;&gt;version: '3'
services:
    php-fpm:
    build:
        context: ./php-fpm ##目录
        dockerfile: Dockerfile ##配置文件
    java:
    build:
        context: ./java
        command:  [bundle,exec,thin,-p,3000]
    go:
    build:
        context: ./go
        environment:
            - MYSQL_ROOT_PASSWORD=${MYSQL_ROOT_PASSWORD}
            - TZ=${WORKSPACE_TIMEZONE}

&lt;/code&gt;&lt;/pre&gt;

&lt;ul&gt;
  &lt;li&gt;expose：暴露端口，只将端口暴露给连接的服务，而不暴露给主机&lt;/li&gt;
&lt;/ul&gt;

&lt;pre&gt;&lt;code class=&quot;language-yml&quot;&gt;version: '3'
services:
    php-fpm:
    build:
        context: ./php-fpm ##目录
        dockerfile: Dockerfile ##配置文件
        expose:
            - &quot;3000&quot;
            - &quot;8000&quot;
    java:
    build:
        context: ./java
        command:  [bundle,exec,thin,-p,3000]
    go:
    build:
        context: ./go
        environment:
            - MYSQL_ROOT_PASSWORD=${MYSQL_ROOT_PASSWORD}
            - TZ=${WORKSPACE_TIMEZONE}

&lt;/code&gt;&lt;/pre&gt;

&lt;ul&gt;
  &lt;li&gt;image：指定服务所使用的镜像&lt;/li&gt;
&lt;/ul&gt;

&lt;pre&gt;&lt;code class=&quot;language-yml&quot;&gt;version: '3'
services:
    nginx:
        image: nginx
    php-fpm:
    build:
        context: ./php-fpm ##目录
        dockerfile: Dockerfile ##配置文件
        expose:
            - &quot;3000&quot;
            - &quot;8000&quot;
    java:
    build:
        context: ./java
        command:  [bundle,exec,thin,-p,3000]
    go:
    build:
        context: ./go
        environment:
            - MYSQL_ROOT_PASSWORD=${MYSQL_ROOT_PASSWORD}
            - TZ=${WORKSPACE_TIMEZONE}

&lt;/code&gt;&lt;/pre&gt;

&lt;ul&gt;
  &lt;li&gt;network_mode：设置网络模式&lt;/li&gt;
&lt;/ul&gt;

&lt;pre&gt;&lt;code class=&quot;language-yml&quot;&gt;network_mode: &quot;bridge&quot;
network_mode: &quot;host&quot;
network_mode: &quot;none&quot;
network_mode: &quot;service:[service name]&quot;
network_mode: &quot;container:[container name/id]&quot;
&lt;/code&gt;&lt;/pre&gt;

&lt;pre&gt;&lt;code class=&quot;language-yml&quot;&gt;version: '3'
networks:
  os_bridge:
    driver: bridge
services:
    nginx:
        image: nginx
    php-fpm:
    build:
        context: ./php-fpm ##目录
        dockerfile: Dockerfile ##配置文件
        expose:
            - &quot;3000&quot;
            - &quot;8000&quot;
        networks:
        - os_bridge

    java:
    build:
        context: ./java
        command:  [bundle,exec,thin,-p,3000]
    go:
    build:
        context: ./go
        environment:
            - MYSQL_ROOT_PASSWORD=${MYSQL_ROOT_PASSWORD}
            - TZ=${WORKSPACE_TIMEZONE}

&lt;/code&gt;&lt;/pre&gt;

&lt;ul&gt;
  &lt;li&gt;ports：对外暴露的端口定义，和 expose 对应&lt;/li&gt;
&lt;/ul&gt;

&lt;pre&gt;&lt;code class=&quot;language-yml&quot;&gt;version: '3'
services:
    php-fpm:
    build:
        context: ./php-fpm ##目录
        dockerfile: Dockerfile ##配置文件
        expose:
            - &quot;3000&quot;
            - &quot;8000&quot;
        ports:
            - &quot;59501:9501&quot;
    java:
    build:
        context: ./java
        command:  [bundle,exec,thin,-p,3000]
    go:
    build:
        context: ./go
        environment:
            - MYSQL_ROOT_PASSWORD=${MYSQL_ROOT_PASSWORD}
            - TZ=${WORKSPACE_TIMEZONE}

&lt;/code&gt;&lt;/pre&gt;

&lt;ul&gt;
  &lt;li&gt;volumes：卷挂载路径&lt;/li&gt;
&lt;/ul&gt;

&lt;pre&gt;&lt;code class=&quot;language-yml&quot;&gt;version: '3'
services:
    php-fpm:
    build:
        context: ./php-fpm ##目录
        dockerfile: Dockerfile ##配置文件
        expose:
            - &quot;3000&quot;
            - &quot;8000&quot;
        ports:
            - &quot;59501:9501&quot;
        volumes:
            - ./php-fpm/php${PHP_VERSION}.ini:/usr/local/etc/php/php.ini
            - ./php-fpm/mod:/usr/local/etc/php/conf.d/mod/
            - ./php-fpm/conf.d:/usr/local/etc/php-fpm.d/cfg.d/

    java:
    build:
        context: ./java
        command:  [bundle,exec,thin,-p,3000]
    go:
    build:
        context: ./go
        environment:
            - MYSQL_ROOT_PASSWORD=${MYSQL_ROOT_PASSWORD}
            - TZ=${WORKSPACE_TIMEZONE}

&lt;/code&gt;&lt;/pre&gt;

&lt;ul&gt;
  &lt;li&gt;links：将指定容器连接到当前连接，可以设置别名，避免ip方式导致的容器重启动态改变的无法连接情况&lt;/li&gt;
&lt;/ul&gt;

&lt;pre&gt;&lt;code class=&quot;language-yml&quot;&gt;version: '3'
services:
    php-fpm:
    build:
        context: ./php-fpm ##目录
        dockerfile: Dockerfile ##配置文件
        expose:
            - &quot;3000&quot;
            - &quot;8000&quot;
        ports:
            - &quot;59501:9501&quot;
        volumes:
            - ./php-fpm/php${PHP_VERSION}.ini:/usr/local/etc/php/php.ini
            - ./php-fpm/mod:/usr/local/etc/php/conf.d/mod/
            - ./php-fpm/conf.d:/usr/local/etc/php-fpm.d/cfg.d/
        links:
            - mongo:db ##mongo是其他容器的服务名,php-fpm服务用db访问到mongo的容器的服务
            - redis
    java:
    build:
        context: ./java
        command:  [bundle,exec,thin,-p,3000]
    go:
    build:
        context: ./go
        environment:
            - MYSQL_ROOT_PASSWORD=${MYSQL_ROOT_PASSWORD}
            - TZ=${WORKSPACE_TIMEZONE}

&lt;/code&gt;&lt;/pre&gt;

&lt;h2 id=&quot;5出现的问题&quot;&gt;5.出现的问题&lt;/h2&gt;

&lt;p&gt;Q:当docker-compose.yml配置发生变化时，如何去更新容器?
A:可使用 docker-compose up 命令更新配置&lt;/p&gt;

&lt;p&gt;Q:为什么yml配置总是报错呢？
A:yml配置是有格式的，YAML中允许表示三种格式，分别是常量值，对象和数组。格式如下：&lt;/p&gt;

&lt;pre&gt;&lt;code class=&quot;language-yml&quot;&gt;#即表示url属性值；
url: http://www.wolfcode.cn 
#即表示server.host属性的值；
server:
    host: http://www.wolfcode.cn 
#数组，即表示server为[a,b,c]
server:
    - 120.168.117.21
    - 120.168.117.22
    - 120.168.117.23
#常量
pi: 3.14   #定义一个数值3.14
hasChild: true  #定义一个boolean值
name: '你好YAML'   #定义一个字符串
&lt;/code&gt;&lt;/pre&gt;

&lt;p&gt;基本格式要求&lt;/p&gt;

&lt;p&gt;1，YAML大小写敏感；&lt;/p&gt;

&lt;p&gt;2，使用缩进代表层级关系；&lt;/p&gt;

&lt;p&gt;3，缩进只能使用空格，不能使用TAB，不要求空格个数，只需要相同层级左对齐（一般2个或4个空格）&lt;/p&gt;

&lt;h2 id=&quot;6参考文章&quot;&gt;6.参考文章&lt;/h2&gt;

&lt;p&gt;&lt;a href=&quot;https://docs.docker.com/&quot;&gt;docker官方&lt;/a&gt;&lt;/p&gt;

&lt;p&gt;&lt;a href=&quot;https://docs.docker.com/compose/&quot;&gt;docker-composer官方&lt;/a&gt;&lt;/p&gt;

&lt;p&gt;&lt;a href=&quot;https://docs.docker.com/compose/compose-file/&quot;&gt;docker-composer文件配置参数&lt;/a&gt;&lt;/p&gt;</content><author><name></name></author><category term="[&quot;云计算&quot;]" /><category term="docker" /><category term="docker-compose" /><summary type="html">0.docker-composer安装</summary></entry><entry><title type="html">玩转docker基础篇</title><link href="/%E4%BA%91%E8%AE%A1%E7%AE%97/2019/07/15/docker%E5%9F%BA%E7%A1%80%E7%9F%A5%E8%AF%86.html" rel="alternate" type="text/html" title="玩转docker基础篇" /><published>2019-07-15T00:00:00+00:00</published><updated>2019-07-15T00:00:00+00:00</updated><id>/%E4%BA%91%E8%AE%A1%E7%AE%97/2019/07/15/docker%E5%9F%BA%E7%A1%80%E7%9F%A5%E8%AF%86</id><content type="html" xml:base="/%E4%BA%91%E8%AE%A1%E7%AE%97/2019/07/15/docker%E5%9F%BA%E7%A1%80%E7%9F%A5%E8%AF%86.html">&lt;h2 id=&quot;0docker&quot;&gt;0.docker&lt;/h2&gt;

&lt;p&gt;Docker 分为 CE 和 EE 两大版本。CE 即社区版（免费，支持周期 7 个月），EE 即企业版，强调安全，付费使用，支持周期 24 个月。&lt;/p&gt;

&lt;p&gt;Docker CE 分为 stable, test, 和 nightly 三个更新频道。每六个月发布一个 stable 版本 (18.09, 19.03, 19.09…)。&lt;/p&gt;

&lt;ul&gt;
  &lt;li&gt;
    &lt;p&gt;安装&lt;/p&gt;

    &lt;p&gt;官方网站上有各种环境下的 &lt;a href=&quot;https://docs.docker.com/install/linux/docker-ce/centos/&quot;&gt;安装指南&lt;/a&gt;&lt;/p&gt;
  &lt;/li&gt;
  &lt;li&gt;
    &lt;p&gt;与传统虚拟机的区别&lt;/p&gt;

    &lt;p&gt;&lt;img src=&quot;img/专业图片区别.png&quot; alt=&quot;专业图片区别&quot; title=&quot;专业图片区别&quot; /&gt;&lt;/p&gt;

    &lt;p&gt;&lt;img src=&quot;img/看得懂的图.png&quot; alt=&quot;看得懂的图&quot; title=&quot;看得懂的图&quot; /&gt;&lt;/p&gt;

    &lt;p&gt;&lt;img src=&quot;img/docker与虚拟机差异.png&quot; alt=&quot;docker与虚拟机差异&quot; title=&quot;docker与虚拟机差异&quot; /&gt;&lt;/p&gt;
  &lt;/li&gt;
&lt;/ul&gt;

&lt;h2 id=&quot;1基本概念&quot;&gt;1.基本概念&lt;/h2&gt;

&lt;h3 id=&quot;10-集装箱对容器技术docker的启发&quot;&gt;1.0 集装箱对容器技术(Docker)的启发&lt;/h3&gt;

&lt;p&gt;&lt;img src=&quot;img/logo.png&quot; alt=&quot;docker logo&quot; title=&quot;docker logo&quot; /&gt;&lt;/p&gt;

&lt;p&gt;&lt;img src=&quot;img/docker与集装箱.png&quot; alt=&quot;docker与集装箱&quot; title=&quot;docker与集装箱&quot; /&gt;&lt;/p&gt;

&lt;h3 id=&quot;11-镜像&quot;&gt;1.1 镜像&lt;/h3&gt;

&lt;p&gt;对于 Linux 而言，内核启动后，会挂载 root 文件系统为其提供用户空间支持。而 Docker 镜像（Image），就相当于是一个 root 文件系统。比如官方镜像 ubuntu:18.04 就包含了完整的一套 Ubuntu 18.04 最小系统的 root 文件系统。&lt;/p&gt;

&lt;p&gt;镜像构建时，会一层层构建，前一层是后一层的基础。每一层构建完就不会再发生改变，后一层上的任何改变只发生在自己这一层。比如，删除前一层文件的操作，实际不是真的删除前一层的文件，而是仅在当前层标记为该文件已删除。在最终容器运行的时候，虽然不会看到这个文件，但是实际上该文件会一直跟随镜像。因此，在构建镜像的时候，需要额外小心，每一层尽量只包含该层需要添加的东西，任何额外的东西应该在该层构建结束前清理掉。&lt;/p&gt;

&lt;h3 id=&quot;12容器&quot;&gt;1.2容器&lt;/h3&gt;

&lt;p&gt;镜像（Image）和容器（Container）的关系，就像是面向对象程序设计中的 类 和 实例 一样，镜像是静态的定义，容器是镜像运行时的实体
容器的实质是进程，但与直接在宿主执行的进程不同，容器进程运行于属于自己的独立的 命名空间&lt;/p&gt;

&lt;p&gt;每一个容器运行时，是以镜像为基础层，在其上创建一个当前容器的存储层，我们可以称这个为容器运行时读写而准备的存储层为 容器存储层。
容器不应该向其存储层内写入任何数据，容器存储层要保持无状态化。所有的文件写入操作，都应该使用 数据卷（Volume）、或者绑定宿主目录，在这些位置的读写会跳过容器存储层，直接对宿主（或网络存储）发生读写，其性能和稳定性更高&lt;/p&gt;

&lt;p&gt;数据卷的生存周期独立于容器，容器消亡，数据卷不会消亡。因此，使用数据卷后，容器删除或者重新运行之后，数据却不会丢失。&lt;/p&gt;

&lt;h3 id=&quot;13仓库&quot;&gt;1.3仓库&lt;/h3&gt;

&lt;p&gt;一个 Docker Registry 中可以包含多个 仓库（Repository）；每个仓库可以包含多个 标签（Tag）；每个标签对应一个镜像。&lt;/p&gt;

&lt;p&gt;通常，一个仓库会包含同一个软件不同版本的镜像，而标签就常用于对应该软件的各个版本。我们可以通过 &lt;仓库名&gt;:&lt;标签&gt; 的格式来指定具体是这个软件哪个版本的镜像。如果不给出标签，将以 latest 作为默认标签。&lt;/标签&gt;&lt;/仓库名&gt;&lt;/p&gt;

&lt;p&gt;以 Ubuntu 镜像 为例，ubuntu 是仓库的名字，其内包含有不同的版本标签，如，16.04, 18.04。我们可以通过 ubuntu:16.04，或者 ubuntu:18.04 来具体指定所需哪个版本的镜像。如果忽略了标签，比如 ubuntu，那将视为 ubuntu:latest。&lt;/p&gt;

&lt;p&gt;仓库名经常以 两段式路径 形式出现，比如 jwilder/nginx-proxy，前者往往意味着 Docker Registry 多用户环境下的用户名，后者则往往是对应的软件名。但这并非绝对，取决于所使用的具体 Docker Registry 的软件或服务。&lt;/p&gt;

&lt;p&gt;Docker Registry 公开服务&lt;/p&gt;

&lt;p&gt;私有 Docker Registry&lt;/p&gt;

&lt;h2 id=&quot;2docker-核心模块&quot;&gt;2.docker 核心模块&lt;/h2&gt;

&lt;p&gt;&lt;img src=&quot;img/docker核心模块.png&quot; alt=&quot;docker核心模块&quot; title=&quot;docker核心模块&quot; /&gt;&lt;/p&gt;

&lt;p&gt;核心功能简答介绍:&lt;/p&gt;

&lt;p&gt;Docker是C/S模式&lt;/p&gt;

&lt;p&gt;images：docker镜像，是Docker run的原材料&lt;/p&gt;

&lt;p&gt;container: Docker运行的内容，是独立存在的&lt;/p&gt;

&lt;p&gt;data volumes: 通过数据挂载的方式，实现数据共享&lt;/p&gt;

&lt;p&gt;network：用户容器与外部、容器之间的通信，常用的方法有端口映射、link等&lt;/p&gt;

&lt;h2 id=&quot;3docker-使用流程&quot;&gt;3.docker 使用流程&lt;/h2&gt;

&lt;p&gt;&lt;img src=&quot;img/docker流程.png&quot; alt=&quot;docker流程&quot; title=&quot;docker流程&quot; /&gt;&lt;/p&gt;

&lt;h2 id=&quot;4基本命令的使用技巧&quot;&gt;4.基本命令的使用技巧&lt;/h2&gt;

&lt;p&gt;docker 参数 –help 可以查看调用的参数的格式&lt;/p&gt;

&lt;pre&gt;&lt;code class=&quot;language-shell&quot;&gt;##容器相关操作的命令

docker container --help

Commands:
  attach      Attach local standard input, output, and error streams to a running container
  commit      Create a new image from a container's changes
  cp          Copy files/folders between a container and the local filesystem
  create      Create a new container
  diff        Inspect changes to files or directories on a container's filesystem
  exec        Run a command in a running container
  export      Export a container's filesystem as a tar archive
  inspect     Display detailed information on one or more containers
  kill        Kill one or more running containers
  logs        Fetch the logs of a container
  ls          List containers
  pause       Pause all processes within one or more containers
  port        List port mappings or a specific mapping for the container
  prune       Remove all stopped containers
  rename      Rename a container
  restart     Restart one or more containers
  rm          Remove one or more containers
  run         Run a command in a new container
  start       Start one or more stopped containers
  stats       Display a live stream of container(s) resource usage statistics
  stop        Stop one or more running containers
  top         Display the running processes of a container
  unpause     Unpause all processes within one or more containers
  update      Update configuration of one or more containers
  wait        Block until one or more containers stop, then print their exit codes

&lt;/code&gt;&lt;/pre&gt;

&lt;h2 id=&quot;5-docker-常用的命令&quot;&gt;5. docker 常用的命令&lt;/h2&gt;

&lt;h3 id=&quot;51-镜像操作&quot;&gt;5.1 镜像操作&lt;/h3&gt;

&lt;ul&gt;
  &lt;li&gt;设置镜像[可选]&lt;/li&gt;
&lt;/ul&gt;

&lt;pre&gt;&lt;code class=&quot;language-shell&quot;&gt;##配置大陆镜像

vim /etc/docker/daemon.json

##修改后如下：

{
    &quot;registry-mirrors&quot;: [&quot;https://registry.docker-cn.com&quot;],
    &quot;live-restore&quot;: true
}

##修改后重启docker

systemctl restart docker.service

##向官方仓库search镜像

docker search centos

&lt;/code&gt;&lt;/pre&gt;

&lt;p&gt;设置效果如下图:&lt;/p&gt;

&lt;p&gt;&lt;img src=&quot;img/搜索.png&quot; alt=&quot;docker 搜索&quot; title=&quot;docker 搜索&quot; /&gt;&lt;/p&gt;

&lt;ul&gt;
  &lt;li&gt;下载镜像&lt;/li&gt;
&lt;/ul&gt;

&lt;pre&gt;&lt;code class=&quot;language-shell&quot;&gt;docker pull  python:3
&lt;/code&gt;&lt;/pre&gt;

&lt;ul&gt;
  &lt;li&gt;查看镜像&lt;/li&gt;
&lt;/ul&gt;

&lt;pre&gt;&lt;code class=&quot;language-shell&quot;&gt;docker images python:3
&lt;/code&gt;&lt;/pre&gt;

&lt;ul&gt;
  &lt;li&gt;保存正在运行的镜像&lt;/li&gt;
&lt;/ul&gt;

&lt;pre&gt;&lt;code class=&quot;language-shell&quot;&gt;[root@localhost v]# docker run -it python:3 bash
root@34539696b356:/# ls


docker commit  -a &quot;xxx&quot;  -m &quot;xxx&quot; 34539696b356 my/test
&lt;/code&gt;&lt;/pre&gt;

&lt;ul&gt;
  &lt;li&gt;导出镜像&lt;/li&gt;
&lt;/ul&gt;

&lt;pre&gt;&lt;code class=&quot;language-shell&quot;&gt;docker save -o m.tar.gz mysql:5.7.14
&lt;/code&gt;&lt;/pre&gt;

&lt;ul&gt;
  &lt;li&gt;导入镜像&lt;/li&gt;
&lt;/ul&gt;

&lt;pre&gt;&lt;code class=&quot;language-shell&quot;&gt;docker load -i m.tar.gz

##或者
docker load &amp;lt; m.tar.gz
&lt;/code&gt;&lt;/pre&gt;

&lt;ul&gt;
  &lt;li&gt;删除镜像&lt;/li&gt;
&lt;/ul&gt;

&lt;pre&gt;&lt;code class=&quot;language-shell&quot;&gt;docker rmi -f 0f2d67697e38【镜像的ID】
&lt;/code&gt;&lt;/pre&gt;

&lt;h3 id=&quot;52-容器的操作&quot;&gt;5.2 容器的操作&lt;/h3&gt;

&lt;ul&gt;
  &lt;li&gt;运行容器&lt;/li&gt;
&lt;/ul&gt;

&lt;pre&gt;&lt;code class=&quot;language-shell&quot;&gt;docker container run -it -p27019:27017 --name ngo  mongo:3.4.14

##后台运行
docker container run -it -d -p27019:27017 --name ngo  mongo:3.4.14
&lt;/code&gt;&lt;/pre&gt;

&lt;ul&gt;
  &lt;li&gt;查看容器&lt;/li&gt;
&lt;/ul&gt;

&lt;pre&gt;&lt;code class=&quot;language-shell&quot;&gt;docker container inspect  ad2ec10fa879【容器的ID】
&lt;/code&gt;&lt;/pre&gt;

&lt;ul&gt;
  &lt;li&gt;进入容器&lt;/li&gt;
&lt;/ul&gt;

&lt;pre&gt;&lt;code class=&quot;language-shell&quot;&gt;docker container exec -it  0f2d67697e38【容器的ID】 bash
&lt;/code&gt;&lt;/pre&gt;

&lt;ul&gt;
  &lt;li&gt;删除容器&lt;/li&gt;
&lt;/ul&gt;

&lt;pre&gt;&lt;code class=&quot;language-shell&quot;&gt;##普通删除容器
docker container rm  0f2d67697e38【容器的ID】

##强制删除容器
docker container rm -f 0f2d67697e38【容器的ID】
&lt;/code&gt;&lt;/pre&gt;

&lt;ul&gt;
  &lt;li&gt;导出容器&lt;/li&gt;
&lt;/ul&gt;

&lt;pre&gt;&lt;code class=&quot;language-shell&quot;&gt;##命令格式
 docker container export container_id | gzip &amp;gt; image_name.tar.gz

##运行5c7472359a7b容器的ID
docker container export 5c7472359a7b |gzip &amp;gt;t.tar.gz

&lt;/code&gt;&lt;/pre&gt;

&lt;ul&gt;
  &lt;li&gt;导入容器&lt;/li&gt;
&lt;/ul&gt;

&lt;pre&gt;&lt;code class=&quot;language-shell&quot;&gt;zcat t.tar.gz |  docker container import - image_name

##查看镜像是否导入成功
docker images 0f2d67697e38【镜像的ID】
&lt;/code&gt;&lt;/pre&gt;

&lt;h2 id=&quot;6关注点&quot;&gt;6.关注点&lt;/h2&gt;

&lt;ul&gt;
  &lt;li&gt;常用参数&lt;/li&gt;
&lt;/ul&gt;

&lt;p&gt;-it 常一起使用,以一个新的伪终端开启一个容易,使用后就能新开一个容器中的终端,相当于新开了一个虚拟机,接着在终端中的命令就是在容器中执行命令&lt;/p&gt;

&lt;p&gt;–rm 删除容器&lt;/p&gt;

&lt;p&gt;-f 强制操作&lt;/p&gt;

&lt;ul&gt;
  &lt;li&gt;端口&lt;/li&gt;
&lt;/ul&gt;

&lt;p&gt;端口开放通过启动参数 -p 来指定。
-p 宿主机端口:容器端口。
一般来说，为了方便管理，会设置宿主机端口和容器端口保持一致.
比如web端口：-p 80:80&lt;/p&gt;

&lt;ul&gt;
  &lt;li&gt;挂载&lt;/li&gt;
&lt;/ul&gt;

&lt;p&gt;数据卷通过启动参数 -v 来指定
-v后面的映射关系是”宿主机文件/目录:容器里对应的文件/目录”，其中，宿主机上的文件/目录是要提前存在的，容器里对应的文件/目录会自动创建。&lt;/p&gt;

&lt;ul&gt;
  &lt;li&gt;查看日志&lt;/li&gt;
&lt;/ul&gt;

&lt;pre&gt;&lt;code class=&quot;language-shell&quot;&gt;docker logs ad2ec10fa879【容器的ID】
&lt;/code&gt;&lt;/pre&gt;

&lt;ul&gt;
  &lt;li&gt;容器于宿主拷贝文件&lt;/li&gt;
&lt;/ul&gt;

&lt;pre&gt;&lt;code class=&quot;language-shell&quot;&gt;docker cp [OPTIONS] CONTAINER:SRC_PATH DEST_PATH|-
docker cp [OPTIONS] SRC_PATH|- CONTAINER:DEST_PATH
# 本地文件上传到对应容器的目录
docker cp local.sh 【容器的ID】:【容器的路径】
&lt;/code&gt;&lt;/pre&gt;

&lt;ul&gt;
  &lt;li&gt;容器之间是如何通信的&lt;/li&gt;
&lt;/ul&gt;

&lt;p&gt;–link 参数 底层是从过hosts文件来配置相对的IP&lt;/p&gt;

&lt;pre&gt;&lt;code class=&quot;language-shell&quot;&gt;
##开启mysql服务
docker container run --name=mysql_server -d -P kongxx/mysql_server

##连接mysql_server的容器1
docker container run --name=mysql_client1 --link=mysql_server:db -t -i kongxx/mysql_client /usr/bin/mysql -h db -u root -pletmein

##连接mysql_server的容器2
docker container run --name=mysql_client2 --link=mysql_server:db -t -i kongxx/mysql_client /usr/bin/mysql -h db -u root -pletmein

&lt;/code&gt;&lt;/pre&gt;

&lt;p&gt;–link=mysql_server:db 其实是在/etc/hosts文件配置
mysql_server的IP db&lt;/p&gt;

&lt;ul&gt;
  &lt;li&gt;查看容器的进程&lt;/li&gt;
&lt;/ul&gt;

&lt;pre&gt;&lt;code class=&quot;language-shell&quot;&gt;docker ps [-a]
&lt;/code&gt;&lt;/pre&gt;

&lt;ul&gt;
  &lt;li&gt;限制内存&lt;/li&gt;
&lt;/ul&gt;

&lt;p&gt;限制容器可以使用的最大内存为 300M,并且 swap 空间使用不受限制的参数如下：&lt;/p&gt;

&lt;p&gt;-m 300M –memory-swap -1&lt;/p&gt;

&lt;p&gt;强调一下 –memory-swap 是必须要与 –memory 一起使用的。&lt;/p&gt;

&lt;p&gt;正常情况下， –memory-swap 的值包含容器可用内存和可用 swap。所以 –memory=”300m” –memory-swap=”1g” 的含义为：
容器可以使用 300M 的物理内存，并且可以使用 700M(1G -330M) 的 swap。–memory-swap 居然是容器可以使用的物理内存和可以使用的 swap 之和！&lt;/p&gt;

&lt;p&gt;把 –memory-swap 设置为 0 和不设置是一样的，此时如果设置了 –memory，容器可以使用的 swap 大小为 –memory 值的两倍。&lt;/p&gt;

&lt;ul&gt;
  &lt;li&gt;绑定CPU资源&lt;/li&gt;
&lt;/ul&gt;

&lt;p&gt;–cpus=2 表示容器最多可以使用主机上两个 CPU
–cpuset-cpus=”1,3”一次指定多个 CPU
–cpu-shares 选项用来设置 CPU 权重，它的默认值为 1024。我们可以把它设置为 2 表示很低的权重，但是设置为 0 表示使用默认值 1024&lt;/p&gt;

&lt;ul&gt;
  &lt;li&gt;查看容器占用资源&lt;/li&gt;
&lt;/ul&gt;

&lt;pre&gt;&lt;code class=&quot;language-shell&quot;&gt;docker stats

##只返回当前的状态
docker stats --no-stream

##只输出指定的容器
docker stats --no-stream ad2ec10fa879【容器ID】
&lt;/code&gt;&lt;/pre&gt;

&lt;h2 id=&quot;7出现的问题&quot;&gt;7.出现的问题&lt;/h2&gt;

&lt;p&gt;Q:如何去掉每次sudo运行docker命令?
A:需要添加组&lt;/p&gt;

&lt;pre&gt;&lt;code class=&quot;language-shell&quot;&gt;# Add the docker group if it doesn't already exist.
$ sudo groupadd docker
#改完后需要重新登陆用户
$ sudo gpasswd -a ${USER} docker
&lt;/code&gt;&lt;/pre&gt;

&lt;p&gt;Q:为什么运行docker容器会失败呢？
A:一般有两个方面去判断：&lt;/p&gt;

&lt;p&gt;1.docker容器没有实例进程启动。&lt;/p&gt;

&lt;p&gt;2.docker容器内存溢出的情况&lt;/p&gt;

&lt;h2 id=&quot;8参考文章&quot;&gt;8.参考文章&lt;/h2&gt;

&lt;p&gt;&lt;a href=&quot;https://docs.docker.com/&quot;&gt;docker官方&lt;/a&gt;&lt;/p&gt;

&lt;p&gt;&lt;a href=&quot;https://hub.docker.com/&quot;&gt;docker仓库官方&lt;/a&gt;&lt;/p&gt;

&lt;p&gt;&lt;a href=&quot;https://yeasy.gitbooks.io/docker_practice/introduction/why.html&quot;&gt;Docker技术入门与实战&lt;/a&gt;&lt;/p&gt;

&lt;p&gt;&lt;a href=&quot;https://blog.csdn.net/gaoyingju/article/details/49616295&quot;&gt;为什么容器技术将主宰世界&lt;/a&gt;&lt;/p&gt;</content><author><name></name></author><category term="[&quot;云计算&quot;]" /><category term="docker" /><category term="docker-compose" /><summary type="html">0.docker</summary></entry></feed>