Travis CI Jekyll Docker 自动化部署博客到云服务器

本篇文章讲解了如何利用云Travis CI Jekyll Docker 自动化部署博客到云服务器,从而解决Github pages百度爬虫禁用的问题。

本文章不包含Github pages 如何配置,相信Google上有类似的文章就不说明了

本人博客原文:https://elfgzp.cn/2018/10/02/travis-jekyll-docker.html

Jekyll Docker 容器构建

在开始Jekyll容器构建之前,先说一下我用的是一款叫HardCandy-Jekyll的主题,作者是xukimseven

这款主题非常简洁清新,而且对移动端也有适配,在这里也感谢这位作者开源这个主题。

在依照作者提供的部署说明在自己的仓库部署好该主题后,在仓库下先新建一个Dockerfile文件用于容器构建,Dockerfile文件内容如下。


FROM ruby:latest

RUN gem sources --add https://gems.ruby-china.com/ --remove https://rubygems.org/

RUN gem install jekyll bundler

COPY . /blog/

RUN bundle config mirror.https://rubygems.org https://gems.ruby-china.com

RUN cd blog \

        && bundler install

WORKDIR /blog

CMD bundle exec jekyll serve --host 0.0.0.0

文件内容主要是使用ruby容器为基础,用gem命令安装jekyllbundler,由于国内使用国外的gem源比较慢,所以我将源替换为gems.ruby-china.com

Centos 安装Docker CE

在安装前确保linux内核版本是3.10以上并且是64位的centos版本。如果不能满足这个前提,建议看官的教程。

  1. 升级yum

sudo yum update

  1. 安装Docker CE

sudo yum -y install docker

在安装完docker后,还需要配置免sudo使用docker命令,步骤如下:


sudo groupadd docker

sudo gpasswd -a gzp docker # gzp为我的用户名

sudo service docker restart

newgrp - docker

运行完后重新打开ssh会话。

使用Dockerfile构建容器并运行Jekyll

  1. 使用Dockerfile构建容器

docker build -t elfgzp.github.io . # elfgzp.github.io为我的容器名称

运行结果如下:


Sending build context to Docker daemon  203.5MB

Step 1/8 : FROM ruby:latest

---> eb8759981348

Step 2/8 : RUN gem sources --add https://gems.ruby-china.com/ --remove https://rubygems.org/

---> Using cache

---> 9825055ad6ed

Step 3/8 : RUN gem install jekyll bundler

---> Using cache

---> 1f6bad52f4e4

Step 4/8 : COPY . /blog/

---> e252fdb8d16a

Step 5/8 : RUN bundle config mirror.https://rubygems.org https://gems.ruby-china.com

---> Running in aeb0a7c21689

Removing intermediate container aeb0a7c21689

---> 2a3944c701f0

Step 6/8 : RUN cd blog          && bundler install

---> Running in 494cbc520804

Fetching gem metadata from https://gems.ruby-china.com/...........

Fetching public_suffix 3.0.2

Installing public_suffix 3.0.2

Using addressable 2.5.2

Using bundler 1.16.5

Using colorator 1.1.0

Using concurrent-ruby 1.0.5

Using eventmachine 1.2.7

Using http_parser.rb 0.6.0

Using em-websocket 0.5.1

Fetching ffi 1.9.23

Installing ffi 1.9.23 with native extensions

Using forwardable-extended 2.6.0

Using i18n 0.9.5

Using rb-fsevent 0.10.3

Using rb-inotify 0.9.10

Using sass-listen 4.0.0

Fetching sass 3.5.6

Installing sass 3.5.6

Using jekyll-sass-converter 1.5.2

Using ruby_dep 1.5.0

Using listen 3.1.5

Using jekyll-watch 2.0.0

Fetching kramdown 1.16.2

Installing kramdown 1.16.2

Using liquid 4.0.0

Using mercenary 0.3.6

Using pathutil 0.16.1

Fetching rouge 3.1.1

Installing rouge 3.1.1

Using safe_yaml 1.0.4

Fetching jekyll 3.8.1

Installing jekyll 3.8.1

Fetching jekyll-feed 0.9.3

Installing jekyll-feed 0.9.3

Fetching jekyll-seo-tag 2.4.0

Installing jekyll-seo-tag 2.4.0

Fetching minima 2.5.0

Installing minima 2.5.0

Bundle complete! 4 Gemfile dependencies, 29 gems now installed.

Bundled gems are installed into `/usr/local/bundle`

Removing intermediate container 494cbc520804

---> c5cadba1e55e

Step 7/8 : WORKDIR /blog

---> Running in ccff546be8e0

Removing intermediate container ccff546be8e0

---> 70d0f72ed6b1

Step 8/8 : CMD bundle exec jekyll serve --host 0.0.0.0

---> Running in ae3fd7719de5

Removing intermediate container ae3fd7719de5

---> e9973d4dac75

Successfully built e9973d4dac75

Successfully tagged elfgzp.github.io:latest

  1. 构建成功后测试Jekyll是否能够运行

docker run -d -p 4000:4000 elfgzp.github.io

运行后使用docker ps查看容器是否成功运行,或者使用curl http://127.0.0.1:4000访问4000端口。

使用docker-compose来运行容器

由于我们要实现自动化构建和运行容器,这里使用了docker-compose

Centos 安装 docker-compose


sudo yum -y install epel-release

sudo yum -y install python-pip

pip install docker-compose

编写docker-compose.yml

docker-compose.yml的内容非常简单,内容如下:


version: '3'

services:

  blog:

    build:

      context: .

      dockerfile: Dockerfile

    image: elfgzp.github.io:latest # 这里是我镜像的名字

    network_mode: host

使用docker-compose构建并运行容器

这里将更新代码的git pull命令也加进去了,运行代码如下:


git pull origin master && \

docker-compose build && \

docker-compose down && \

docker-compose up -d

运行后会从git仓库拉取最新的代码,并根据Dockerfile进行容器构建,并且重启容器。

到这里我们已经可以直接使用上面的命令拉取最新的代码,并且能够构建运行新的容器,我们只剩下一个自动触发这个命令的工具,这里就需要用到Travis,接下来我会讲解Travis如何使用。

Travis 配置和使用

首先我们需要注册一个Travis账号,并且关联Github

  1. 在创建好账号并关联Github后,需要添加你的Github pages仓库。
WX20181003-002426@2x.png
  1. 在添加好后进入仓库的设置,点击仓库右边的more action,并选择settings
WX20181003-002806@2x.png
  1. 然后需要从Github获取一个DEPLOY_TOKEN,步骤如下:

  2. 进入Github设置页面,点击Developer Settings

    WX20181003-003201@2x.png
  3. 然后在点击Personal access tokens,在点击右上角的Generate new token

WX20181003-003247@2x.png
  1. 输入生成的token名称,然后勾选admin:public_key, admin:repo_hook, repo

    WX20181003-003327@2x.png
  2. 最后将成的DEPLOY_TOKEN填入TravisEnvironment Variables

    WX20181003-021647@2x.png
  3. 最后我们还需要配置Travis远程登陆我们云服务器的ssh key

  4. 首先需要在本地生成id_ras_deployid_ras_deploy.pub

    
    ssh-keygen -t rsa -C "deploy_key" -f ~/.ssh/id_ras_deploy
    
    
  5. 然后将生成的id_ras_deploy.pub复制到云服务器中

    
    ssh-copy-id -i ~/.ssh/id_ras_deploy.pub  gzp@cloud.elfgzp.cn # 我的服务器域名
    
    
  6. 在仓库中创建ssh_config文件,内容如下

    
    Host cloud.elfgzp.cn
    
        HostName cloud.elfgzp.cn
    
        StrictHostKeyChecking no
    
        User gzp
    
        IdentityFile ~/.ssh/id_ras_deploy
    
    
  7. 最后在安装好Travis,运行命令

    
    gem install travis
    
    travis login --auto  # 注意这里登陆会要求输入Github账号密码,账号是邮箱不是用户名
    
    touch .travis.yml
    
    travis encrypt-file ~/.ssh/id_ras_deploy --add
    
    
  8. 会在生成的.travis.yml中看到

    
    before_install:
    
    - openssl aes-256-cbc -K $encrypted_f91baf41390f_key -iv $encrypted_f91baf41390f_iv
    
      -in id_ras_deploy.enc -out ~/.ssh/id_ras_deploy -d
    
    

    注意~/.ssh有可能为~\/.ssh需要去掉\

  9. 我们还需要在after_success中加入成功之后访问云服务器执行响应的操作更新容器并运行

    
    after_success:
    
    - ssh gzp@cloud.elfgzp.cn "cd ~/workspace/elfgzp.github.io && source ~/.zshrc  && git pull origin master
    
      && docker-compose build && docker-compose down && docker-compose up -d"
    
    

    注意这里我使用的是zsh所以配置是~/.zshrc,如果使用的是默认的bash,请使用~/.bashrc

    最后的.travis文件格式如下:

    
    language: ruby
    
    rvm:
    
    - 2.3.3
    
    addons:
    
      ssh_known_hosts: cloud.elfgzp.cn
    
    before_install:
    
    - openssl aes-256-cbc -K $encrypted_f91baf41390f_key -iv $encrypted_f91baf41390f_iv
    
      -in id_ras_deploy.enc -out ~/.ssh/id_ras_deploy -d
    
    - chmod 600 ~/.ssh/id_ras_deploy
    
    - cp ssh_config ~/.ssh/config
    
    script:
    
    - bundle install
    
    - bundle exec jekyll build
    
    after_success:
    
    - ssh gzp@cloud.elfgzp.cn "cd ~/workspace/elfgzp.github.io && source ~/.zshrc  && git pull origin master
    
      && docker-compose build && docker-compose down && docker-compose up -d"
    
    branches:
    
      only:
    
      - master
    
    env:
    
      global:
    
      - NOKOGIRI_USE_SYSTEM_LIBRARIES=true
    
    

    大功告成,最后我们只需要把代码提交到master分支,然后到Travis中查看代码的build结果,如果成功则最后的结果应该与运行docker-compose的结果相同。

总结

在网上其实还有很多通过coding pagesgithub pages同步的方式来解决百度爬虫被禁用的问题,之所以我会选择这种方式,因为这种方式能学到更多使用的技术知识。

希望看完本文章由收获的别忘了给我留言哦。

参考文章

centos安装docker,docker-compose
基于Docker搭建Jekyll并实现自动部署
Jekyll + Travis CI 自动化部署博客
Travis-ci远程部署到服务器
使用travis自动部署hexo日志

https://elfgzp.cn/

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 212,718评论 6 492
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,683评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 158,207评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,755评论 1 284
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,862评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,050评论 1 291
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,136评论 3 410
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,882评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,330评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,651评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,789评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,477评论 4 333
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,135评论 3 317
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,864评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,099评论 1 267
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,598评论 2 362
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,697评论 2 351

推荐阅读更多精彩内容