flytam / blog

blog | 公众号 Geek技术前线
https://blog.flytam.vip
25 stars 2 forks source link

打造Github Issue到Hexo部署自动工作流 #27

Open flytam opened 2 years ago

flytam commented 2 years ago

前言

平时不少同学都有写博客的习惯,这里介绍一种通过Github Issue写博客并自动部署hexo到Github Page的工作流。本文主要介绍

  1. 什么是Github action以及它的基本用法
  2. 如何开发并发布一个Github action
  3. 如何打造Github issue写博客并自动部署hexo到Github Page的工作流

什么是Github action

GitHub action 是一个持续集成和持续交付平台,可以自动化构建、测试和部署。例如可以创建工作流来构建和测试仓库的每个pr,或将合并pr部署到生产环境

这张图从左到右分别是:

  1. Event: 触发action的事件。代表仓库中的某个触发工作流执行的行为
  2. Workflow: 事件发生时运行的工作流
  3. Job: 一组按顺序运行以完成任务的Step。每个Job都在自己的Runner上运行
  4. Step: 一个Step可以是一个shell脚本或一个action。它将在为该Step所属的Job分配的runner上运行
  5. Runner: Runner是运行作业中的步骤的虚拟机

更多详情可见github doc

我们在日常的CI/CD过程中,很多流程都是重复并且类似的和完全可以共享,这些能共享的能力就是一个个action。多个action集成在一起就组成了一个工作流。Github官方也提供了一个官方Github action市场来让开发者们去发布和可以使用别人的action

基本上日常的使用场景都能成action市场上找到。本文我们后续打造的工作流我们也只需要开发一个从指定issue链接生成hexo markdown文件的action即可,其它流程都使用市场上现成的action

使用Github action也是非常简单。在工作流中使用uses去使用action,并通过with传入相关action参数即可。例如我们使用下文开发的指定issue链接生成hexo markdown文件的action。使用效果如下。传递几个参数

开发并发布一个Github action

这里我们使用Node.Js去开发指定issue链接生成hexo markdown文件的action。一个action本质上就是一个脚本读取工作流中的一些参数然后执行相关操作再输出结果

项目基本结构

使用TypeScript进行开发,初始化相关配置后的基本的目录结构如下

action.yml

每一个Github action都需要配置一个action.yml配置文件,说明一些和该action有关的信息。这里我们新建的yml文件如下

name: Github issus to Hexo action
description: Generate hexo article from github issue
branding:
  icon: arrow-up-circle
  color: gray-dark
inputs:
  issue_url:
    description: The blog issue link. Like https://github.com/flytam/blog/issues
    required: true
  output:
    description: The directory of the hexo source. Default `process.cwd()`
    required: false
  replace:
    description: Whether to replace the contents of the original directory. Default `false`
    required: false
runs:
  using: node16
  main: dist/index.js
  1. 我们声明了3个入参,其中issue_url是必选参数,outputreplace是可选参数
  2. 通过runs.usingruns.main声明了我们脚本文件的执行环境为node16、程序的入口为dist/index.js
  3. branding。action的图标和颜色,这个是必须的 不然是不能发布到marketplace

逻辑开发

这里我们需要对入参进行读取,这里使用官方提供的@action/core

  1. 参数读取
    pnpm add @action/core

    通过core.getInput即可对action的入参进行读取了

import * as core from '@action/core'

const output = core.getInput('output') || 'source/_posts'
const issue_url = core.getInput('issue_url')
const replace = core.getInput('replace')
  1. 生成hexo文件 这里使用我之前开发的csdnsynchexo

    csdnsynchexo是一款支持 csdn/博客园/掘金/segmentfault/腾讯云加社区/github 等平台一键迁移 hexo的工具,支持命令行调用和api调用

  2. 完整代码

完整仓库详见

import * as core from '@action/core'
import { run } from 'csdnsynchexo'
import { removeSync } from 'fs-extra'

const output = core.getInput('output') || 'source/_posts'
const issue_url = core.getInput('issue_url')
const replace = core.getInput('replace')
const reg = /\/(\w+)\/(\w+)\/issues(\/?)$/
const user = issue_url.match(reg)?.[1] || ''
const repo = issue_url.match(reg)?.[2] || ''

;(async() => {
  try {
    if (replace)
      removeSync(output)

    await run({
      type: 'github',
      userId: user,
      repo,
      output,
    }, false)
  }
  catch (e) {
    core.setFailed(e as Error)
  }
})()

这样,我们的action执行完后,就会将hexo的文章产物输出来,后面的工作流就可以使用文章产物进行下一步操作。我们就完成了这个action的逻辑开发了

打包

由于Github action是不会去安装我们的依赖node_modules。这里需要使用ncc去打包源码和依赖

ncc是一个用于将 Node.js 模块及其所有依赖项编译到单个文件中的cli。并自带TypeScript支持

pnpm add -D @vercel/ncc

新增一个build命令用于打包"build": "rm -rf dist && ncc build src/index.ts -o dist -s",

这样我们将代码打包输出到dist/index.js中去

发布到Github action市场

  1. 打tag推送到仓库
  2. release中选择tag进行发布

  1. 然后就能在marketplace中搜到我们的action了

打造Github Issue写博客并自动部署hexo到Github Page的工作流

这里我们使用两个仓库。仓库名字按实际情况修改即可

  1. 私有仓库flytam/blog-source用于存放hexo源文件
  2. 公开仓库flytam/blog。issue负责编写博客,gh-pages分支用于存放hexo输出的页面产物并部署在user.github.io/blog

blog-source仓库配置

如果此前已经有现成的hexo源仓库可以跳过这一步

  1. Github新建blog-source仓库并设置为私有仓库(当然设置为公开也可以)

  1. 本地初始化hexo源仓库
    npx hexo-cli init blog-source
  2. 修改hexo配置文件 由于我们的仓库后面需要部署的路径是https://flytam.github.io/blog。因此需要将_config.yml的url修改成我们部署的路径

  1. 提交源仓库
    git init
    echo "node_modules/" >> .gitignore
    git add .
    git commit -m "feat: init"
    git remote add origin git@github.com:flytam/blog-source.git
    git branch -M main
    git push -u origin main

blog仓库配置

  1. 生成personal access tokenToken页面中,点击New personal access token,输入名字和有效期并选择Scope->repo勾选,并复制生成的token

blogblog-source仓库下,分别Settings->New repository secret -> 输入对应的name和value粘贴token并保存 。这个token用于后续action对仓库进行拉取和推送操作

  1. 编写workflow 我们会用到如下action

blog仓库的根目录下新建.github/workflows/deploy.yml文件。填入以下内容

这个工作流的流程是:

  1. issue新增或者修改时触发工作流
  2. 拉取hexo源文件
  3. 将issue生成hexo源文件并输出到hexo源文件blog-source仓库的文章目录下并提交到blog-source仓库
name: 部署博客

env:
  # hexo源文件仓库
  BLOG_SOURCE: flytam/blog-source
  # issue链接
  ISSUE_URL: https://github.com/flytam/blog/issues
  # blog部署的页面
  BLOG: flytam/blog
  # ${{ github.event.issue.user.login }}

on:
  issues:
    types: [opened, edited]
jobs:
  build:
    runs-on: ubuntu-latest
    # 仓库作者才才能触发
    if: ${{ github.actor == github.repository_owner }}
    steps:
      - name: 拉取hexo源文件
        uses: action/checkout@v3
        with:
          persist-credentials: 'false'
          repository: ${{ env.BLOG_SOURCE }}
          ref: 'main'
          token: ${{ secrets.token }}
      - name: issue生成 hexo文章
        uses: flytam/github-issue-to-hexo@v1.0.3
        with:
          issue_url: ${{ env.ISSUE_URL }}
          output: 'source/_posts'
          replace: true
      - name: commit hexo源文件
        run: |
          echo $(date) > update.md
          git add .
          git config user.name "issue-to-hexo bot"
          git config user.email "test@github.com"
          git commit -m "Add a post"
      - name: 推送hexo源文件
        uses: ad-m/github-push-action@master
        with:
          github_token: ${{ secrets.token }}
          repository: ${{ env.BLOG_SOURCE }}

然后配置blog的github page配置。Settings-> Page->Branch: gh-pages。将blog仓库的gh-pages分支作为Github Page进行发布

blog-source仓库的根目录下新建.github/workflows/deploy.yml文件。填入以下内容 这个工作流的流程是:

  1. blog-source仓库main分支有push操作时触发
  2. 构建hexo静态页面并部署到公开仓库bloggh-pages分支
name: 部署hexo静态页面

env:
  # blog部署的页面
  BLOG: flytam/blog

on:
  push:
    branches:    
      - 'main'
jobs:
  build:
    runs-on: ubuntu-latest
    steps:
      - name: 拉取hexo源文件
        uses: action/checkout@v3
        with:
          persist-credentials: 'false'
          ref: 'main'
          token: ${{ secrets.token }}
      - name: 部署hexo
        uses: theme-keep/hexo-deploy-github-pages-action@master
        env:
          PUBLISH_REPOSITORY: ${{ env.BLOG }}
          BRANCH: gh-pages
          PUBLISH_DIR: ./public
          PERSONAL_TOKEN: ${{ secrets.token }} 
  1. 验证

我们修改blog下某个issue并提交,可见我们的部署已经成功了。hexo源文件更新+部署页面https://blog.flytam.vip/已更新。

image

如果遇到了某些图片有防盗链显示不出来,在hexo的header中添加<meta name="referrer" content="no-referrer" />头即可

总结

到这里,我们就完成了整个自动化部署issue到hexo博客的流程并学习到了如何开发、使用Github action。如果你觉得本文不错的话,欢迎点赞、收藏、转发、关注

参考

How to Build Your First JavaScript GitHub Action

Building GitHub Action to publish Hexo post from GitHub Issue

lopins commented 2 months ago

为什么不直接也一并合到一个仓库(blog-source)的不同分支下呢

flytam commented 2 months ago

为什么不直接也一并合到一个仓库(blog-source)的不同分支下呢

这里希望hexo部署文件需要是public仓库,blog-source是private仓库。如果blog-source不需要是private仓库的话用分支区分也可以