搜索
首页后端开发Python教程为 ReadmeGenie 实施 CI/CD

Implementing CI/CD for ReadmeGenie

为什么是持续集成/持续交付?

在我们深入了解设置之前,让我们简要介绍一下为什么 CI/CD 如此重要:

  1. 自动化测试:自动运行测试可确保代​​码在每次更改时保持稳定。
  2. 一致性:CI/CD 在整个代码库中强制执行标准(linting、格式化)。
  3. 可靠性:自动检查和测试最大限度地减少人为错误并提高代码可靠性。
  4. 快速反馈:开发人员会收到有关代码质量的即时反馈,以便及早发现问题。

ReadmeGenie 中,我们利用 GitHub Actions 作为我们的 CI/CD 工具。它与 GitHub 存储库顺利集成,并通过 YAML 配置文件提供灵活性和自动化。

ReadmeGenie 的 CI/CD 管道

我们的 CI/CD 管道包括以下自动化步骤:

  1. Linting 和格式检查:我们运行 RuffBlack 以确保代码风格和一致性。
  2. 单元测试:我们使用单元测试来验证代码更改不会破坏现有功能。
  3. 覆盖率分析:我们使用Coverage.py来确保代码在允许提交之前满足我们的覆盖率阈值。
  4. 预提交挂钩:我们添加了挂钩以在推送更改之前强制执行本地质量检查。

GitHub Actions 工作流程概述

CI 工作流程在 .github/workflows/python-app.yml 中定义。以下是工作流程每个部分的详细说明:

1. 触发工作流程

工作流程在主分支的每个推送和拉取请求上运行。这可确保所有代码更改在合并到生产环境之前都经过验证。

name: Python application

on:
  push:
    branches: ["main"]
  pull_request:
    branches: ["main"]

2. 设置Python环境

我们将 GitHub Actions 配置为使用 Python 3.12.x,确保与本地开发环境的一致性。此步骤安装特定的Python版本并准备依赖安装的环境。

jobs:
  build:
    runs-on: ubuntu-latest

    steps:
      - uses: actions/checkout@v4
      - name: Set up Python 3.12.x
        uses: actions/setup-python@v3
        with:
          python-version: "3.12.x"

3. 安装依赖项

下一步是安装项目依赖项。在这里,我们升级pip并安装requirements.txt文件,它将安装其中指定的附加依赖项。

      - name: Install dependencies
        run: |
          python -m pip install --upgrade pip
          pip install flake8 pytest
          if [ -f requirements.txt ]; then pip install -r requirements.txt; fi

4. 运行 Linting 和代码质量检查

Linting 是我们工作流程的重要组成部分,确保代码符合指定的质量标准。我们运行 flake8,并带有标记语法错误、未定义名称和复杂性问题的选项。

name: Python application

on:
  push:
    branches: ["main"]
  pull_request:
    branches: ["main"]

5. 通过覆盖率分析运行测试

对于单元测试,我们使用 pytest 来运行所有测试用例。此外,我们使用覆盖率来跟踪测试了哪些代码行,确保我们的测试套件满足定义的 75% 覆盖率阈值。

以下命令运行测试并生成覆盖率报告,突出显示测试覆盖率中的任何差距。这对于质量保证至关重要,因为未经测试的代码是未来错误的潜在来源。

jobs:
  build:
    runs-on: ubuntu-latest

    steps:
      - uses: actions/checkout@v4
      - name: Set up Python 3.12.x
        uses: actions/setup-python@v3
        with:
          python-version: "3.12.x"

此覆盖率检查通过强制测试覆盖至少 75% 的代码库来确保高标准的代码质量。如果覆盖率低于此阈值,则不允许提交。

集成预提交挂钩

除了 CI/CD 之外,我们还设置了预提交挂钩,以在将任何更改推送到存储库之前在本地强制执行代码质量。这些钩子:

  • 运行 Ruff 进行 linting,运行 Black 进行格式化。
  • 通过在本地运行覆盖率测试来强制执行最低覆盖率阈值。

以下是我们如何将覆盖率检查添加为 .pre-commit-config.yaml 中的预提交挂钩:

      - name: Install dependencies
        run: |
          python -m pip install --upgrade pip
          pip install flake8 pytest
          if [ -f requirements.txt ]; then pip install -r requirements.txt; fi

挑战和经验教训

设置 CI/CD 需要深入了解不同工具(flake8、pytest、coverage)如何在 GitHub Actions 中交互。以下是我们面临的一些挑战以及我们实施的解决方案:

处理不同的本地和远程配置

我们遇到了环境变量冲突的问题,特别是在测试 API 集成和配置处理时。在单元测试中使用 @patch.dict 和其他模拟技术使我们能够有效地模拟环境。

测试覆盖率和阈值

最大的挑战是确保足够的测试覆盖率。在 GitHub Actions 和预提交挂钩中使用带有 --fail-under=75 的coverage.py 有助于执行此标准。

未来的改进

为了使 CI/CD 管道更加强大,我们计划:

  1. 添加部署阶段:测试通过后自动部署到暂存或生产环境。
  2. 自动化代码质量徽章:添加动态徽章以在 README 中显示覆盖率、linting 状态和测试结果。
  3. 扩大覆盖范围要求:随着我们改进测试并覆盖更多边缘情况,提高覆盖范围阈值。

外卖

通过这个项目,我意识到尽早建立强大的测试和 CI/CD 实践的重要性。如果我重新开始,我会专注于从一开始就编写全面的测试,并随着项目的进展逐步扩展和改进它们。这种方法可以防止丢失分支或未经测试的区域,并确保所有新代码顺利集成到覆盖良好的代码库中。

以上是为 ReadmeGenie 实施 CI/CD的详细内容。更多信息请关注PHP中文网其他相关文章!

声明
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn
如何使用Python查找文本文件的ZIPF分布如何使用Python查找文本文件的ZIPF分布Mar 05, 2025 am 09:58 AM

本教程演示如何使用Python处理Zipf定律这一统计概念,并展示Python在处理该定律时读取和排序大型文本文件的效率。 您可能想知道Zipf分布这个术语是什么意思。要理解这个术语,我们首先需要定义Zipf定律。别担心,我会尽量简化说明。 Zipf定律 Zipf定律简单来说就是:在一个大型自然语言语料库中,最频繁出现的词的出现频率大约是第二频繁词的两倍,是第三频繁词的三倍,是第四频繁词的四倍,以此类推。 让我们来看一个例子。如果您查看美国英语的Brown语料库,您会注意到最频繁出现的词是“th

如何在Python中下载文件如何在Python中下载文件Mar 01, 2025 am 10:03 AM

Python 提供多种从互联网下载文件的方法,可以使用 urllib 包或 requests 库通过 HTTP 进行下载。本教程将介绍如何使用这些库通过 Python 从 URL 下载文件。 requests 库 requests 是 Python 中最流行的库之一。它允许发送 HTTP/1.1 请求,无需手动将查询字符串添加到 URL 或对 POST 数据进行表单编码。 requests 库可以执行许多功能,包括: 添加表单数据 添加多部分文件 访问 Python 的响应数据 发出请求 首

我如何使用美丽的汤来解析HTML?我如何使用美丽的汤来解析HTML?Mar 10, 2025 pm 06:54 PM

本文解释了如何使用美丽的汤库来解析html。 它详细介绍了常见方法,例如find(),find_all(),select()和get_text(),以用于数据提取,处理不同的HTML结构和错误以及替代方案(SEL)

python中的图像过滤python中的图像过滤Mar 03, 2025 am 09:44 AM

处理嘈杂的图像是一个常见的问题,尤其是手机或低分辨率摄像头照片。 本教程使用OpenCV探索Python中的图像过滤技术来解决此问题。 图像过滤:功能强大的工具 图像过滤器

如何使用Python使用PDF文档如何使用Python使用PDF文档Mar 02, 2025 am 09:54 AM

PDF 文件因其跨平台兼容性而广受欢迎,内容和布局在不同操作系统、阅读设备和软件上保持一致。然而,与 Python 处理纯文本文件不同,PDF 文件是二进制文件,结构更复杂,包含字体、颜色和图像等元素。 幸运的是,借助 Python 的外部模块,处理 PDF 文件并非难事。本文将使用 PyPDF2 模块演示如何打开 PDF 文件、打印页面和提取文本。关于 PDF 文件的创建和编辑,请参考我的另一篇教程。 准备工作 核心在于使用外部模块 PyPDF2。首先,使用 pip 安装它: pip 是 P

如何在django应用程序中使用redis缓存如何在django应用程序中使用redis缓存Mar 02, 2025 am 10:10 AM

本教程演示了如何利用Redis缓存以提高Python应用程序的性能,特别是在Django框架内。 我们将介绍REDIS安装,Django配置和性能比较,以突出显示BENE

引入自然语言工具包(NLTK)引入自然语言工具包(NLTK)Mar 01, 2025 am 10:05 AM

自然语言处理(NLP)是人类语言的自动或半自动处理。 NLP与语言学密切相关,并与认知科学,心理学,生理学和数学的研究有联系。在计算机科学

如何使用TensorFlow或Pytorch进行深度学习?如何使用TensorFlow或Pytorch进行深度学习?Mar 10, 2025 pm 06:52 PM

本文比较了Tensorflow和Pytorch的深度学习。 它详细介绍了所涉及的步骤:数据准备,模型构建,培训,评估和部署。 框架之间的关键差异,特别是关于计算刻度的

See all articles

热AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智能驱动的应用程序,用于创建逼真的裸体照片

AI Clothes Remover

AI Clothes Remover

用于从照片中去除衣服的在线人工智能工具。

Undress AI Tool

Undress AI Tool

免费脱衣服图片

Clothoff.io

Clothoff.io

AI脱衣机

AI Hentai Generator

AI Hentai Generator

免费生成ai无尽的。

热门文章

R.E.P.O.能量晶体解释及其做什么(黄色晶体)
2 周前By尊渡假赌尊渡假赌尊渡假赌
仓库:如何复兴队友
4 周前By尊渡假赌尊渡假赌尊渡假赌
Hello Kitty Island冒险:如何获得巨型种子
3 周前By尊渡假赌尊渡假赌尊渡假赌

热工具

DVWA

DVWA

Damn Vulnerable Web App (DVWA) 是一个PHP/MySQL的Web应用程序,非常容易受到攻击。它的主要目标是成为安全专业人员在合法环境中测试自己的技能和工具的辅助工具,帮助Web开发人员更好地理解保护Web应用程序的过程,并帮助教师/学生在课堂环境中教授/学习Web应用程序安全。DVWA的目标是通过简单直接的界面练习一些最常见的Web漏洞,难度各不相同。请注意,该软件中

Atom编辑器mac版下载

Atom编辑器mac版下载

最流行的的开源编辑器

Dreamweaver Mac版

Dreamweaver Mac版

视觉化网页开发工具

PhpStorm Mac 版本

PhpStorm Mac 版本

最新(2018.2.1 )专业的PHP集成开发工具

SecLists

SecLists

SecLists是最终安全测试人员的伙伴。它是一个包含各种类型列表的集合,这些列表在安全评估过程中经常使用,都在一个地方。SecLists通过方便地提供安全测试人员可能需要的所有列表,帮助提高安全测试的效率和生产力。列表类型包括用户名、密码、URL、模糊测试有效载荷、敏感数据模式、Web shell等等。测试人员只需将此存储库拉到新的测试机上,他就可以访问到所需的每种类型的列表。