PR時に走るworkflowの数を減らす by y-chan · Pull Request #382 · VOICEVOX/voicevox_core

y-chan · 2023-01-15T08:16:36Z

内容

題の通り
paths条件など、いろいろ絞ってみましたが、間違ってそうであればご指摘お願いします。

関連 Issue

close プルリクやコミット時に回るテストの数を減らしておきたい #373

y-chan · 2023-01-15T08:19:15Z

かなり減ったと思うけど、それでも20個弱走っていて、test.ymlの影響範囲が結構大きいのが問題な気がしているので、これを目的に合わせて細分化したさがあります。
どうですかね...?

Hiroshiba · 2023-01-15T08:58:31Z

細分化、良いと思います！！

qryxip

paths指定はここまで入れた方がよいと思います。

正直cargo-denyとかに留めておいた方がよい気もします。

.github/workflows/build_and_deploy.yml

.github/workflows/cargo-deny.yml

.github/workflows/generate_document.yml

qryxip · 2023-01-15T09:56:18Z

あーでも細分化する前提ならpathsを細かくした方がいいですね。

y-chan · 2023-01-15T14:59:39Z

一旦Suggestionを取り入れて、細分化していきたいと思います...!

Co-authored-by: Ryo Yamashita <qryxip@gmail.com>

y-chan · 2023-01-15T16:04:59Z

条件に合わせてactionsを分割したのと、結合してもよさそうなものを結合してみました。
私の主観で結合したので、まずそうだったら教えてもらえるとありがたいです...!

.github/workflows/build_cpp_example.yml

.github/workflows/test.yml

qryxip · 2023-01-16T00:29:43Z

.github/workflows/test.yml

+      - name: Set up Rust (test only)
+        if: matrix.os != 'windows-2022'
        uses: ./.github/actions/rust-toolchain-from-file
-      - uses: Swatinem/rust-cache@v2
-        with:
-          # cargoのキャッシュが原因でテストが失敗する場合はバージョン部分をカウントアップすること
-          key: "v2-cargo-test-cache-${{ matrix.features }}-${{ matrix.os }}"
-      - name: Run cargo test
-        shell: bash
-        run: cargo test -vv --features ,${{ matrix.features }}
-
-  xtask-generate-c-header:
-    runs-on: ubuntu-latest
-    steps:
-      - uses: actions/checkout@v3
-      - name: Set up Rust
+      - name: Set up Rust (test and lint)
+        if: matrix.os == 'windows-2022'
        uses: ./.github/actions/rust-toolchain-from-file
+        with:
+          components: clippy,rustfmt


matrixに"components"を含む形でもよいのでは?
判定するときは${{ contains(matrix.components, 'clippy') }}とかにして。

確かに、とりあえず移植していたので思いつきませんでした...!
ちょっとやってみますね...!

qryxip · 2023-01-16T00:30:36Z

.github/workflows/test.yml

+      - name: Validate Cargo.lock
+        run: cargo metadata --locked --format-version 1 > /dev/null


別workflowに分離してもよさそうな気がします。cargo-fmtも。

ジョブの数が多いと並行ジョブ数上限に引っかかって、かえってCIにかかる時間が増えそうだったので、まとめられそうなものをまとめてみましたが、分ける方がメリットが大きそうでしょうか...?
いろんな視点からの意見が知りたいです:pray:

ちゃんと追えてないのですが、Actions起動のオーバーヘッドもあるので、対象のpath範囲が同じならまとめちゃった方が早いのかなと思いました！

Co-authored-by: Ryo Yamashita <qryxip@gmail.com>

Hiroshiba · 2023-02-22T15:10:29Z

こちら、そろそろマージできると嬉しいかもです！！

qryxip · 2023-03-03T15:16:07Z

そういえばpathsですが、download_testのようにworkflow file自体を含めないといけない気がします。

Hiroshiba · 2023-05-13T14:29:41Z

@y-chan すみません、こちらどうでしょう･･･！
コアのテストに相当な時間がかかってしまっており。。。

Fix up #486 #487

y-chan · 2023-05-18T03:50:08Z

ぱぱっとやっちゃいたいのですが、ちょっとActionsの書き方を調べるとかで時間がかかりそうなので、 @qryxip さんか @Hiroshiba さん、巻き取っていただけると大変助かります...!いかがでしょうか...?
(Allow edits and access to secrets by maintainersにチェックを入れているので、このPRをそのままいじっていただくのもいいですし、一旦closeして作り直してもらうでも大丈夫です)

巻取りが難しい感じでしたら、私の方で頑張ってみます...!

Hiroshiba · 2023-05-20T05:05:59Z

なるほどです！　興味ありますが、ちょっといろんなタスクがあるので着手がかなり遅れる気がします･･･ 🙇‍♂️

PickledChair · 2023-05-20T13:26:58Z

@y-chan @Hiroshiba こちら、もし良かったら作業引き継ぎますか？（作業を引き継いだことがないので、もしかしたらやり方を質問するかもしれませんが……）

Hiroshiba · 2023-05-20T13:56:22Z

@PickledChair ぜひぜひ！！

PickledChair · 2023-05-20T15:17:54Z

@PickledChair ぜひぜひ！！

@Hiroshiba わかりました！　とりあえず conflict を解消しました。もう少し内容を確認して、どんな作業をすべきか整理したいと思います。

qryxip

とりあえずいくつか気になった点を:

qryxip · 2023-05-21T07:32:01Z

.github/workflows/build_and_deploy.yml

-    branches:
-      - "*"
-      - "**/*"
+    branches: 


Suggested change

branches:

branches:

qryxip · 2023-05-21T07:32:23Z

.github/workflows/test.yml

-    branches:
-      - "*"
-      - "**/*"
+    branches: 


Suggested change

branches:

branches:

qryxip · 2023-05-21T07:37:22Z

.github/workflows/test.yml

build_cpp_example.ymlに分離したbuild-unix-cpp-exampleがまだ残っています。

指摘ありがとうございます！

昨日の時点で気づいてはいて、ローカルでは直しています。あとで他の変更と一緒にまとめてpushするつもりでした

qryxip · 2023-05-21T07:51:04Z

.github/workflows/build_and_deploy.yml

+    paths:
+      - build_util/**


参考: #345

Suggested change

paths:

- build_util/**

paths:

- .github/workflows/build_and_deploy.yml

- build_util/**

qryxip · 2023-05-21T07:52:02Z

.github/workflows/build_cpp_example.yml

+    paths:
+      - crates/voicevox_core**


Suggested change

paths:

- crates/voicevox_core**

paths:

- .github/workflows/build_cpp_example.yml

- crates/voicevox_core**

qryxip · 2023-05-21T07:53:27Z

.github/workflows/cargo-deny.yml

+    paths:
+      - '**/Cargo.*'
+      - deny.toml


Suggested change

paths:

- '**/Cargo.*'

- deny.toml

paths:

- '**/Cargo.*'

- .github/workflows/cargo-deny.yml

- deny.toml

qryxip · 2023-05-21T07:54:12Z

.github/workflows/generate_document.yml

+      - 'Cargo.*'
+      - crates/voicevox_core**


Suggested change

- 'Cargo.*'

- crates/voicevox_core**

- 'Cargo.*'

- .github/workflows/generate_document.yml

- crates/voicevox_core**

PickledChair · 2023-05-21T08:01:12Z

@qryxip いくつかのコメントありがとうございます！　参考にさせていただきます。
もう少し全体をよく見てから変更・修正したいと思うので少しお待ちください……！

0.16.2のリリースのときにDiscordでも言ったが、現状の `can_skip_in_simple_test`の考えかただと、一番壊れやすい部分がCIされずにリリース直前になって壊れていることが発覚するということが起こる。というか頻発している。 https://discord.com/channels/879570910208733277/893889888208977960/1432006190006800436 そのためmainブランチ上でのCIは"simple_test"としないこととする。CI時間については、 #382 のようにワークフローを分割したりキャッシュを（もちらん適切に）効かせるといった方向で対処するべき。

対象のworkflowは今までフォークリポジトリ上でも無条件で動いてしまっており、リソースを圧迫していた。フォーク上で動かす必要は無い認識。本当は(もうすぐ丸三年前になる)#382 をやりたいが、とりあえず`push`トリガーの削減だけ自明なので行っておく。

#382 で書かれたものをベースに、今のこのリポジトリに沿うようにする。 .github/以下については漏れが怖いので、一括で`.github/**`という形の指定にする。既存の`on.pull_request.path`にも問題がある気がするが、あったとしても別PRでやることにする。 Co-authored-by: Yuto Ashida <y-chan@y-chan.dev> Co-authored-by: Copilot <175728472+Copilot@users.noreply.github.com>

decrement workflow runs

0bde985

qryxip reviewed Jan 15, 2023

View reviewed changes

.github/workflows/build_and_deploy.yml Outdated Show resolved Hide resolved

.github/workflows/cargo-deny.yml Outdated Show resolved Hide resolved

.github/workflows/generate_document.yml Outdated Show resolved Hide resolved

y-chan and others added 3 commits January 16, 2023 00:00

update paths in workflows

d21c132

Co-authored-by: Ryo Yamashita <qryxip@gmail.com>

separate and merge jobs in actions

2db986f

lint

2763afb

qryxip reviewed Jan 16, 2023

View reviewed changes

y-chan and others added 2 commits January 16, 2023 13:27

fix workflow name

7ebc350

Co-authored-by: Ryo Yamashita <qryxip@gmail.com>

check all rust crates

e67397f

Co-authored-by: Ryo Yamashita <qryxip@gmail.com>

PickledChair added 2 commits May 20, 2023 23:50

Merge branch 'main' into feature/decrement-workflows

8b01832

rust-cacheの行が抜けてしまっていたので追加

36fbcc4

qryxip requested changes May 21, 2023

View reviewed changes

PickledChair marked this pull request as draft June 4, 2023 12:08

qryxip mentioned this pull request Jun 11, 2023

cbindgenのinclude_versionを有効化する #519

Merged

This was referenced Jul 22, 2023

e2e系テストだけOS多めで、単体テストは１つのOSで #547

Merged

ビルドを全通り試さない簡易テストモードを追加する #554

Merged

Hiroshiba mentioned this pull request Aug 2, 2023

ダウンローダの自動ビルドを条件付きに #560

Merged

qryxip mentioned this pull request Sep 3, 2023

Add: 他言語のlintのWorkflowを追加 #598

Merged

qryxip mentioned this pull request Dec 18, 2024

ci: cargo-denyのadvisoriesだけcronでの実行にする #893

Merged

qryxip mentioned this pull request Dec 8, 2025

ci: mainブランチではすべてのCIを実行する #1229

Merged

qryxip mentioned this pull request Dec 31, 2025

ci: pushトリガーをmainブランチに限定 #1258

Merged

qryxip mentioned this pull request Jan 4, 2026

ci: on.pull_request.pathsを設定 #1272

Merged

		- name: Validate Cargo.lock
		run: cargo metadata --locked --format-version 1 > /dev/null

Conversation

y-chan commented Jan 15, 2023

内容

関連 Issue

Uh oh!

y-chan commented Jan 15, 2023 • edited Loading Uh oh! There was an error while loading. Please reload this page.

Uh oh!

Uh oh!

Hiroshiba commented Jan 15, 2023

Uh oh!

qryxip left a comment • edited Loading Uh oh! There was an error while loading. Please reload this page.

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Uh oh!

Uh oh!

Uh oh!

qryxip commented Jan 15, 2023

Uh oh!

y-chan commented Jan 15, 2023

Uh oh!

y-chan commented Jan 15, 2023

Uh oh!

Uh oh!

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Hiroshiba commented Feb 22, 2023

Uh oh!

qryxip commented Mar 3, 2023

Uh oh!

Hiroshiba commented May 13, 2023 • edited Loading Uh oh! There was an error while loading. Please reload this page.

Uh oh!

Uh oh!

y-chan commented May 18, 2023

Uh oh!

Hiroshiba commented May 20, 2023

Uh oh!

PickledChair commented May 20, 2023

Uh oh!

Hiroshiba commented May 20, 2023

Uh oh!

PickledChair commented May 20, 2023 • edited Loading Uh oh! There was an error while loading. Please reload this page.

Uh oh!

Uh oh!

qryxip left a comment

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

PickledChair commented May 21, 2023

Uh oh!

Reviewers

Assignees

Labels

Projects

Milestone

Development

y-chan commented Jan 15, 2023 •

edited

Loading

qryxip left a comment •

edited

Loading

Hiroshiba commented May 13, 2023 •

edited

Loading

PickledChair commented May 20, 2023 •

edited

Loading