Repository navigation
Develop v2.1.0 - #1952
Develop v2.1.0#1952
Conversation
Enable the access rights modification feature(#63818)
Reviewer's guide (collapsed on small PRs)Reviewer's GuideThis PR adds an enabled-by-default instance configuration switch for fixing access rights on search indexes; no implementation, migration, test, or documentation changes are included in the provided diff. File-Level Changes
Tips and commandsInteracting with Sourcery
Customizing Your ExperienceAccess your dashboard to:
Getting Help
|
|
Important Review skippedAuto reviews are disabled on base/target branches other than the default branch. Please check the settings in the CodeRabbit UI or the
 |
🔍 Claude レビュー統合Claude の追加指摘 1 件 — 🔴 高 0 ／ 🟠 中 0 ／ 🟡 低 1
1. 🟡 [低] ファイル末尾に改行が無い（Claude の追加指摘）
差分に "No newline at end of file" と出ています。実ファイルでも末尾の docstring 行が 修正案 根拠確認: scripts/instance.cfg 末尾を 次にすること: この PR は scripts/instance.cfg に WEKO_SEARCH_FIX_ACCESSRIGHTS = True を1件足すだけです。外部データのレビューにはコード指摘がなく、sourcery-ai は詳細省略、coderabbitai はレビューをスキップしたという通知だけでした。そのため裁定するスレッドはありません。このキーは weko-search-ui の config.py に既定値 False で定義されていて、weko-records、invenio-records、invenio-oaiserver などが モデル sonnet ／ 2 回実行して和集合 ／ コスト $0.1355。同じ入力でも結果が揺れるため複数回まわし、一部のパスでしか挙がらなかったものには回数を添えています 他レビューを踏まえた自動レビューです。誤りが含まれることがあります。 |
![sourcery-ai[bot]](https://avatars.githubusercontent.com/in/48477?s=60&v=4){kind=small}
There was a problem hiding this comment.
Hey - I've found 1 issue
Prompt for AI Agents
Please address the comments from this code review:
## Individual Comments
### Comment 1
<location path="scripts/instance.cfg" line_range="892" />
<code_context>
WEKO_RECORDS_UI_S3_TRANSFER_MAX_CONCURRENCY = 10
"""Number of threads for multipart upload/download for S3 compatible service transfer. Default is 10."""
+WEKO_SEARCH_FIX_ACCESSRIGHTS = True
+"""Fix access rights for search indexes. True if fixing access rights."""
\ No newline at end of file
</code_context>
<issue_to_address>
**Invalid embargo dates block saves**
When a record being saved has a file `dateValue` shaped like `YYYY-MM-DD` but not representing a valid calendar date, `update_embargo_rights` accepts any date matching `YYYY-MM-DD` in its regex, then `datetime.strptime` raises `ValueError` for an impossible calendar date such as `2026-02-30`. Since `json_loader` calls this function while saving records, the save fails.
Parse dates defensively and treat invalid calendar values as missing rather than raising.
</issue_to_address>Sourcery assessment
Needs a human reviewer. 1 finding to address first, and enabling this setting by default can change access rights on search indexes; if the fix grants access too broadly, restricted records could become searchable by unauthorized users. Reverting would stop the setting from applying going forward, but would not undo any exposure that already occurred.
Blocking findings: scripts/instance.cfg:892
| WEKO_RECORDS_UI_S3_TRANSFER_MAX_CONCURRENCY = 10 | ||
| """Number of threads for multipart upload/download for S3 compatible service transfer. Default is 10.""" | ||
|
|
||
| WEKO_SEARCH_FIX_ACCESSRIGHTS = True |
There was a problem hiding this comment.
🟡 Medium · Invalid embargo dates block saves
When a record being saved has a file dateValue shaped like YYYY-MM-DD but not representing a valid calendar date, update_embargo_rights accepts any date matching YYYY-MM-DD in its regex, then datetime.strptime raises ValueError for an impossible calendar date such as 2026-02-30. Since json_loader calls this function while saving records, the save fails.
Parse dates defensively and treat invalid calendar values as missing rather than raising.
Prompt for AI agents
In `scripts/instance.cfg` at line 892:
**Invalid embargo dates block saves**
When a record being saved has a file `dateValue` shaped like `YYYY-MM-DD` but not representing a valid calendar date, `update_embargo_rights` accepts any date matching `YYYY-MM-DD` in its regex, then `datetime.strptime` raises `ValueError` for an impossible calendar date such as `2026-02-30`. Since `json_loader` calls this function while saving records, the save fails.
Parse dates defensively and treat invalid calendar values as missing rather than raising.
API インベントリ差分（件数のみ）
ベースラインとの差分API インベントリ差分レポート
判定: ❌ FAIL (FAIL 1 / WARN 3)サマリ
[FAIL] G2 認証系デコレータが削除された — 3件
[WARN] W2 実装本体が変化(data_op / 情報露出を再確認) — 9件
[WARN] W6 依存パッケージの版が変化した — 2件
[WARN] W5 監視対象 config が変化した — 2件
台帳との突き合わせ(生成されませんでした) ソース由来の経路検知(生成されませんでした) |
概要 (Summary)
関連Issue / チケット (Related Issues)
変更タイプ (Type of Change)
🤖 0. CI 自動チェック (API Inventory Drift)
PR ごとに WEKO3 コンテナを起動し、
url_mapのダンプ・台帳との突き合わせ・変更行の到達可否測定を自動実行する。結果は PR コメントと Actions の artifact
(
api-inventory-summary) に出る。このリポジトリは public のため、台帳もベースラインも同梱していない。
実データはプライベートリポジトリ
RCOSDP/weko-secretにあり、CI は Secret 経由で取得する。以降この文書では、そこを単にプライベートリポジトリと呼ぶ。
台帳はブランチごとに内容が違うため、CI は weko 側と同名のブランチを
プライベートリポジトリから探して使う（head → base → 既定ブランチ の順）。
採用されたブランチ名は PR コメントの冒頭に出るので、件数を読む前にそこを見ること。
対応ブランチが無い場合は既定ブランチと比較され、コメント冒頭に警告が出る。
その件数は当てにならないので、PASS でも「確認済み」と読まないこと。
詳細:
tools/api-inventory/ci/README.md§3aSecret (
API_INVENTORY_REPO/API_INVENTORY_SSH_KEY) が未設定のリポジトリ、および fork からの PR では、このジョブは何もせずスキップされる。
API を追加・変更した場合（必須）
この PR が
fix/issue62569→develop_v2.0.4なら、プライベート側もfix/issue62569→develop_v2.0.4。同名にしておけば台帳 PR が未マージでもCI がそれを見るので、2つの PR のマージ順を気にしなくてよい。
api_snapshot.jsonを更新し、対応する PR を出したbash export WEKO_API_INVENTORY_DIR=/path/to/weko-secret ./install.sh python3 tools/api-inventory/scripts/snapshot.py --out "$WEKO_API_INVENTORY_DIR/api_snapshot.json"更新しないと CI が落ちる。公開リポジトリのコード変更とは別の PRになる。
weko3_api_list_full.tsvに行を追加・更新し、build_checklist.pyで 24 列版を再生成した（未収載だと reconcile が FAIL する）（
git statusに*.tsv/api_snapshot.jsonが出ていないこと）FAIL したときの対処（要約）
まず PR コメント冒頭の台帳ブランチを見る。警告が出ていれば、件数を追う前に
プライベートリポジトリ側の対応ブランチを用意すること（比較相手が違うので件数に意味がない）。
ジョブが落ちる条件は 3 つある。PR コメントのどのセクションに件数が出ているかで切り分ける。
drift.md)reconcile.md)*_PERMISSION_FACTORY/ CSRF 保護 等が危険側の値に変わったcan_delete/can_exportがFalse→Truedata_opを更新data_opが作成/更新/削除の経路に、未認証で到達したdata_opの記載誤りなら台帳を直すurl_mapに無いreconcile B のうち、実機に存在しないことが正当な行（プラグイン未登録・config で無効等）は
プライベートリポジトリの
reconcile_allow.jsonに理由付きで登録する。理由なしの登録は不可。登録済みの行は B'（既知・許容）として集計され、E'（endpoint が実機に無い）と併せてゲート対象外になる。
W1〜W6 は WARN でゲートは通るが、レビューでは見ること
（ModelView の追加 / 実装本体の変化 / HTTP メソッド・URL の変化 / 監視対象 config の変化 /
依存パッケージの版の変化）。特に W6（依存の版）は、ベースラインを CI と異なる環境で作ると
毎回出続けて形骸化するため、ベースラインは
install.shで作った環境から生成する。🔒 1. セキュリティ & API アクセス制御チェック (必須)
認証・認可 (Authentication & Authorization)
@login_required,@pass_record,need(...), Invenio Access Action/api/*ではPermission.require(http_exception=403)を使うこと。@login_requiredは API アプリにsecurity.loginが無いため 401 ではなく 500 になる--allow-writes付きでGET / HEAD 以外も叩く）
起動した経路のみ。ワークフロー系など未解決プレースホルダの行は skip される
Noneで無効化していない*_PERMISSION_FACTORY等を監視機能クローズ・非公開化の場合 (Feature Disable)
404 Not Foundまたは403 Forbiddenが返ることを確認した🧪 2. テストコード観点チェック (pytest / Invenio Test Suite)
権限・異常系テスト (Negative & Authorization Tests)
401 Unauthorizedまたは403 Forbidden/404 Not Foundが返ることを検証するテストがある403になるテストがある404/403を返すテストがある境界値・入力バリデーションテスト (Boundary & Validation)
400 Bad Request/ バリデーションエラーが返るテストがあるデータ整合性・トランザクションテスト (Integrity & Rollback)
🛡️ 3. データ保護 & 破壊的変更防止チェック (Data Safety)
⚙️ 4. マイグレーション & システム影響チェック (Invenio / WEKO3 Stack)
データベース (DB / Alembic)
invenio alembic upgrade（適用）およびdowngrade（ロールバック）スクリプトを作成・検証した検索インデックス (Elasticsearch / OpenSearch)
設定 & 非同期処理 (Config / Celery / Cache)
invenio.cfg/ 環境変数のデフォルト値を設定した📚 5. ドキュメント・仕様書更新チェック (weko-document)
tools/api-inventory/、台帳・調査記録はプライベートリポジトリ（public リポジトリには置かない）。
§0 のチェック項目で対応済みなら、ここは確認のみ。
weko3_api_auth_findings.md）もプライベートリポジトリに置く。台帳は二重管理しない📋 6. 動作検証エビデンス (Verification Evidence)
テスト実行結果
CI の成果物 (artifact:
api-inventory-summary)drift.mdreconcile.md明細（該当した経路名・実測結果）は公開できないため artifact に含めていない。
プライベートリポジトリ側で同じコマンドを
--summary-onlyなしで実行して確認する。手動で確認したこと
Summary by Sourcery
Enhancements: