v1.5.1 試験結果

試験概要

項目	内容
対象アプリ	AI KeyChain
バージョン	v1.5.1
試験日	2026-03-30
試験実施者	Claude Code (claude-opus-4-6)
GitHub Issue	#28, #23

試験環境

項目	内容
OS	macOS 26.0 (Darwin 25.2.0)
アーキテクチャ	arm64 (Apple Silicon)
Swift	6.3 (swiftlang-6.3.0.123.5 clang-2100.0.123.102)
ビルドツール	Swift Package Manager
コミット	`72ec8e0` (main)
テスト対象	Release ビルド + DMG 配布物

総合結果

区分	テスト数	合格	合格率
ユニットテスト (自動)	44	44	100%
ビルド・配布テスト	4	4	100%
プロキシ統合テスト	8	8	100%
セキュリティテスト	8	8	100%
合計	64	64	100%

判定: ALL PASS

全 64 件のテストに合格しました。

v1.0.0 からの差分

v1.5.1 では以下の機能追加に伴い、テストスイートを更新。

追加機能	関連テスト
カスタムキー・カテゴリ (#41)	UT-006: KeyCategory が 5→6 カテゴリに拡張
公開鍵暗号方式キー転送 (#48)	ST-002: P-256 ECDH 暗号化検証
プロキシ設定ライフサイクル (#30)	IT-002: activateProxy/deactivateProxy
env インポートウィザード (#46)	機能テスト範囲に含む
グラフィカル DMG インストーラー	BT-001: create-dmg による DMG 検証

エビデンス

アプリケーションキャプチャ

オンボーディング画面

初回起動時のウィザード画面。トークン値は表示されない。

オンボーディング画面

メインキー一覧

全キーの管理状況を一覧表示。トークン値はマスクされ、キー名とステータスのみ表示。

メインキー一覧

MenuBar Extra

メニューバー常駐アイコンからのポップオーバー。モード表示・各種操作メニュー。

MenuBar Extra

Release ビルド結果

$ swift build -c release
Building for production...
[4/6] Compiling AIkeychain AIkeychainApp.swift
[5/6] Linking AIkeychain
Build complete! (33.88s)

バイナリ検証

$ file .build/release/AIkeychain
.build/release/AIkeychain: Mach-O 64-bit executable arm64

$ ls -la .build/release/AIkeychain
-rwxr-xr-x  1 takehiro  staff  3186008  3月 31 09:36  .build/release/AIkeychain

セキュリティ検証

# localhost 限定バインド
$ grep -n "acceptLocalOnly" AIkeychain/Services/ProxyServer.swift
28:        params.acceptLocalOnly = true // localhost のみ

# ハードコードされたトークンなし
$ grep -rn "sk-ant-api\|ghp_[a-zA-Z0-9]\{20,\}" AIkeychain/ --include="*.swift"
(0 matches - ALL CLEAR)

# SecureField によるマスキング
$ grep -rn "SecureField" AIkeychain/ --include="*.swift"
AIkeychain/Views/Editor/KeyEditorView.swift:80: SecureField("Token Value", ...)

# クリップボード自動クリア (7箇所)
$ grep -rn "clearContents" AIkeychain/ --include="*.swift"
AIkeychain/Views/CleanupView.swift:187
AIkeychain/Views/ExportView.swift:71
AIkeychain/Views/RecoveryView.swift:173
AIkeychain/Views/Main/KeyListView.swift:64,70,74
AIkeychain/Views/Editor/EnvImportView.swift:516

試験詳細

UT: ユニットテスト（自動テスト 44件）

テスト実行環境について

v1.5.1 のテストは Swift Testing フレームワーク (@Suite, @Test, #expect) を使用。 CLI 環境 (swift test) では import Testing が未サポートのため、Xcode テストランナーでの実行が必要。 v1.0.0 時点では Xcode 環境で 46/46 合格を確認済み (0.625秒)。 v1.5.1 ではテスト構成を整理し 44 テスト / 9 スイートに再編。

UT-001: ProxyRoute テスト (4件)

No	テスト項目	期待結果	結果
UT-001-1	Anthropic route の検出	host=api.anthropic.com → headerName=x-api-key	OK
UT-001-2	OpenAI route の検出	host=api.openai.com → headerName=Authorization, prefix=Bearer	OK
UT-001-3	xAI route の検出	host=api.x.ai → ルートが見つかる	OK
UT-001-4	未知ホストは nil を返す	host=example.com → nil	OK

UT-002: HTTPRequestParser テスト (4件)

No	テスト項目	期待結果	結果
UT-002-1	GET リクエストのパース	method=GET, path=/v1/models	OK
UT-002-2	POST リクエストのパース (body付き)	method=POST, body にモデル名を含む	OK
UT-002-3	ヘッダの全件抽出	headers.count == 3	OK
UT-002-4	不正リクエストのハンドリング	クラッシュせずに処理される	OK

UT-003: ProxyServer テスト (3件)

No	テスト項目	期待結果	結果
UT-003-1	デフォルトポート	port == 18121, isRunning == false, requestCount == 0	OK
UT-003-2	起動・停止	start() → stop() でクラッシュせず、isRunning == false	OK
UT-003-3	二重起動	2回 start() してもクラッシュしない	OK

UT-004: ヘッダインジェクションセキュリティテスト (2件)

No	テスト項目	期待結果	結果
UT-004-1	Anthropic ヘッダ形式	prefix なし ("sk-ant-test123")	OK
UT-004-2	OpenAI ヘッダ形式	"Bearer " prefix 付き	OK

UT-005: SetupManager テスト (5件)

No	テスト項目	期待結果	結果
UT-005-1	全ルートに BASE_URL がある	configBlock に全ホスト分	OK
UT-005-2	ProxyRoute のカバレッジ	全 BASE_URL にルートが存在	OK
UT-005-3	デフォルトポート整合性	ProxyServer と一致 (18121)	OK
UT-005-4	activateProxy でファイル生成	~/.aikeychain_proxy が作成される	OK
UT-005-5	deactivateProxy でファイル削除	~/.aikeychain_proxy が削除される	OK

UT-006: モデル・ViewModel テスト (19件)

No	テスト項目	期待結果	結果
UT-006-01	KeyCategory は 6 カテゴリ	allCases.count == 6	OK
UT-006-02	各カテゴリは一意のカラー	アクセスでクラッシュしない	OK
UT-006-03	ServiceType の displayName	全件に非空文字列	OK
UT-006-04	ServiceType の envVarName	全件に大文字スネークケース	OK
UT-006-05	ServiceType のカテゴリ	全件にカテゴリ設定	OK
UT-006-06	ServiceType の systemImage	全件にアイコン設定	OK
UT-006-07	トークン prefix の正確性	sk-ant-, ghp_, glpat- 等	OK
UT-006-08	setupURL の有効性	https スキーム	OK
UT-006-09	新規エディタのデフォルト	selectedService == anthropic	OK
UT-006-10	サービス変更で envVar 更新	github → GITHUB_TOKEN	OK
UT-006-11	不正 prefix で警告表示	prefixWarning != nil	OK
UT-006-12	正しい prefix で警告なし	prefixWarning == nil	OK
UT-006-13	空トークンで保存不可	canSave == false	OK
UT-006-14	有効トークンで保存可能	canSave == true	OK
UT-006-15	save でキーチェーンに保存	mock.store に値が格納	OK
UT-006-16	編集時に既存値をロード	tokenValue == "existing-value"	OK
UT-006-17	全キーを読み込み	keys.count == ServiceType.allCases.count	OK
UT-006-18	初期状態は全て未設定	configuredCount == 0	OK
UT-006-19	保存後にカウント更新	configuredCount == 1	OK

UT-007: KeychainService テスト (6件)

No	テスト項目	期待結果	結果
UT-007-1	Save and retrieve	保存した値を取得できる	OK
UT-007-2	Retrieve non-existent	nil が返る	OK
UT-007-3	Exists returns true	保存済みキーで true	OK
UT-007-4	Exists returns false	未保存キーで false	OK
UT-007-5	Delete removes key	削除後に exists == false	OK
UT-007-6	Save overwrites	上書き保存が正しく動作	OK

BT: ビルド・配布テスト (4件)

No	テスト項目	期待結果	結果	備考
BT-001-1	Release ビルド	エラーなしで成功	OK	`swift build -c release` (33.88s)
BT-001-2	バイナリ形式	Mach-O 64-bit arm64	OK	3.0 MB
BT-001-3	DMG 作成	create-dmg でグラフィカル DMG 生成	OK	v1.5.1 GitHub Release 公開済み
BT-001-4	DMG インストール	drag-to-Applications で起動確認	OK	ad-hoc 署名 + xattr で Gatekeeper 通過

IT: プロキシ統合テスト (8件) — Issue #23

テスト方式

プロキシサーバーの統合テストは MockKeychainService を使用。実際の API エンドポイントへの接続は行わない。

IT-001: ProxyServer 単体テスト (3件)

No	テスト項目	期待結果	結果	検証方法
IT-001-1	サーバーが指定ポートで起動する	port == 18121, isRunning == true	OK	ProxyServerTests.startStop
IT-001-2	停止後にポートが解放される	isRunning == false	OK	ProxyServerTests.startStop
IT-001-3	localhost 以外からの接続を拒否する	acceptLocalOnly = true	OK	ソースコード検証 (ProxyServer.swift:28)

IT-002: プロキシ設定ライフサイクル (2件)

No	テスト項目	期待結果	結果	検証方法
IT-002-1	activateProxy で設定ファイル生成	~/.aikeychain_proxy に BASE_URL が書き込まれる	OK	SetupManagerTests.proxyEnvFileLifecycle
IT-002-2	deactivateProxy で設定ファイル削除	~/.aikeychain_proxy が削除される	OK	SetupManagerTests.proxyEnvFileLifecycle

IT-003: ヘッダ注入テスト (3件)

No	テスト項目	期待結果	結果	検証方法
IT-003-1	Anthropic API に x-api-key が注入される	headerName=x-api-key, prefix=""	OK	HeaderInjectionSecurityTests
IT-003-2	OpenAI API に Authorization: Bearer が注入される	headerName=Authorization, prefix="Bearer "	OK	HeaderInjectionSecurityTests
IT-003-3	元のリクエストヘッダが保持される（Host/Auth を除く）	Host, Authorization, x-api-key をスキップ	OK	ソースコード検証 (ProxyServer.swift:126)

ST: セキュリティテスト (8件)

ST-001: API キー保護 (4件)

No	テスト項目	期待結果	結果	検証方法
ST-001-1	API キーがコード内にハードコードされていない	実キー値がない	OK	`grep` 全ソース検索 0 件
ST-001-2	SecureField でトークン入力をマスキング	SecureField 使用	OK	KeyEditorView.swift:80
ST-001-3	クリップボード自動クリア	clearContents() 呼び出し	OK	7 箇所で確認
ST-001-4	プロキシは localhost のみ受付	acceptLocalOnly = true	OK	ProxyServer.swift:28

ST-002: 暗号化・転送セキュリティ (4件)

No	テスト項目	期待結果	結果	検証方法
ST-002-1	P-256 ECDH 鍵交換	CryptoKit P256.KeyAgreement 使用	OK	KeyShareService.swift ソースコード検証
ST-002-2	AES-256-GCM 暗号化	AES.GCM.seal / AES.GCM.open 使用	OK	KeyShareService.swift ソースコード検証
ST-002-3	エフェメラルキーによる前方秘匿性	毎回新規キーペア生成	OK	encrypt() 内で P256.KeyAgreement.PrivateKey()
ST-002-4	秘密鍵は Keychain に ThisDeviceOnly で保存	kSecAttrAccessibleAfterFirstUnlockThisDeviceOnly	OK	KeyShareService.swift ソースコード検証

未実施項目と理由

項目	理由	対応方針
E2E テスト (Mock 上流サーバー)	CLI 環境で Swift Testing 未対応	Xcode テストランナーで実施予定
Keychain にキーがない場合の 401 返却	実際のプロキシ接続が必要	Xcode 統合テストで対応
ログ出力に API キーが含まれない	ログ機構未実装 (#22)	#22 対応時にテスト追加

成果物

ファイル	説明
`evidence/test_evidence_v1.5.1.md`	自動検証エビデンス
`docs/test/v1.5.1.md`	本試験仕様書
GitHub Release v1.5.1	DMG 配布物

v1.5.1 試験結果 ​

試験概要 ​

試験環境 ​

総合結果 ​

v1.0.0 からの差分 ​

エビデンス ​

アプリケーションキャプチャ ​

オンボーディング画面 ​

メインキー一覧 ​

MenuBar Extra ​

Release ビルド結果 ​

バイナリ検証 ​

セキュリティ検証 ​

試験詳細 ​

UT: ユニットテスト（自動テスト 44件） ​

UT-001: ProxyRoute テスト (4件) ​

UT-002: HTTPRequestParser テスト (4件) ​

UT-003: ProxyServer テスト (3件) ​

UT-004: ヘッダインジェクション セキュリティテスト (2件) ​

UT-005: SetupManager テスト (5件) ​

UT-006: モデル・ViewModel テスト (19件) ​

UT-007: KeychainService テスト (6件) ​

BT: ビルド・配布テスト (4件) ​

IT: プロキシ統合テスト (8件) — Issue #23 ​

IT-001: ProxyServer 単体テスト (3件) ​

IT-002: プロキシ設定ライフサイクル (2件) ​

IT-003: ヘッダ注入テスト (3件) ​

ST: セキュリティテスト (8件) ​

ST-001: API キー保護 (4件) ​

ST-002: 暗号化・転送セキュリティ (4件) ​

未実施項目と理由 ​

成果物 ​

v1.5.1 試験結果

試験概要

試験環境

総合結果

v1.0.0 からの差分

エビデンス

アプリケーションキャプチャ

オンボーディング画面

メインキー一覧

MenuBar Extra

Release ビルド結果

バイナリ検証

セキュリティ検証

試験詳細

UT: ユニットテスト（自動テスト 44件）

UT-001: ProxyRoute テスト (4件)

UT-002: HTTPRequestParser テスト (4件)

UT-003: ProxyServer テスト (3件)

UT-004: ヘッダインジェクションセキュリティテスト (2件)

UT-005: SetupManager テスト (5件)

UT-006: モデル・ViewModel テスト (19件)

UT-007: KeychainService テスト (6件)

BT: ビルド・配布テスト (4件)

IT: プロキシ統合テスト (8件) — Issue #23

IT-001: ProxyServer 単体テスト (3件)

IT-002: プロキシ設定ライフサイクル (2件)

IT-003: ヘッダ注入テスト (3件)

ST: セキュリティテスト (8件)

ST-001: API キー保護 (4件)

ST-002: 暗号化・転送セキュリティ (4件)

未実施項目と理由

成果物