ディレクトリに戻る

dsh-computer-use

キュレーションリスト掲載メンテナンス: 活発

anionex/dsh-computer-use

macOS Accessibility ベースの PC 操作・スクリーンショット・Agent ツール。fresh 観測、stale 拒否、スコープ権限

GitHub で見る
$ dsh plugin --profile web add @anionex/dsh-computer-use

109

スター

8

フォーク

TypeScript

言語

MIT

ライセンス

2026-08-13

作成日

2026-11-12

最終プッシュ

DeepSeek Harness 向けのネイティブかつフォアグラウンド安全な macOS コンピュータ操作——新鮮な Accessibility 観測、ターゲットプロセス入力、スコープ付きリース、機微な操作への単回確認。

DSH 統合

ネイティブ実行

作者による申告

安全性監査

未監査

最終検証日

2026-09-03

ライセンス

MIT

01どんなタスクに使えるのか?

  • Let an Agent inspect and control macOS applications with fresh Accessibility observations

    Bounded Accessibility tree, indexed elements, exact app/process/window metadata, permission state, and an optional screenshot Artifact

    Agents and developers running DeepSeek Harness (dsh) on macOS who need reliable native GUI automation

  • Route keyboard and pointer input to a target process without stealing focus or moving the system cursor

    Target-process-bound keyboard/pointer events plus a separate non-activating Agent cursor; pid/window targeted, never global HID

    Operators who need foreground-safe computer use while the user keeps working in the current app

  • Gate high-impact actions behind one-use confirmation tied to exact state

    A short-lived, one-use confirmation token bound to the exact app, process, observation, target handle, and action

    Security-conscious users who require explicit approval before sensitive macOS input

02DeepSeek Harness への導入方法

前提条件

  • macOS 14 or newer
  • DeepSeek Harness with a Web or Headless Profile and the Skill Tool mounted
  • macOS Accessibility permission for observation and native actions
  • macOS Screen Recording permission only when a screenshot is requested
  • Node.js ^22.19.0 or >=24.0.0 when building this repository from source

インストール手順

  1. 01

    Install the published npm package into a Web profile: `dsh plugin --profile web add @anionex/dsh-computer-use`

    $ dsh plugin --profile web add @anionex/dsh-computer-use

  2. 02

    Install into a Headless profile: `dsh plugin --profile headless add @anionex/dsh-computer-use`

    $ dsh plugin --profile headless add @anionex/dsh-computer-use

  3. 03

    Restart a running `dsh web` host, start a new Session, then load the Skill with `/computer-use`

    $ dsh web

導入成功の確認

  • Confirm the bundle is registered: `dsh --profile web --dump-config | grep computer-use`
  • Restart the host and start a new Session so the Bundle and Skill catalog reload

ロールバック

  • Remove from the Web profile: `dsh plugin --profile web remove @anionex/dsh-computer-use`
  • Remove from the Headless profile: `dsh plugin --profile headless remove @anionex/dsh-computer-use`

03DSH 統合と能力の範囲

DSH 統合ネイティブ実行

Native macOS action layer (DSH Bundle) mounted via `dsh plugin add`; exposes Computer Use Tools after loading the `/computer-use` Skill

  • Observe

    target application bundle id and pid→fresh full/diff Accessibility observation and optional screenshot Artifact

  • Click

    exact element index or opaque targetHandle (with optional safe rebinding)→target-process coordinate click after semantic AXPress preference

    may activate the target app before keyboard input when keyboardPolicy: activate
  • Type text

    Unicode text and target process→inserted text via Accessibility, with process-targeted keyboard fallback

    process-targeted keyboard fallback may activate the target app first
  • Confirm

    one exact sensitive action→a one-use token bound to the exact app, process, observation, target handle, and action

  • Scope application access

    Agent, Session, turn, and exact bundle id→separated read and control leases; high-impact actions require one-use confirmation

04誰に向いているのか?使うべきでない場面は?

向いている用途

  • Agents and developers running DeepSeek Harness (dsh) on macOS who need reliable native GUI automation
  • Operators who need foreground-safe computer use while the user keeps working in the current app
  • Security-conscious users who require explicit approval before sensitive macOS input

不向きな用途

  • The current provider is macOS-only (macOS 14+); Windows UI Automation and Linux providers are not implemented, so non-macOS hosts register no Computer Use Tools.
  • The plugin needs macOS Accessibility and Screen Recording UI permissions (not filesystem permissions); normal use stays under DSH workspace-write and screenshots remain in the Session workspace.
  • The clicked point must fall inside an on-screen window of the selected app; minimized, hidden, or windowless targets fail closed rather than switching to global input.

05互換性・メンテナンス・セキュリティ上の注意

  • The current provider is macOS-only (macOS 14+); Windows UI Automation and Linux providers are not implemented, so non-macOS hosts register no Computer Use Tools.
  • The plugin needs macOS Accessibility and Screen Recording UI permissions (not filesystem permissions); normal use stays under DSH workspace-write and screenshots remain in the Session workspace.
  • The clicked point must fall inside an on-screen window of the selected app; minimized, hidden, or windowless targets fail closed rather than switching to global input.
  • No Tool accepts AppleScript, JXA, shell, Swift, Objective-C, native selectors, arbitrary Accessibility constants, or source code; the model cannot override host policies through Tool arguments.
2026-08-132026-09-03v0.3.1

MIT · actively maintained (latest release v0.3.1, 2026-09-02)

06よくある質問

DeepSeek Harness 向けに DSH Computer Use をどうインストールしますか?

npm 公開パッケージ `@anionex/dsh-computer-use` を Web または Headless プロファイルに `dsh plugin --profile web add @anionex/dsh-computer-use` で追加し、新しい Session で Skill `/computer-use` を読み込みます。

実際のカーソルを動かしたりフォーカスを奪いますか?

いいえ——既定ルートにカーソル移動はなく、グローバルなポインタ注入ではなくターゲットプロセス指向の SkyLight ルートを使用します。Agent カーソルは独立した非アクティブなオーバーレイで、macOS システムカーソルを置換しません。

対応プラットフォームは?

現在のプロバイダは macOS 専用(macOS 14 以上)です。Windows UI Automation と Linux プロバイダは未実装です。非 macOS ホストではプラグインはグレースフルに退化し、Computer Use ツールを登録しません。

機微な操作はどう保護されますか?

高影響操作は実行直前に、正確な app・プロセス・observation・target handle・アクションに紐付く短寿命・単回の `computer_confirm` トークンを必要とし、許可でこれをバイパスできません。

データはどう保護されますか?

プラグインは macOS の Accessibility と Screen Recording(UI)権限を必要とし、ファイルシステム権限は不要です。観測はスコープ付き read/control リースで、セキュアなテキスト値は `[secure]` として出力されます。

08データと出典

  • 作者による申告github.com97b9731abccc…

    **Native macOS control for DeepSeek Harness that keeps your real cursor and foreground application alone by default

  • 作者による申告github.com97b9731abccc…

    DSH Computer Use gives an Agent fresh Accessibility observations, exact process/window targeting, stale-state rejection,…

  • 作者による申告github.com97b9731abccc…

    Semantic Accessibility comes first; mouse, drag, wheel, and keyboard fallback are routed to the selected process instead…

このページは、プロジェクトの公開ドキュメント、リポジトリのメタデータ、および DSH Plugins の構造化解析に基づいて生成されています。最終検証日:2026-09-03。誤りを見つけた場合は、修正を送信してください。

🏆

dsh プラグイン おすすめ

最初に入れたい 12 のプラグイン。全カタログ・全カテゴリから厳選しました。

DSH Plugins は DeepSeek Harness プラグインの独立したコミュニティ ディレクトリです。DeepSeek との提携・公認はありません。サードパーティ製プラグインはセキュリティ監査を受けていません。インストール前にソースコードをご確認ください。

DeepSeek Harnessの新着プラグインを毎週お届け。スパムはありません。