テキストのみのエージェントに動画メタデータの確認、任意の ASR を伴う場面理解、時間アンカー付き質問応答をもたらすネイティブ DSH プラグイン。すべて OpenAI 互換のビジョン/ASR エンドポイント経由でプロバイダ非依存。
DSH 統合
ネイティブ実行
作者による申告
安全性監査
未監査
最終検証日
2026-08-30
ライセンス
MIT
01どんなタスクに使えるのか？
Inspect a local video's technical specs before deeper analysis
Compact metadata JSON via `video_probe`: container, duration, resolution, fps, codecs, audio tracks, subtitles
Text-only DSH agents and developers who need cheap, instant video metadata without decoding frames
Understand video content and answer time-anchored questions for text-only DSH agents
Structured evidence JSON from scene-change-aware frame sampling plus optional timestamped ASR; `video_ask` returns grounded answers with confidence and supporting timestamps
DSH agents that must reason about scenes, speech, or specific moments (e.g. "at 3:20") in local video
02DeepSeek Harness への導入方法
作者は未記載
03DSH 統合と能力の範囲
Native DSH plugin — text-only agents call `video_probe` / `video_analyze` / `video_ask` tools; vision & ASR use OpenAI-compatible `baseUrl` + `model` + key endpoints.
video_probe — instant metadata
local video file path→compact metadata JSON: container, duration, resolution, fps, codecs, audio tracks, subtitles
video_analyze — content understanding
local video file; optional ASR key env var→structured evidence JSON from scene-change-aware frame sampling fused with an OpenAI-compatible vision model; optional timestamped ASR transcript
video_ask — time-anchored Q&A
a prior analysis / transcript plus a natural-language question with time references→grounded answer with confidence and supporting timestamps, re-sampling frames from the matched windows
04誰に向いているのか？使うべきでない場面は？
向いている用途
- Text-only DSH agents and developers who need cheap, instant video metadata without decoding frames
- DSH agents that must reason about scenes, speech, or specific moments (e.g. "at 3:20") in local video
不向きな用途
- Requires `ffmpeg` and `ffprobe` on `PATH`; the plugin delegates all media work to them and does no native decoding.
05互換性・メンテナンス・セキュリティ上の注意
- Scene-change detection requires ffmpeg ≥ 6.0 (the `scdet` filter); videos without detectable cuts fall back to uniform midpoint sampling.
- Requires `ffmpeg` and `ffprobe` on `PATH`; the plugin delegates all media work to them and does no native decoding.
- ASR is strictly additive: if `asrApiKeyEnv` is unset or the provider fails, visual analysis still completes and `transcript` is `null`.
MIT license · latest release v0.3.1 (published 2026-08-18) · default branch main
06よくある質問
DeepSeek Harness 向けに dsh-video-lens をインストールするには？
公開 README は `ffmpeg` と `ffprobe` が `PATH` にあること（場面変化検知には ffmpeg ≥ 6.0）を要件としていますが、今回確認したスナップショットではインストール手順が省略されていました。展開前にリポジトリの README で正確な `dsh` インストール／クローン手順を確認してください。
利用前の前提条件は何ですか？
README によると 2 点：`ffmpeg` と `ffprobe` が `PATH` になければならず（すべてのメディア処理を委譲、ネイティブなデコードはなし）、場面変化を `scdet` フィルタで検知するには ffmpeg ≥ 6.0 が必要です。検出できない動画は均一な中点サンプリングにフォールバックします。
DeepSeek Harness とどう接続しますか？
ネイティブな DSH プラグインです。テキストのみの LLM エージェントは `video_probe`、`video_analyze`、`video_ask` をツールとして呼び出します。ビジョンと ASR は OpenAI 互換エンドポイント（baseUrl + model + key 環境変数）で接続するため、単一プロバイダに縛られません。
LLM に直接動画を見せるのと何が違いますか？
メディア処理自体を担います——ffprobe メタデータ、ffmpeg `scdet` 場面サンプリングと抽枠、任意の ASR——を実行し、サンプル枠を OpenAI 互換ビジョン・モデルと融合して構造化証拠 JSON にし、`video_ask` で時間アンカー付きの質問応答（例「3 分 20 秒」）を自信度と根拠タイムスタンプ付きで提供します。
ASR プロバイダが失敗したり key が未設定の場合は？
ASR は厳密に付加的です。`asrApiKeyEnv` が未設定またはプロバイダが失敗しても、視覚分析は完了し `transcript` は `null` になります。プラグインはエラーで停止せずグレースフルに劣化します。
07関連する DSH ワークフロー
modlens
by liustack
DeepSeek Harness 用のビジョンプラグイン。DeepSeek や GLM などのテキスト専用モデルに画像認識を外付けし、画像を貼るだけで OCR・レイアウト・意味情報を構造化 JSON として取得
agent-vision-toolkit
by anionex
テキスト専用モデルに「見る目」を与えるビジョンツールボックスとスキル。複数画像の理解、画像 QA、長いスクリーンショットの OCR、フロントエンド UI 復元、GUI 自動化に対応
dsh-vision-router
by ysr666
テキスト専用 DeepSeek Harness エージェントに目を与えるプラグイン。キー不要の無料ビジョンチェーン内蔵に加え、QA、グラウンディング、切り抜き、OCR などのツールをワンコマンドで導入可能
dsh-vision-toolkit
by anionex
テキスト専用 DSH エージェントに 10 個の構造化ビジョンツールを提供。意図を意識した画像 QA、長いスクリーンショットの OCR、ピクセルレベルのグラウンディング、UI 復元、ピクセル差分など
08データと出典
A [DeepSeek Harness](https://github.com/deepseek-ai/deepseek-harness) (DSH) plugin that lets text-only LLM agents unders…
v0.3.1. The plugin never locks you into a provider: vision and ASR are both OpenAI-compatible endpoints configured via `…
このページは、プロジェクトの公開ドキュメント、リポジトリのメタデータ、および DSH Plugins の構造化解析に基づいて生成されています。最終検証日：2026-08-30。誤りを見つけた場合は、修正を送信してください。
dsh プラグイン おすすめ
最初に入れたい 12 のプラグイン。全カタログ・全カテゴリから厳選しました。