WildDet3D

WildDet3D predicts three-dimensional boxes from a single image.

タスク: 3d detection
サイズ: l at 1008 px
インストール: pip install "libreyolo[hf]"
サポートティア: 姉妹ティア、v1.6.0以降。独自のファクトリと契約を持つ、独立した製品インターフェースです。
アップストリーム: Allen Institute for AIのWildDet3D、SAM License。論文、ソース
ライセンス: コード：MIT、重み：SAM License。商用利用

Install

bash

pip install "libreyolo[hf]"

Predict

Python

from libreyolo import LibreWildDet3D, SAMPLE_IMAGEfrom PIL import Imageimport numpy as np # Requires the separately installed upstream runtime.model = LibreWildDet3D(device="cpu")# Approximate pinhole intrinsics for the original image size.# Replace with your camera's measured 3x3 calibration for real geometry.width, height = Image.open(SAMPLE_IMAGE).sizef = max(width, height)intrinsics = np.array([[f, 0, width / 2], [0, f, height / 2], [0, 0, 1]], dtype=np.float32)result = model.predict(SAMPLE_IMAGE, intrinsics=intrinsics, text="person")print(result.boxes3d)

WildDet3D accepts text, box or point prompts and requires original-image camera intrinsics. Install its separate upstream runtime and provide runtime_path and runtime_python when they are outside the active environment.

result.boxes3d holds centers, dimensions and wxyz quaternions in camera coordinates, plus confidence, class and intrinsics. Plotting projects cuboids into the image. Training, validation, tracking and export are not supported. See 3D detection.

Licensing

ダウンロードする特定の重みについて、Hugging Faceリポジトリのライセンスを確認してください。LibreYOLO orgの各チェックポイントにはライセンスが付与されており、同じファミリー内でも常に同一とは限りません。そのリポジトリが正式な情報源です。以下の概要は、このページを最後に検証した時点で適用されていた内容を示します。

これは関連するライセンスの説明であり、法的助言ではありません。商用上重要な場合は、自分でライセンスを読み、専門家の助言を受けてください。

原著作物: WildDet3D, Allen Institute for AI
アップストリームのライセンス: SAM License
アップストリームのソース: github.com/allenai/WildDet3D
LibreYOLOのコード: MIT
重み: SAM License、huggingface.co/LibreYOLOで再公開
解釈: The upstream runtime and checkpoint retain the custom SAM License, including its field-of-use restrictions.

Citation

@misc{huang2026wilddet3dscalingpromptable3d,
      title={WildDet3D: Scaling Promptable 3D Detection in the Wild}, 
      author={Weikai Huang and Jieyu Zhang and Sijun Li and Taoyang Jia and Jiafei Duan and Yunqian Cheng and Jaemin Cho and Matthew Wallingford and Rustin Soraki and Chris Dongjoo Kim and Shuo Liu and Donovan Clay and Taira Anderson and Winson Han and Ali Farhadi and Bharath Hariharan and Zhongzheng Ren and Ranjay Krishna},
      year={2026},
      eprint={2604.08626},
      archivePrefix={arXiv},
      primaryClass={cs.CV},
      url={https://arxiv.org/abs/2604.08626}, 
}

著者によるraw.githubusercontent.com/allenai/WildDet3D/main/README.mdの引用ブロックからコピーしています。