WildDet3D

WildDet3D predicts three-dimensional boxes from a single image.

Задачи: 3d detection
Размеры: l at 1008 px
Установка: pip install "libreyolo[hf]"
Уровень поддержки: Смежный уровень, начиная с v1.6.0. Отдельная часть продукта со своей фабрикой и контрактом.
Исходный проект: WildDet3D от Allen Institute for AI, SAM License. Статья, исходный код
Лицензии: Код: MIT, веса: SAM License. Коммерческое использование

Install

bash

pip install "libreyolo[hf]"

Predict

Python

from libreyolo import LibreWildDet3D, SAMPLE_IMAGEfrom PIL import Imageimport numpy as np # Requires the separately installed upstream runtime.model = LibreWildDet3D(device="cpu")# Approximate pinhole intrinsics for the original image size.# Replace with your camera's measured 3x3 calibration for real geometry.width, height = Image.open(SAMPLE_IMAGE).sizef = max(width, height)intrinsics = np.array([[f, 0, width / 2], [0, f, height / 2], [0, 0, 1]], dtype=np.float32)result = model.predict(SAMPLE_IMAGE, intrinsics=intrinsics, text="person")print(result.boxes3d)

WildDet3D accepts text, box or point prompts and requires original-image camera intrinsics. Install its separate upstream runtime and provide runtime_path and runtime_python when they are outside the active environment.

result.boxes3d holds centers, dimensions and wxyz quaternions in camera coordinates, plus confidence, class and intrinsics. Plotting projects cuboids into the image. Training, validation, tracking and export are not supported. See 3D detection.

Licensing

Проверяйте лицензию в репозитории конкретных весов на Hugging Face. Она указана для каждого чекпойнта в организации LibreYOLO и может различаться даже внутри одного семейства. Этот репозиторий считается авторитетным источником, а сводка ниже описывает условия на момент последней проверки страницы.

Это описание соответствующих лицензий, а не юридическая консультация. Если ответ важен для коммерческого использования, прочитайте лицензии самостоятельно и проконсультируйтесь с юристом.

Оригинальная работа: WildDet3D, Allen Institute for AI
Лицензия исходного проекта: SAM License
Исходный код проекта: github.com/allenai/WildDet3D
Код LibreYOLO: MIT
Веса: SAM License, повторно опубликованы на huggingface.co/LibreYOLO
Толкование: The upstream runtime and checkpoint retain the custom SAM License, including its field-of-use restrictions.

Citation

@misc{huang2026wilddet3dscalingpromptable3d,
      title={WildDet3D: Scaling Promptable 3D Detection in the Wild}, 
      author={Weikai Huang and Jieyu Zhang and Sijun Li and Taoyang Jia and Jiafei Duan and Yunqian Cheng and Jaemin Cho and Matthew Wallingford and Rustin Soraki and Chris Dongjoo Kim and Shuo Liu and Donovan Clay and Taira Anderson and Winson Han and Ali Farhadi and Bharath Hariharan and Zhongzheng Ren and Ranjay Krishna},
      year={2026},
      eprint={2604.08626},
      archivePrefix={arXiv},
      primaryClass={cs.CV},
      url={https://arxiv.org/abs/2604.08626}, 
}

Скопировано из блока цитирования авторов на странице raw.githubusercontent.com/allenai/WildDet3D/main/README.md.