WildDet3D

WildDet3D predicts three-dimensional boxes from a single image.

작업: 3d detection
크기: l at 1008 px
설치: pip install "libreyolo[hf]"
지원 티어: 별도 티어, v1.6.0부터 지원. 자체 팩토리와 계약을 갖춘 별도의 제품 영역입니다.
업스트림: Allen Institute for AI의 WildDet3D, SAM License. 논문, 소스
라이선스: 코드 MIT, 가중치 SAM License. 상업적 사용

Install

bash

pip install "libreyolo[hf]"

Predict

Python

from libreyolo import LibreWildDet3D, SAMPLE_IMAGEfrom PIL import Imageimport numpy as np # Requires the separately installed upstream runtime.model = LibreWildDet3D(device="cpu")# Approximate pinhole intrinsics for the original image size.# Replace with your camera's measured 3x3 calibration for real geometry.width, height = Image.open(SAMPLE_IMAGE).sizef = max(width, height)intrinsics = np.array([[f, 0, width / 2], [0, f, height / 2], [0, 0, 1]], dtype=np.float32)result = model.predict(SAMPLE_IMAGE, intrinsics=intrinsics, text="person")print(result.boxes3d)

WildDet3D accepts text, box or point prompts and requires original-image camera intrinsics. Install its separate upstream runtime and provide runtime_path and runtime_python when they are outside the active environment.

result.boxes3d holds centers, dimensions and wxyz quaternions in camera coordinates, plus confidence, class and intrinsics. Plotting projects cuboids into the image. Training, validation, tracking and export are not supported. See 3D detection.

Licensing

내려받는 특정 가중치의 Hugging Face 저장소에서 라이선스를 확인하십시오. LibreYOLO 조직의 모든 체크포인트에는 라이선스가 있으며 한 계열 안에서도 항상 같지는 않습니다. 해당 저장소가 신뢰할 수 있는 기준입니다. 아래 요약은 이 페이지를 마지막으로 검증했을 때 적용된 내용을 설명합니다.

관련 라이선스에 관한 설명이며 법률 자문이 아닙니다. 상업적으로 중요한 사안이라면 라이선스를 직접 읽고 별도의 법률 자문을 받으십시오.

원작: WildDet3D, Allen Institute for AI
업스트림 라이선스: SAM License
업스트림 소스: github.com/allenai/WildDet3D
LibreYOLO 코드: MIT
가중치: SAM License, huggingface.co/LibreYOLO에 다시 게시됨
해석: The upstream runtime and checkpoint retain the custom SAM License, including its field-of-use restrictions.

Citation

@misc{huang2026wilddet3dscalingpromptable3d,
      title={WildDet3D: Scaling Promptable 3D Detection in the Wild}, 
      author={Weikai Huang and Jieyu Zhang and Sijun Li and Taoyang Jia and Jiafei Duan and Yunqian Cheng and Jaemin Cho and Matthew Wallingford and Rustin Soraki and Chris Dongjoo Kim and Shuo Liu and Donovan Clay and Taira Anderson and Winson Han and Ali Farhadi and Bharath Hariharan and Zhongzheng Ren and Ranjay Krishna},
      year={2026},
      eprint={2604.08626},
      archivePrefix={arXiv},
      primaryClass={cs.CV},
      url={https://arxiv.org/abs/2604.08626}, 
}

raw.githubusercontent.com/allenai/WildDet3D/main/README.md에 있는 저자의 인용 블록에서 복사했습니다.