Florence-2 grounding

Florence-2 grounding locates the target of an instruction as an image point.

Задачи: point detection
Размеры: base, large at 768 px
Установка: pip install "libreyolo[vlm]"
Уровень поддержки: Смежный уровень, начиная с v1.6.0. Отдельная часть продукта со своей фабрикой и контрактом.
Исходный проект: Florence-2 от Microsoft, MIT. Статья, исходный код
Лицензии: Код: MIT, веса: MIT. Коммерческое использование

Install

bash

pip install "libreyolo[ground]"

Predict

Python

from libreyolo import LibreGround, SAMPLE_IMAGE model = LibreGround("florence-2-base", device="cpu")result = model(SAMPLE_IMAGE, prompt="the person")print(result.points.xy)

Use prompt= or query= for one call, or set_query() for a persistent instruction. A list of instructions on one image returns at most one click per query. Multi-query calls on image lists or folders raise an error. Coordinates refer to the original image. Training, validation and export are not supported. See the grounding API.

Licensing

Проверяйте лицензию в репозитории конкретных весов на Hugging Face. Она указана для каждого чекпойнта в организации LibreYOLO и может различаться даже внутри одного семейства. Этот репозиторий считается авторитетным источником, а сводка ниже описывает условия на момент последней проверки страницы.

Это описание соответствующих лицензий, а не юридическая консультация. Если ответ важен для коммерческого использования, прочитайте лицензии самостоятельно и проконсультируйтесь с юристом.

Оригинальная работа: Florence-2, Microsoft
Лицензия исходного проекта: MIT
Исходный код проекта: huggingface.co/microsoft/Florence-2-base
Код LibreYOLO: MIT
Веса: MIT, повторно опубликованы на huggingface.co/LibreYOLO
Толкование: The model publisher declares MIT.

Citation

@article{xiao2023florence,
  title={Florence-2: Advancing a unified representation for a variety of vision tasks},
  author={Xiao, Bin and Wu, Haiping and Xu, Weijian and Dai, Xiyang and Hu, Houdong and Lu, Yumao and Zeng, Michael and Liu, Ce and Yuan, Lu},
  journal={arXiv preprint arXiv:2311.06242},
  year={2023}
}

Скопировано из блока цитирования авторов на странице huggingface.co/microsoft/Florence-2-large#bibtex.

Install

Predict

Licensing

Citation

Архитектура Florence-2 grounding