Florence-2 grounding

Florence-2 grounding locates the target of an instruction as an image point.

Tarefas: point detection
Tamanhos: base, large at 768 px
Instalação: pip install "libreyolo[vlm]"
Nível de suporte: Nível irmão, desde a v1.6.0. Uma superfície de produto separada, com sua própria fábrica e seu próprio contrato.
Origem: Florence-2 por Microsoft, MIT. Artigo, código-fonte
Licenças: Código MIT, pesos MIT. Uso comercial

Install

bash

pip install "libreyolo[ground]"

Predict

Python

from libreyolo import LibreGround, SAMPLE_IMAGE model = LibreGround("florence-2-base", device="cpu")result = model(SAMPLE_IMAGE, prompt="the person")print(result.points.xy)

Use prompt= or query= for one call, or set_query() for a persistent instruction. A list of instructions on one image returns at most one click per query. Multi-query calls on image lists or folders raise an error. Coordinates refer to the original image. Training, validation and export are not supported. See the grounding API.

Licensing

Confira a licença no repositório do Hugging Face correspondente aos pesos que você baixar. Cada checkpoint na organização LibreYOLO tem uma licença, e ela nem sempre é a mesma em toda a família. Esse repositório é a fonte oficial. O resumo abaixo descreve o que se aplicava na última verificação desta página.

Esta é uma descrição das licenças envolvidas, não uma orientação jurídica. Se a resposta tiver importância comercial, leia as licenças e procure sua própria assessoria.

Trabalho original: Florence-2, Microsoft
Licença original: MIT
Código-fonte original: huggingface.co/microsoft/Florence-2-base
Código do LibreYOLO: MIT
Pesos: MIT, republicado em huggingface.co/LibreYOLO
Interpretação: The model publisher declares MIT.

Citation

@article{xiao2023florence,
  title={Florence-2: Advancing a unified representation for a variety of vision tasks},
  author={Xiao, Bin and Wu, Haiping and Xu, Weijian and Dai, Xiyang and Hu, Houdong and Lu, Yumao and Zeng, Michael and Liu, Ce and Yuan, Lu},
  journal={arXiv preprint arXiv:2311.06242},
  year={2023}
}

Copiado do bloco de citação dos autores em huggingface.co/microsoft/Florence-2-large#bibtex.

Install

Predict

Licensing

Citation

Arquitetura de Florence-2 grounding