ShowUI

ShowUI locates the target of an instruction as an image point.

Tarefas: point detection
Tamanhos: 2b at 1344 px
Instalação: pip install "libreyolo[vlm]"
Nível de suporte: Nível irmão, desde a v1.6.0. Uma superfície de produto separada, com sua própria fábrica e seu próprio contrato.
Origem: ShowUI por ShowUI authors, MIT. Artigo, código-fonte
Licenças: Código MIT, pesos MIT. Uso comercial

Install

bash

pip install "libreyolo[ground]"

Predict

Python

from libreyolo import LibreGround, SAMPLE_IMAGE model = LibreGround("showui-2b", device="cpu")result = model(SAMPLE_IMAGE, prompt="the person")print(result.points.xy)

Use prompt= or query= for one call, or set_query() for a persistent instruction. A list of instructions on one image returns at most one click per query. Multi-query calls on image lists or folders raise an error. Coordinates refer to the original image. Training, validation and export are not supported. See the grounding API.

Licensing

Confira a licença no repositório do Hugging Face correspondente aos pesos que você baixar. Cada checkpoint na organização LibreYOLO tem uma licença, e ela nem sempre é a mesma em toda a família. Esse repositório é a fonte oficial. O resumo abaixo descreve o que se aplicava na última verificação desta página.

Esta é uma descrição das licenças envolvidas, não uma orientação jurídica. Se a resposta tiver importância comercial, leia as licenças e procure sua própria assessoria.

Trabalho original: ShowUI, ShowUI authors
Licença original: MIT
Código-fonte original: github.com/showlab/ShowUI
Código do LibreYOLO: MIT
Pesos: MIT, distribuído pelos autores. O LibreYOLO não hospeda nem espelha esses pesos.
Interpretação: The model publisher declares MIT.

Citation

@misc{lin2024showui,
      title={ShowUI: One Vision-Language-Action Model for GUI Visual Agent}, 
      author={Kevin Qinghong Lin and Linjie Li and Difei Gao and Zhengyuan Yang and Shiwei Wu and Zechen Bai and Weixian Lei and Lijuan Wang and Mike Zheng Shou},
      year={2024},
      eprint={2411.17465},
      archivePrefix={arXiv},
      primaryClass={cs.CV},
      url={https://arxiv.org/abs/2411.17465}, 
}

Copiado do bloco de citação dos autores em raw.githubusercontent.com/showlab/ShowUI/main/README.md.

Install

Predict

Licensing

Citation

Arquitetura de ShowUI