Descrição
Matrix New York é uma ferramenta sofisticada que aproveita as imagens do Google Street View para criar modelos de mundo em vídeo interativos da cidade de Nova York. É projetada para simular controle de veículos e trajetória usando uma combinação de renderização de veículos em 3D e modelos cinemáticos de bicicletas. A ferramenta recupera a panorâmica mais próxima do Google Street View para uma determinada localização, remove veículos em primeiro plano e insere um veículo 3D renderizado sob uma câmera de perseguição. Esse processo permite que os usuários dirijam modelos de mundo em vídeo interativos pré-treinados pela cidade, oferecendo uma perspectiva única sobre ambientes urbanos.
Ler mais
Matrix New York apresenta três modelos distintos: Matrix-Game-3.0, Matrix-Game-3.5 e PanoWorld. Cada modelo recebe a mesma observação do Street View e trajetória do controlador, diferindo apenas no adaptador de ação utilizado. O Matrix-Game-3.0 usa ações de teclado e de inclinação da câmera, o Matrix-Game-3.5 emprega uma trajetória de câmera para o mundo, e o PanoWorld utiliza uma trajetória de tradução sobre uma panorâmica completa de 360°. Esses modelos são projetados para funcionar em uma única GPU sem ajuste fino, garantindo desempenho eficiente.
O visualizador interativo da ferramenta permite que os usuários selecionem uma localização em um mapa ou lista para reproduzir seu desdobramento, com o painel abaixo do vídeo exibindo a entrada do controlador no quadro exibido. Esse recurso fornece uma visão abrangente de como os modelos operam e interagem com o ambiente virtual.
Matrix New York é particularmente útil para planejamento urbano, análise de tráfego e aplicações de realidade virtual, oferecendo uma experiência detalhada e imersiva das ruas da cidade de Nova York. No entanto, é importante notar que a ferramenta tem limitações, como o veículo ego composto sendo uma camada 2D que não interage com o conteúdo gerado. Além disso, grandes mudanças de direção longe das interseções podem direcionar a câmera para fachadas, limitando a eficácia da ferramenta em certos cenários.
- CategoriaGeradores de vídeo com IA
- Modelo de preçosCódigo aberto
- ImplantaçãoNuvem
- PlataformasWeb
Recursos principais de Matrix New York
Integração com Google Street View
Renderização de veículos em 3D
Modelo cinemático de bicicleta
Modelos de mundo em vídeo interativos
Operação em uma única GPU
Três modelos distintos
Visualizador interativo
Licença Apache-2.0
Como usar Matrix New York?
Selecionar localização: Escolha uma localização no mapa ou na lista
Recuperar panorâmica: Obtenha a panorâmica mais próxima do Google Street View
Remover veículos: Elimine veículos em primeiro plano
Inserir veículo 3D: Renderize um veículo 3D sob uma câmera de perseguição
Simular controle: Use o modelo cinemático de bicicleta para controle de veículos
Visualizar desdobramento: Reproduza o desdobramento no visualizador interativo
Casos de uso de Matrix New York
- Planejamento Urbano
- Análise de Tráfego
- Realidade Virtual
- Simulação de Veículos
- Ferramenta Educacional
