Aumente seu alcance com a Profundidade geoespacial

Imagem principal da profundidade geoespacial

A API ARCore Depth agora oferece suporte a Geospatial Depth, que aumenta automaticamente o alcance e a velocidade da API Depth quando o Streetscape Geometry também está ativado. Em um local com cobertura VPS e com Streetscape Geometry ativado, as imagens de saída da API Depth incluem a geometria do terreno e da construção recuperada na área a 65 metros da posição atual. Esses dados de profundidade recuperados da geometria são mesclados com observações de profundidade locais e atualizados à medida que o usuário se move para um novo local.

As chamadas da API Depth do ARCore agora fornecem observações locais da câmera, além de edifícios e terrenos do Streetscape Geometry, mesclados em uma única imagem de profundidade.

Compatibilidade do dispositivo

O Geospatial Depth está disponível em todos os dispositivos com suporte à API Depth. Esse recurso não requer um sensor de profundidade de hardware compatível, como um sensor de tempo de voo (ToF, na sigla em inglês). No entanto, a API Depth usa todos os sensores de hardware compatíveis que um dispositivo possa ter.

Impacto no desempenho

O Geospatial Depth apresenta um pequeno cálculo único no início da sessão para integrar Streetscape Geometry à representação de profundidade quando transferido inicialmente, mas não aumenta consideravelmente o custo da computação de profundidade.

Faixa de profundidade

Sem o recurso Geospatial Depth, os intervalos típicos de imagens de profundidade ficam a cerca de 20 a 30 metros de distância, com a densidade e a precisão das observações de profundidade reduzidas além desse intervalo. Com a opção "Geospatial Depth" ativada, é comum ver valores de profundidade de amostragem densa atingirem o máximo de 65,535 metros, mesmo com um pouco de movimento inicial.

Casos de uso

A API Depth do ARCore pode ser usada para todos os casos de uso atuais já compatíveis. Com o Geospatial Depth, as imagens de profundidade obtidas em locais com suporte a VPS serão preenchidas com profundidade de longo alcance mais rapidamente do que antes, permitindo casos de uso direcionados a profundidades de longo alcance em ambientes externos. Alguns casos de uso incluem:

  • Oclusão de conteúdo virtual em escala de edifícios e outros efeitos visuais
  • Navegação ao ar livre
  • Medições de distâncias

Limitações

O recurso Geospatial Depth é compatível apenas com áreas que aceitam localização de VPS e Streetscape Geometry. Em outras áreas, a API Depth do ARCore vai funcionar normalmente sem valores geoespaciais.

Pré-requisitos

Entenda os conceitos fundamentais de RA. e como configurar uma sessão do ARCore antes de continuar.

Ativar profundidade geoespacial

Em uma nova sessão do ARCore, Verifique se o dispositivo do usuário é compatível com as APIs Depth e Geospatial. Nem todos os dispositivos compatíveis com ARCore têm suporte à API Depth devido a restrições de capacidade de processamento.

Para economizar recursos, a profundidade é desativada por padrão no ARCore. Ative o modo de profundidade para que o app use a API Depth. Além disso, ative o modo Geospatial e Streetscape Geometry para use o Geospatial Depth.

int32_t is_depth_supported = 0;
int32_t is_geospatial_supported = 0;

// Check whether the user's device supports the Depth API.
ArSession_isDepthModeSupported(ar_session, AR_DEPTH_MODE_AUTOMATIC,
                               &is_depth_supported);
ArSession_isGeospatialModeSupported(ar_session, AR_GEOSPATIAL_MODE_ENABLED,
                                    &is_geospatial_supported);
ArConfig* ar_config = NULL;
ArConfig_create(ar_session, &ar_config);
if (is_depth_supported && is_geospatial_supported) {
  // These three settings are needed to use Geospatial Depth.
  ArConfig_setDepthMode(ar_session, ar_config, AR_DEPTH_MODE_AUTOMATIC);
  ArConfig_setGeospatialMode(ar_session, ar_config,
                             AR_GEOSPATIAL_MODE_ENABLED);
  ArConfig_setStreetscapeGeometryMode(ar_session, ar_config,
                                      AR_STREETSCAPE_GEOMETRY_MODE_ENABLED);
}
CHECK(ArSession_configure(ar_session, ar_config) == AR_SUCCESS);

ArConfig_destroy(ar_config);

Quando o recurso Geospatial Depth está ativado, as imagens de profundidade podem ser acessadas nas chamadas de API existentes, conforme descrito no guia para desenvolvedores do recurso.

// Retrieve the depth image for the current frame, if available.
ArImage* depth_image = NULL;
// If a depth image is available, use it here.
if (ArFrame_acquireDepthImage16Bits(ar_session, ar_frame, &depth_image) !=
    AR_SUCCESS) {
  // No depth image received for this frame.
  // This normally means that depth data is not available yet.
  // Depth data will not be available if there are no tracked
  // feature points. This can happen when there is no motion, or when the
  // camera loses its ability to track objects in the surrounding
  // environment.
  return;
}

O que vem em seguida?