Usa edificios y terrenos a tu alrededor en el SDK de Android (Kotlin/Java)

Las APIs de Streetscape Geometry proporcionan la geometría del terreno, los edificios y otras estructuras en una escena. La geometría se puede usar para la oclusión, la renderización o la colocación de contenido de RA a través de APIs de prueba de colisiones. Los datos de geometría del paisaje urbano se obtienen a través de las imágenes de Google Street View.

Prueba la muestra

En la app de ejemplo geospatial_java, se muestra cómo obtener y renderizar geometrías de paisaje urbano.

Configura la API de Geospatial

Para usar Streetscape Geometry, deberás configurar la API de Geospatial en tu proyecto. Sigue las instrucciones para habilitar la API de Geospatial para configurarla.

Habilita la geometría del paisaje urbano

La API de Geospatial obtiene datos de Streetscape Geometry cuando GeospatialMode se establece en GeospatialMode.ENABLED y StreetscapeGeometryMode se establece en StreetscapeGeometryMode.ENABLED.

Config config = session.getConfig();
// Streetscape Geometry requires the Geospatial API to be enabled.
config.setGeospatialMode(Config.GeospatialMode.ENABLED);
// Enable Streetscape Geometry.
config.setStreetscapeGeometryMode(Config.StreetscapeGeometryMode.ENABLED);
session.configure(config);

session.configure(
  session.config.apply {
    // Streetscape Geometry requires the Geospatial API to be enabled.
    geospatialMode = Config.GeospatialMode.ENABLED
    // Enable Streetscape Geometry.
    streetscapeGeometryMode = Config.StreetscapeGeometryMode.ENABLED
  }
)

Obtén la geometría del paisaje urbano en una sesión de ARCore

session.getAllTrackables(StreetscapeGeometry.class);

session.getAllTrackables(StreetscapeGeometry::class.java)

Comprende StreetscapeGeometry

StreetscapeGeometry contiene información sobre un edificio:

• StreetscapeGeometry.getType()
  Identifica StreetscapeGeometry como terreno o edificio.
• StreetscapeGeometry.getMesh()
  Obtén un polígono Mesh que corresponda a este terreno o edificio.
• StreetscapeGeometry.getMeshPose()
  Describe el origen de la geometría. Todos los puntos de Mesh deben transformarse con StreetscapeGeometry.getMeshPose().
• StreetscapeGeometry.getQuality()
  Proporciona la calidad de los datos de malla. Los niveles de detalle se describen en el estándar CityGML 2.0.

Edificio LOD 1

StreetscapeGeometry.Quality.BUILDING_LOD_1 consiste en situaciones de edificios extruidas hacia arriba hasta una superficie plana. Es posible que las alturas de los edificios no sean precisas.

Edificio LOD 2

StreetscapeGeometry.Quality.BUILDING_LOD_2 tendrá una geometría de mayor fidelidad. Las paredes y los techos de malla se ajustarán mejor a la forma del edificio. Es posible que los elementos más pequeños, como las chimeneas o los respiraderos del techo, sobresalgan de la malla.

Información sobre Mesh

Mesh es una malla de polígonos que representa una reconstrucción de superficie de la geometría del paisaje urbano. Cada Mesh incluye un búfer de vértices y un búfer de índice:

• Mesh.getVertexListSize()
  Recupera la cantidad de vértices en esta malla.
• Mesh.getVertexList()
  Obtén las posiciones concatenadas de los vértices de la malla, en coordenadas relativas a StreetscapeGeometry.getMeshPose().
• Mesh.getIndexListSize()
  Recupera la cantidad de índices en esta malla.
• Mesh.getIndexList()
  Obtén los índices de los vértices que conforman un rostro.

Cómo adjuntar contenido de RA a un StreetscapeGeometry

• Habilita la profundidad geoespacial y usa una prueba de profundidad. Este es el método recomendado y más sencillo.
• Usa Trackable.createAnchor() para crear un ancla en una pose determinada unida a una StreetscapeGeometry. Este ancla heredará su estado de seguimiento del elemento superior StreetscapeGeometry.

Realiza una prueba de posicionamiento en StreetscapeGeometry.

Frame.hitTest() se puede usar para realizar pruebas de posicionamiento con la geometría del paisaje urbano. Si se encuentran intersecciones, HitResult contiene información de pose sobre la ubicación del hit, así como una referencia al StreetscapeGeometry que se golpeó. Esta geometría del paisaje urbano se puede pasar a Trackable.createAnchor() para crear un ancla adjunta.

for (HitResult hit : frame.hitTest(singleTapEvent)) {
  if (hit.getTrackable() instanceof StreetscapeGeometry) {
    Pose hitPose = hit.getHitPose();
    hit.getTrackable().createAnchor(hitPose);
  }
}

for (hit in frame.hitTest(singleTapEvent)) {
  if (hit.trackable is StreetscapeGeometry) {
    val hitPose = hit.hitPose
    hit.trackable.createAnchor(hitPose)
  }
}

Habilita la profundidad geoespacial

La profundidad geoespacial combina la geometría del paisaje urbano con la entrada de un sensor local para mejorar los datos de profundidad. Cuando se habilita la profundidad geoespacial, se modifican la profundidad de salida y las imágenes de profundidad sin procesar para incluir la geometría del paisaje urbano rasterizada, además de la profundidad observada localmente. Esto puede mejorar la precisión de las poses con la función Profundidad.