Mi opinión serdj es que no creo que se pueda, la razón es básicamente que n o existe en el
manual de referencia del API v3.9 ningún objeto relacionado con los edificios. Entiendo que te refieres a los modelos tridimensionales de los edificios, ¿cierto?.
De cualquier modo, fijate que cuando le pides a gmaps que te calcule una ruta desde o hasta una localización seleccionada 'clickando en el mapa' Google calcula la distancia siempre a la calle o carretera mas cercana (donde tenga google topología o una red habilitada).
No se si me he explicado bien serdj, así que ante cualquier duda o aclaración ya sabes... Pregunta.