Exacto, es el criterio, al menos de Hacienda, desde hace muchos años y, por lo que veo, sigue manteniendo. Lo que cuenta, a efectos de imputar el uso privativo, no es el uso efectivo en si sino la mera disponibilidad para poder hacerlo.
De hecho, y por eso comentaba lo de si se deja el vehículo en las instalaciones de la empresa, a menudo una de las formas de actuar por parte de la Inspección es visitar los centros de trabajo (o aparcamientos de sus vehículos) fuera de la jornada laboral, incluso los fines de semana.
Si te llevas el vehículo para casa, más allá del uso privado que realmente le des o no, se considera que lo tienes a disposición para uso privado.