Hola Anna,
Drive puede acceder a archivos fuera del dominio siempre que el propietario de esos archivos lo permita, no hay limitación en este aspecto.
Si lo que quieres es que otros dominios accedan a tus archivos compartidos, entonces sí debes ajustarlo en Configuración para compartir, dentro de Aplicaciones > Google Workspace > Configuración de Drive y Documentos
Saludos