Dans l'absolu je dirais oui, mais bien vérifier les assurances de location si ce n'est pas votre véhicule.
Comme toutes les gravels il y a toujours des risques, bien adapter sa conduite. Des connaissances ont cassé le moteur de leur Duster sur la 54 (Snaefellsnes, non goudronnée entre Stykkisholmur et la 60) en délogeant une pierre, pourtant route à 2 chiffres donc axe majeur et passant, sur lequel on croise tout type de véhicule.
La 862 est goudronnée tout le long, donc si vous parlez plutôt de la 864 (l'autre côté de Dettifoss) par contre sans 4x4 c'est non, route trop défoncée (d'ailleurs marquée mountain vehicles sur road.is)
Je ne suis jamais passé par les autres mais ne semblent pas difficiles sur street view, on croise d'ailleurs des véhicules standard. La 925 est goudronnée sur quasiment toute sa longueur aussi