D’après ce que je sais en droit du travail (surtout pour les travailleurs itinérants), le temps de trajet entre le domicile et le premier client, ainsi qu’entre le dernier client et le domicile, peut être considéré comme du temps de travail lorsque tu n’as pas de lieu fixe de travail. C’est différent du trajet domicile-travail classique.
Ton chef a raison dans le cas d’un salarié qui se rend toujours au même bureau, mais pour ton cas, ce n’est pas pareil, car tes déplacements sont essentiels à tes tâches. Il y a d’ailleurs eu des jurisprudences (notamment au niveau européen) qui reconnaissent que ces temps de trajets font partie de la prestation de travail.
Tu devrais peut-être demander un éclaircissement officiel (convention collective, RH) pour trancher la question, car il y a parfois des spécificités selon le statut ou le contrat.
Je suis actuellement dans les RH (Suisse), et j’ai bossé précédemment avec des commerciaux qui se déplaçaient de client en client avec heures de trajet couvertes.