Von 1977 bis 1982 lebte Herbert Herrmann mit seiner Kollegin Jutta Speidel zusammen, von 1983 bis 1998 mit der Schauspielerin Susanne Uhlen. Aus dieser Beziehung ging ein Sohn (1988) hervor. Seit 2003 lebt er mit der Schauspielerin und Autorin Nora von Collande zusammen.

Herbert Herrmann lebt in Deutschland, Frankreich und der Schweiz.