Realmente es entre tu padre y su amigo, si está bien que ella esté allí cuando él no esté en casa. Parece que este es el tipo de amistad donde estaría bien, ya que se conocen desde hace años y ella solía vivir allí.
Creo que el problema es entre tú y tu papá. Si te molesta tener a esta mujer y su hija cerca cuando tu papá no está en casa, entonces debes avisarle. Él puede o no puede cambiar nada. Creo que lo menos que podría hacer es avisarte cuándo van a estar allí, para que puedas planear hacerte escaso.