不正当男女关系如何进行认定?