Почему сложно? Джинни только предположила его увлечение мужчинами, Невилл этого не подтвердил. И потом, мы же сейчас имеем в виду простой разговор. С Гермионой же он может разговаривать по душам. Чем хуже Джинни? Ему даже отвечать не придется, она уже все решила для себя. А уж выслушать-то он может.