Поттер вообще-то первым на нее не агрился как бы. А то, что не встречался с ней - так то вина Дамблдора. А в школе это уже она поставила себя так первой, что у ГП никакого желания с ней общаться в итоге нет. Его вина тут, что он как бы в общем то слишком гордый, и в силу характера не будет бегать за ней и пытаться как-то изменить ее мнение о нем. Он ведет себя так как привык, и вряд ли будет менять себя, чтобы понравиться ей специально, тем более он даже не в курсе, что она агрится именно на его повседневное поведение. Напомню в тексте полно мелочей, в которых ГП не сделал ничего предосудительного, но сделал это в своей манере, а потом в кусочках от лица Дафны мы уже постфактум видим, что она на это агрится. Но это видим мы, а не ГП. Он даже знать не знает этого.