此時，楊過14歲，二武兄弟12歲，郭芙9歲。楊過因為和郭芙、二武兄弟沖突，又大罵柯鎮惡，被郭靖黃蓉送走，離開了桃花島。而柯鎮惡原本就對楊康害死江南五怪耿耿於懷，經此事後，更和楊過勢不兩立。不送走楊過，他就要負氣離開，對師父孝順有加的郭靖又能怎麽選？
/5243fbf2b21193139132f3786e380cd790238d80?x-bce-process=image/resize,m_lfit,w_450,h_600,limit_1/quality,q_85所以，楊過早期跟郭靖夫婦的關系是不好的。到了英雄大會那時，黃蓉第壹次她用那麽溫柔誠懇的對自己說話，眼中充滿著憐愛之情，我只覺胸口熱血上湧，不禁哇的壹聲，哭了出來。想想母子之情，亦不過如此罷。大小武那時總來惹事，不過是幾個孩子爭強好勝，小孩子，誰不想得到更多的關註、更多的愛？
到後來，楊過跟郭靖夫婦關系是很不錯的，尤其楊過很尊敬郭靖，只是郭芙蓉砍斷他的壹只胳膊後，他的心裏可能有疙瘩，所以那麽多年沒有見他們壹面，楊過並不恨黃蓉，他不是那麽小氣的人。