在桃花島，
楊過已經拜郭靖為師傅，
後來為何兩人不以師徒相稱，
郭靖還要送他上終南山學藝呢？……原因是楊過對師祖爺爺無禮！
話說有一次楊過、郭芙和大小武四人因為鬥蟋蟀而起衝突， 郭芙令大小武追著楊過打， 楊過情急之下把山坡上的石頭推向郭芙三人， 自己則因為害怕在外面躲了兩天。
幾天後， 郭靖讓楊過四人在江南六怪的牌位前磕了頭， 又在大師傅柯鎮惡的見證下收了楊過等人為弟子， 打算正式傳授他們武功。
然而， 黃蓉卻看楊過賊眉鼠眼像極了其父楊康， 又怕他長大了變成另一個禍害， 便主動要求和郭靖分擔教楊過武功的責任， 郭靖覺得妻子聰明伶俐教出來的徒弟肯定不比自己差便答應了下來。
楊過因為能夠不和郭芙等在一起學武而開心， 不想三個月過去了師娘黃蓉只教他《論語》等知識， 卻始終不教他武功， 楊過氣不過便一邊聯繫義父歐陽鋒教的蛤蟆功， 一邊又偷學了一些郭靖教大小武的武功。
一天， 郭芙和大小武又找上門來要和楊過比武， 楊過自知不是對手卻抱著必死之心和三人對打， 武修文騎在他脖子上致使他喘氣不過， 情急之下使出了蛤蟆功，
聞訊趕來的郭靖、黃蓉和柯鎮惡三人逼問蛤蟆功的來歷和歐陽鋒的去處， 楊過隻字不提， 柯鎮惡更是以鐵杖威脅逼問， 楊過寧死不屈， 還說: 你有種就打死我， 我怕你這老瞎子了嗎？
郭靖打了他幾個耳光， 他卻獨自走入大海， “以死明志”， 好在黃蓉在最後關頭將他救上岸。
到了晚上， 郭靖便和他解除了師徒關係， 並表示要送他上終南山學藝。
由此可見， 楊過小時候實在是個頑童， 脾氣古怪， 性格偏執， 加上別人對他天生的猜疑， 以至於他惹下不少禍事。
但反過來講， 無論是黃蓉還是柯鎮惡， 他們不喜歡楊過並沒有錯， 誰叫他不僅拜歐陽鋒為義父還學會了蛤蟆功呢， 誰叫他有那樣楊過爹呢？
或許， 這就是楊過和小龍女十六年後相會時所說的， 冥冥之中自有天意， 一切早就註定了的。