'I have to learn' = 'Muszę się nauczyć'

No. 'Się' is a reflexive pronoun, so uczyć się literally means to 'teach oneself', i.e. to study.

'I must teach' would be simply 'Muszę uczyć'.