7岁时拜伦上学了。由于从小受家庭的影响，拜伦性格孤僻，很少和同学们一起玩耍，一些同学还经常嘲笑他身上的残疾，拜伦常和同学打架。拜伦也不喜欢老师课堂上讲的内容，因此成绩比较差。但拜伦非常喜欢看课外书，他常常捧着《一千零一夜》《堂吉诃德》等书籍，一看就是半天。他还一直保持着对诗歌的喜爱，一有感想便写成诗拿给姐姐看。10岁那一年，拜伦的叔父去世了，因为他没有亲生儿子，拜伦便继承了他的爵位和庄园。这样拜伦成了名副其实的贵族，原先看不起他的人都争先恐后地巴结他，连老师也改变了以前对他不闻不问的态度，亲热地喊他“拜伦男爵”。拜伦对此很反感，他讨厌这些人的世故和欺软怕硬。
1805年，17岁的拜伦进入了剑桥大学，学习历史和文学。拜伦非常喜欢这两门功课，学习特别用功。他除了上课就是在图书馆里看书，这期间他读了大量文学、历史、哲学方面的书籍。在大学期间，他出版了第一本诗集《懒散的时刻》。拜伦这段时间的诗主要反映了他对当时现实的不满和对上流社会的蔑视，表达了他对普通劳动人民的同情。不过这本诗集并没有引起当时人们的注意。1808年，拜伦毕业了。他先是到欧洲南部进行了一次长途旅行。这期间，他看到了西班牙人民反抗拿破仑入侵的战争场面；看到了希腊人民在土耳其的奴役下的悲惨生活。这些对拜伦的触动很大，在旅途中他开始创作长诗《恰尔德·哈罗德游记》。