卡弗自幼心思敏锐，就展现对植物过人的直觉知识。他十岁离开主人卡弗家，到密苏里州尼欧肖（Neosho）的一所政府为黑人设立的初级学校名叫“林肯”的黑人小学只有一间教室的学校读书。由于勤奋向学，加上恩主倾力支持，始得以继续接受教育。13岁时又转到阿肯色州的斯科特堡读高小学。1885年，他自肯萨斯州明尼亚波利市的高中毕业，卡弗一心要上大学，但是那时代没有黑人上大学，他的学历符合高地大学的要求，而且高地大学接受了他的入学请求，但因入学报到时发现乔治是黑人，学校拒绝了他入学，这使他很痛苦，然而他下定决心要读书。有一次在艾奥瓦州温特塞城的一个教会上初遇了缪霍男博士。当他知道卡弗的困难时，就大力推荐卡弗进入宣信大学就读，此时他已经30岁了。卡弗把握机会努力读书，又在老师巴布的推荐下于1890年，他进入艾奥瓦州印地安诺拉的辛普森学院就读。艺术教授见其在植物方面的才华，鼓励他转至州立农业学院就读。他于1894年获得学士学位。受雇于亚米斯实验站，担任著名的植物学家与菌学家路易斯·潘梅尔助理。他于1896年获得硕士学位后，应布克·华盛顿之邀，前往阿拉巴马州塔斯提吉学院，主持新设立的农业系。