Zich afspelend in 1965, doet Andy Nichol, uit angst ontzettend belachelijk te worden gemaakt en te worden afgestraft door zijn medeleerlingen, net als de meeste kinderen van zijn leeftijd er alles aan om conflicten te voorkomen.
Helaas voor Andy zal hier verandering in komen. Andy wordt zwaar op de proef gesteld als zijn leraar Engels, Mr. Simon (Ed Harris), hem koppelt aan Stanley, de grootste outcast/sociale paria op school.
Andy zal er echter al snel achterkomen dat Mr. Simon hen niet zomaar laat samenwerken. Hij ontdekt uiteindelijk niet alleen dat het acceptabel is om anders te zijn, maar nog belangrijker, hij begint te begrijpen wat de betekenis is van tolerantie en laakbaarheid.
´That´s what I am" is een film waarin deze twee thema´s verenigd zijn, en het laat zien hoe het leven van een jonge man in één schoolperiode voor altijd kan veranderen.