尽管杰米·奥利佛在个人事业上获得极大的成功,但是他也经常成为其他名人或英国的特定族群民众嘲弄的对象。他如青少年般“轻浮”(laddish)的态度,和几乎等同于九○年代中后期“Mockney”[2]现象的口音,使他成为部分人士心中不受欢迎的代表人物,以及电子邮件笑话中的题材。而由于奥利佛在英国媒体上的大量密集曝光,也造成另外一种的批评声音(参见广告、电视节目、和书籍章节)。
在2003年,奥利佛在英国第四频道(Channel 4)的“100位最糟英国人”票选中获得第28名。虽然这项投票的立意并不太严肃和正经,但其灵感是来自英国国家广播公司(BBC)的“100位最伟大英国人”票选。票选的主旨是要找出100位社会大众由喜爱转为厌恶的英国人。提名的人物必须为英国人,并且不可为已过世、正在服刑或审判中的人。
2005年,由于奥利佛在电视节目中屠宰小羊,使他受到新闻记者、动物人权人士以及部分社会大众的强烈抨击。他在《zh-hk: 大城小厨游意篇; zh-tw: 奥利佛出走意大利》(Jamie's Great Escape)节目中割断一头小羊的喉咙,但是却没有先使小羊昏厥。奥利佛也因此可能违反欧盟法律中在屠宰过程中保护动物的规定—所有动物必须先昏厥后才可宰杀。有民众要求控告奥利佛虐待动物。
当奥利佛在他的校园食物活动中坦率的提出各种建言的同时,部分记者和母亲却批评奥利佛经常在节目中,咒骂(使用“arseholes”(混蛋)等字词)在孩子的餐盒里放入不健康食物的母亲们。
2006年9月26日,奥利佛和英国南约克郡的“Rawmarsh Community School”一起成为头版的新闻,由于一群家长集体抗议反对杰米·奥利佛风格的午餐(所有该校的1,100名小学生每天必须食用两份水果和三份蔬菜)。家长们说“我们的孩子有权力选择他们爱吃的食物”。随后家长们在学校附近的三明治和速食店中购买食物,并将这些热腾腾的食物,隔著围篱交给在校内等待的小学生们。杰米·奥利佛针对此事回应“我已经受够了这些混帐”、“如果他们想要害死他们的小孩,就让他们这么做吧”。
这起在学校发生的事件,成为当地小报以及BBC新闻的头条,而家长和奥利佛两方都有受到批评。