В Папанове не было ничего от знаменитого артиста. Будучи очень известным и узнаваемым, он тяготился своей известностью и чуждался всего, что ее подчеркивало бы. Скрывался за темными очками и невзрачной одеждой. Не было в нем ничего показного. Александр Прошкин, режиссер фильма «Холодное лето пятьдесят третьего», вспоминал, что Папанов, в отличие от других людей, не афишировал свою интеллигентность, и сквозь наружную его простоватость вдруг прорывалась то цитата из Тютчева, то еще что-либо подобное…