善于把人民置于控制之下，而且不仅仅采用克格勃的方法，显然是安德罗波夫的特长之一。安德罗波夫的同事和下属都知道他是一位严厉地督促别人工作的上司，而他本人则是—个不知疲倦的工作者。虽然他常打网球，但他根本谈不上有什么癖好，并且他基本上就没有其他的生活爱好了，可以这么说，工作就是他最大的癖好。和喜欢享乐的勃列日涅夫相比，他们之间形成了鲜明的对照：勃列日涅夫常常是在上午11点左右才到办公室，而在几小时之前，安德罗波夫已坐在他的办公桌旁，开始翻阅每天的报告了。那些和安德罗波夫打过多年交道的人—致认为他很冷静，有礼貌而且谈吐文雅。不管是天生如此还是故意做作，他给人的印象是：他是一个沉静、克制和诚恳的人。
安德罗波夫在布达佩斯的情况流传甚广。曾在苏联大使馆充当伺候用餐的女工的博勒太太回忆说，安德罗波夫夫妇经常举办宴会，这些宴会通常是在大吊灯下举行的，有很多手写的卡片标明客人的座次，指引他们在一张红木桌周围的高背靠椅上就座。在宴会上，安德罗波夫和他们谈论油画、歌剧、爵士音乐等等，并且，他们曾经有过一个吉普赛乐队，为他们的宴会助兴。曾任布达佩斯警察局长的科帕奇也曾经说过，安德罗波夫宴会上的吉普赛乐队并不是他私人所有的，而是当地警察局的乐队，他只是经常在举行宴会时借用这支乐队而已。说来也奇怪，安德罗波夫从来不喝苏联男人普遍爱喝的伏特加酒，而是经常喝沃克牌酒。这么看来，他似乎真的对美国的东西非常“倾心”了。