杨振宁喜欢与中学生谈话。他的好友库兰特夫妇说,在他们认识的科学家中,杨振宁和费曼是仅有的两个能与孩子平等交往、「有孩子般天真个性」的人。
杨振宁一生在象牙塔中,年少时在清华园如此,西南联大时期,以及后来到美国的学术生涯依然如此,其中普林斯顿高等研究院的17年更是象牙塔中的象牙塔。这让杨振宁一生保持着某种简单与纯真。葛墨林说:「在他的眼睛里人的本性还是很善良。就是为什么要这样呢,他老觉得他不好理解。我老是劝他,我说杨先生,社会很复杂,您要注意防范了。」美国自由开放的环境也帮助他保持了这一点。杨振汉说:「他没有我们中国人在解放以后的社会,经过各种运动的这种(经历),他不觉得这个社会有什么压力。」杨振宁自己也喜欢他身上的这一点:「我想我处人处事都比较简单,不复杂,就是没有很多心思,我喜欢这样的人,所以我就尽量做这样子的人。」
但另一方面,杨振宁又不像一个象牙塔里的人。
他兴趣广泛,1970年代以后他愿意走出书斋,出任全美华人协会首任会长,做促进中美建交的工作就是一个例子。「我觉得你跟他待一会儿你就知道了,他这个人兴趣很广泛,听你话也非常注意,差不多随时随地都很喜欢动脑筋的。」杨振汉对《人物》说。
面对他关心的重要问题,他还总是忍不住发表意见,「动不动还是我要写篇文章,我要表明我的观点。」2016年,他发文反对中国建大型对撞机,再度引起舆论热议。翁帆有时嫌他「过于直率」,「你何苦要写呢?过后又有些人要骂你了。」杨振宁回答:「我不怕。我讲的是真话!」
他性格开朗,从来不是「高处不胜寒」的感觉。做研究的时候,几何题目想不出来,先放一放,唱两句歌,兜一圈回来再来。好友黄昆有个极贴切的评价,他说「杨振宁是一个最正常的天才」。
熟悉杨振宁的人对他的描述最多的几个特点是:会关心人、慷慨、没有架子。接受《人物》采访时,几乎每个人都可以说出一些让他们感动的细节。朱邦芬回忆,杨振宁的老友黄昆(著名物理学家,中国固体和半导体物理学奠基人之一)生前喜欢听歌剧,杨振宁知道他这个爱好后特地买了台音响设备送给他。葛墨林至今记得杨振宁请他吃的一盘炒虾仁。1986年,他有次从兰州大学到北京饭店看杨振宁,吃饭时杨振宁特地点了一盘他自己不爱吃的炒虾仁。杨振宁说,这是给你吃的,你在兰州吃不着虾。《曙光集》编辑徐国强说,有时杨振宁还会向他做一些私人之间的「善意的提醒」,比如跟某某打交道的时候别太实心眼。