劉錫輝出身於香港中產家庭，家人經營補習社，他與父母及妹妹一家四口生活。其實香港新一代年輕人個個十八般武藝，Edgar去美國讀書之前，在香港讀男拔萃小學、中學一條龍，中學時代的他與賽車完全扯不上關係，其課餘活動是冰球及合唱團，並在國際賽上贏過不少獎項。
「中學時期我是合唱團男低音，贏過三屆國際冠軍。」唱歌同賽車完全是兩個世界，但Edgar指兩者有共通點：「其實賽車都要節奏，每個圈每個彎，我都會為自己打拍子。」
運動方面，Edgar是冰球及滾軸溜冰曲棍球兩項香港代表，司職守門員，他說：「大約6、7年前我代表過香港參加冰球學界世界盃，得到第4名，只差一點點就可進佔三甲，回想起來實在有點可惜。」