胡枫原名胡继修，1932年1月18日出生在广州西关柔济医院，他的祖屋在如今的西关和平中路，他的爷爷是著名的古董商，生意遍布广州、香港、上海等各大城市。当年胡枫的妈妈怀着他的时候是在香港，而胡枫的爷爷不想自己的孙子出生在殖民地，于是胡枫的妈妈便回到了广州待产。
胡枫小时候生活在广州和香港两地，直至1941年，香港沦陷，于是胡枫只能一直留在广州生活，直至抗日战争结束。
后来内战爆发，胡枫的爷爷把所有产业都转移到了香港，从此胡枫也随之一直定居在香港。到了香港后的胡枫也一直过着阔少爷般的富人生活。
出生在古董商之家的胡枫从来都对古董没什么兴趣，然而却从小就对表演有着浓厚的兴趣，然而他的家人却一直都看不起演戏这项职业。1953年，21岁的胡枫背着家人偷偷报考大成电影公司，结果被选上了，从此胡枫便开展了他的演艺人生。同年，还主演了他人生当中的首部电影《男人心》，与他搭档的更是当年大名鼎鼎的“花旦王”方艳芬。
刚出道的胡枫便成为了大成电影公司的力捧新人，与他搭档的基本上都是当时的巨星，除了“花旦王”方艳芬之外，与他合作的包括任剑辉、白雪仙、郑碧影、新马师曾、梁醒波等等当时都可以称得上为超级巨星，而当时只有十几岁的少年李小龙也曾与胡枫多次过合作。
在胡枫事业处于上升期的时候，他在一个酒会当中认识了当时还是演员的吕咏荷，两人一见钟情，很快便走在一起，到了1957年，两人步入了婚姻殿堂。由于公司规定胡枫必须隐瞒感情生活，所以胡枫一直都只能委屈了他的太太，而吕咏荷自从和胡枫结婚后便退出了影视圈。
在六十年代初，随着电懋、邵氏等南洋背景的电影公司的全面崛起，以国语演员为班底的长城电影和以粤剧演员为班底的大成电影都相继没落，胡枫在演艺圈的地位也大不如前，之后胡枫便以饰演配角为主。
1964年之后，胡枫在电影方面出现了明显的减产。到了七十年代中期，胡枫加盟丽的电视，从此他便把工作重心转移到了荧幕上。到了八十年代后期，胡枫转投TVB。
从大银幕再到小荧幕，从昔日的当红小生到后来演慈父、师傅或善良前辈为主的配角，历经高低起伏的胡枫本身就是一册精彩纷呈的光影史记。然而无论演艺事业是如何的变幻，生活上的胡枫却一直过得潇潇洒洒。
胡枫曾评价自己说：“我的人生实在是十分幸运的，从出世到现在几十岁的人都没遇过什么太大的烦恼，也从来未试过为生活忧愁。”从小生演到中生，到老生，胡枫一直都没有受到过太大冷落，实在非常难得。
胡枫热爱跳舞，而且舞艺高超，年轻时候就有“舞王修”之称。他生性乐观、洒脱，为人正直、亲切，好交友，喜欢热闹。所以他在娱乐圈的人缘一直都很好。除了拥有谢贤、曾江、罗兰等一大批同辈好友之外，包括黎明、张学友、林忆莲等在内的众多后辈都是他干儿子干女儿。
与妻子结婚多年，胡枫和妻子一直都是模范夫妻，胡枫说：“我脾气又好，她的脾气又好，我们几十年来从来没有吵过一次架。”胡枫一共有五个子女，而且还有众多孙孙塞塞，尽管他的子孙长大成人后都各奔东西，但是整个大家庭一直都相亲相爱、和和睦睦。
2016年，从恋爱开始陪伴胡枫六十多年的太太吕咏荷病逝。他的太太在临别之前也表示自己十分安乐，没有任何未了的心愿。
自从太太去世后，胡枫也没有过分的伤感，他一直都频繁地活跃在各种社交场合和影、视、舞台当中。2018年2月10日，胡枫在香港红馆举办《86破晒纪录演唱会》，成为在红馆开演唱会最老的艺人。
今年他还将继续在红馆举办演唱会，本来这场演唱会他去年就打算举办的了，连演唱会名称都定好为《胡枫88开心派对演唱会》，只是后来因为疫情而取消了。
近年来，胡枫和罗兰经常出双入对，行为十分亲密。有传他和罗兰正在开展一段黄昏之恋，也有网友说两人多年来都只不过是兄妹关系。关于这些传闻胡枫和罗兰一直都没有回应，他们两人都已经是快九十岁的人了，根本就不在乎外界的各种传闻。