在香港，聂荣臻度过了一段艰苦卓绝的岁月，然而一位秀丽聪颖的女性却让聂荣臻的生活充满了温馨。她就是在香港担任机要交通员的女共产党员张瑞华。
“后来家里的保健护士问过妈妈：‘您和首长当年谁追谁啊？’”聂力回忆说，“妈妈笑着说：‘当然是他追我了。他常来看我，找我聊天，我还不懂么？’”
聂荣臻初次对张瑞华表达爱慕之情时，张瑞华害羞得不知如何是好。“那两天，母亲脑海里翻来覆去都是‘那个人’的影子：他好像挺严肃，挺严厉……但是，又从未见过他发脾气……他个子挺拔，相貌坚毅，还特别爱整洁……那严厉一点又怎么样？嗨！不怕他！……母亲轻松的笑了，从心里同意了。”
1928年4月，党组织批准了他们的婚姻。这年聂荣臻29岁，张瑞华19岁。组织上规定，搞地下工作的同志，男的每月15元，女的每月7 元，每人另有3元交通费。这点收入在香港并不算多，还要不停地外出，生活自然是非常困难。“母亲告诉我，整个夏天，父亲只有一件绉纱短袖白衬衣”。有一次，张瑞华提出让丈夫陪她到附近的商店逛逛，聂荣臻以为妻子想买衣服了，就陪她去了。到了柜台，张瑞华却让售货员拿过一件男式短袖衫，逼着他试穿。聂荣臻明白了妻子的意思，又拧不过，可他真的是不想为自己破费，眼珠转了转，便凑到妻子耳边说：“有情况。”他拉着妻子匆匆离开店铺。“等母亲明白这不过是父亲玩的花招时，只能苦笑。”
三次虎口脱险
“父亲在香港曾经数次历险。”聂力在其回忆录里详细记载了父亲三次遇险情形。
第一次是结婚前，聂荣臻外出和恽代英、叶剑英碰完头，回自己的住处，刚到门口，就看到他雇请的阿姨，正把他的行李往楼下搬。聂荣臻感到十分奇怪：她为什么搬我的行李？但警惕性驱使他没有吭声。那位阿姨倒是个好心人，机警地给他递了个眼色。聂荣臻知道出了事，从容地离开了。
事后得知，广东省委机关被敌人破获了，敌人搜查时见到一张写有聂荣臻住址的小纸条，便立即扑过来了。那是广州起义失败不久，聂荣臻刚到香港，为了便于联系，就把自己住址写了一张小纸条给省委秘书长沈宝同。恰巧那会儿父亲不在，躲过一劫。