A Hong Kong en 1962, deux couples emménagent le même jourdans une petite pension. Mr Chow et sa voisine de palier Mme Chan découvrent bientôt que leurs conjoints respectifs entretiennent une liaison. Choqués par cette découverte, les époux trompés se rapprochent l'un de l'autre.