唐仲友，字与政，号悦斋，学者称悦斋先生，浙江金华人。曾任台州知府，从儒学发展史角度看，他有不少可以称道的学说思想，应在中国儒学史上具有一定历史地位。朱熹是南宋的一位理学大家,但与之同朝的唐仲友却并不赞同其学说，就这样引发了一场公案。朱熹一共上了六道奏摺弹劾唐仲友，其中就有宿娼乐营，有伤风化这一罪状，一代才女严蕊也被迫卷入其中。

严蕊原出身书香门第，因家乡遭遇天灾，百姓却仍被官吏强征赋税苦不堪言，其父为民请命上书朝廷却被诬乱民欲谋反被判斩首，其母忧愤过度也撒手人寰。严蕊只得卖身葬母坠入风尘当了一名营妓。她天资聪颖，精通琴棋书画，颇有才情。某日严蕊在天台山遭强徒欺侮，幸遇刚到任的台州知府唐仲友相救，她即兴赋得桃花词两首相谢，赢得也爱好诗文的唐仲友讚赏，此后两人诗词往还，结为诗友。

此曲描述唐仲友赶赴台州任职即逢大旱，因日夕查察灾情，有半月前写下的一对联下联还未续上。这晚趁空闲步上画楼寻诗友，欲求续得下联。严蕊很快便对上了。之后与唐大人谈起自己凄凉往事，更激起唐仲友对她的怜悯与敬佩。严蕊见自己画的《雨荷图》受唐大人讚赏，便再唱一首《雨荷曲》送别大人，相约后会有期。