桓帝时小黄门，与宦官单超、左悺、具瑗、徐璜合谋诛灭外戚梁冀，封汝阳侯，时称“五侯”。唐衡贪暴，欲以女妻汝南傅公明，公明不娶，最后嫁荀彧。延熹七年（164年）死。赠车骑将军。其弟唐珍（字惠伯，一云桂阳人，按范晔《后汉书》、袁宏《后汉纪》均云唐珍颍川人，《续汉书》亦云“太常颍川唐珍为司空，中常侍唐衡弟”桂阳一说不知是何故），历任司隶、太常、司空。其兄唐玹为京兆虎牙都尉、京兆尹。（《后汉书·赵岐传》：先是中常侍唐衡兄玹为京兆虎牙都尉，岐数为贬议。后玹为京兆尹，收岐家属宗亲，尽杀之。岐逃难四方，卖饼北海市中。）