曾姓可能和缯国、鄫国、曾国等古代国家有关。其中缯国在今河南方城县一带，《左传·哀公四年》记曰：「致方城之外于缯关」，缯关即缯国；鄫国在今山东兰陵县一带，汉代此地亦有诸侯国鄫国；曾国又称随国，在今湖北随州一带。
古代炊具有「甑」，曾姓或与此炊具亦有关。此外，少量曾姓源自于少数民族。
秦汉至隋唐时期，史书记载的曾氏人物寥寥，仅见于《晋书》镇南司马曾勰；《南史》清远太守曾孝远；唐代有曾衮，累迁安南都护；曾元裕，唐朝后期名将，历官左散骑常侍。上述曾氏人物大多活动在南方一带。
自宋以后，曾氏人物渐多，其中较大的曾氏家族有：
临江（今属江西）曾氏，代表人物曾三复，官至起居郎兼权刑部侍郎；
抚州南丰曾氏，曾巩、曾肇、曾布、曾纡、曾纮、曾协、曾敦七人皆生于建昌南丰，世称「南丰七曾」；
泉州晋江（今福建晋江）曾氏，代表人物曾公亮，仕仁宗、英宗、神宗三朝，官至参知政事，枢密使和同中书门下平章事等；
汴京（今河南开封）曾氏，代表人物曾觌，乾道七年，迁承宣使、节度使；
曾几，南宋诗人，其先赣州（今江西赣县）人，徙居河南府（今河南洛阳），历任江西、浙西提刑、秘书少监、礼部侍郎。