四大家族陈，钟，韩，荀的一员，颍川荀氏乃是战国大儒荀子之后。

其祖父荀淑知名当世，号为神君；荀淑有八子，号称八龙，分别为荀俭，荀绲，荀靖，荀焘，荀汪，荀爽，荀肃，荀旉。

荀彧便是八龙当中荀绲的儿子，荀绲忌惮宦官，于是就让荀彧娶中常侍唐衡的女儿为妻，当时消息传出的时候，让天下的士人们俱感到很不可思议，认为连荀家都自甘堕落了。

南阳名士何颙由此碰到荀彧，看了他的面相后大为