杨氏四知堂出自东汉名士杨震,据传,四知堂有副对联:四知传家永,三公世泽长。四知一说,溯源于东汉时华阴杨震家族。公元 108 年四知堂杨姓堂号,出自东汉名士杨震,公元 108 年(东汉永初二年)春,他调任东莱太守的时候,路过昌邑,身为命官的杨震,昌邑县令王密是他在荆州刺史任内荐举的官员,听得杨震到来,晚上悄悄去拜访,并带金十斤作为礼物。虽然东汉时的一斤只相当于今天的250克左右,但金十斤也相当于今天的五斤金,等于好几根金条了。
杨震,字佰起,人称“关西夫子”。在旋即调任涿郡太守时,路过昌邑,经他举荐的昌邑县令王密,夜怀黄金十斤送给他,杨震坚辞不受。王曰:“夜无人知。”杨震答:“天知、地知、我知、子知,何谓不知。”王密羞惭而退,故杨震以“四知”扬名后世。三公一说指杨震,他曾任荆州剌史、涿郡太守、司徒、太尉,司徒、太尉属“三公”,可见杨震身居高位。