证明:$(1)$∵四边形$ABCD$是平行四边形,
∴$BO=OD。$
∵$E$是$CD$边的中点,
∴$DE=CE,$
∴$OE$是$△ BCD$的中位线,
∴$OE// BC,$即$OE// FG。$
∵$OF⊥ BC,$$EG⊥ BC,$
∴$OF// EG,$
∴四边形$OEGF $是平行四边形。
∵$∠ OFG=90°,$
∴平行四边形$OEGF $是矩形。
$ (2)$∵四边形$ABCD$是菱形,
∴$AC⊥ BD,$
∴$∠ BOC=∠ COD=90°,$$OB=OD=\frac {1}{2}BD=4,$$OC=\frac {1}{2}AC=3,$
∴$BC=CD=\sqrt {4^2+3^2}=5。$
∵$E$是$CD$边的中点,
∴$OE=\frac {1}{2}CD=\frac {5}{2}。$
∵$OF⊥ BC,$
∴$S_{△ BOC}=\frac {1}{2}BC· OF=\frac {1}{2}OB· OC,$
∴$OF=\frac {OB· OC}{BC}=\frac {4×3}{5}=\frac {12}{5},$
∴矩形$OEGF $的面积$=OE· OF=\frac {5}{2}×\frac {12}{5}=6。$