Era l'ultima dei sei figli dell'architetto Alfred Weidler e di Margaret Therese Louisa, che era stata un'affermata cantante wagneriana. Come già i fratelli e le sorelle maggiori (Sylvia, Verena, Warner, Wolfgang e George), Virginia fu avviata fin dalla più tenera età alla carriera attoriale nel cinema.
Debuttò nel 1931, ad appena quattro anni, con una piccola parte (non accreditata) nel film Prigionieri. Ben presto le furono offerti ruoli di maggior rilievo. Tra i suoi film più celebri si ricordano Donne (1939) con Norma Shearer, Joan Crawford e Rosalind Russell, dove interpretava Mary, la figlia della protagonista (la Shearer), e Scandalo a Filadelfia (1940), in cui impersonava la sorellina di Tracy Lord (Katharine Hepburn).
Si ritirò dalle scene nel 1943, dopo aver interpretato il film Best Foot Forward e dopo essere apparsa in circa 45 pellicole.
Vita privata
Nel 1947 sposò Lionel Krisel, dal quale ebbe due figli, Ronnie e Gary. Il 1º luglio 1968, colpita da un attacco cardiaco, la Weidler morì nella sua casa di Los Angeles, all'età di 41 anni.