Родилась в семье выходца с Филиппин и урожденной англичанки. Начала спортивную карьеру под девичьей фамилией ее матери — Виктория Тэйлор. В 1945 году выигрывала серебро и бронзу на чемпионате США, в том же году выходит замуж за своего тренера.
В 1946—1947 гг. — чемпионка США в прыжках с вышки, а в 1948 году и с 3-метрового трамплина. На Олимпийских играх в Лондоне (1948) также первенствовала в тех же дисциплинах. Была первой американкой азиатского происхождения, победившей на Олимпиадах. На 3-метровом трамплине победа Дрейвс стала для американок шестой подряд на Олимпиадах, начиная с 1920 года.
После Олимпиады некоторое время выступала в шоу Бастера Краббе. С 1950 года посвятила себя семье, воспитывая четырех сыновей (Дэйл, Джеффри, Ким, Дэвид). В 1969 году ее имя было включено в международный Зал славы водных видов спорта.
