Окончил Истменовскую школу музыки (1943), затем в 1952—1953 гг. занимался в Париже у Нади Буланже. В 1944—1958 гг. преподавал в женском колледже Университета Северной Каролины, в 1960—1984 гг. в Университете Британской Колумбии.
В 1966—1969 гг. совершил несколько поездок в Японию для изучения искусства игры на флейте сякухати и в дальнейшем выступал также с концертами на этом инструменте, в том числе в дуэте с исполнителем на кото Миёко Кобаяси. Влияние японской музыкальной культуры присутствует и в собственных композициях Вайсгарбера — в том числе в «Киотских пейзажах» для оркестра, вокальном цикле «Десять японских народных песен» и др.
