Виктор Брак родился 9 ноября 1904 года в семье врача. По образованию экономист, в 1928 году окончил Мюнхенскую высшую техническую школу. Отец Брака — врач из Гёттингена, мать — поволжская немка из Саратова. В 1921 году семья переезжает в Мюнхен. 1 декабря 1929 года вступил в НСДАП (партийный билет Nr. 173 388). В 1934 году женился на Теа Обер. Отец четырёх детей.

В партии Брак быстро поднимался по карьерной лестнице, благодаря дружбе с Генрихом Гиммлером, у которого некоторое время служил шофёром. Благодаря этому с 1932 года Брак начал работать в Мюнхенском центре НСДАП, более известном как «Коричневый дом». Он был заместителем Ф.Боулера — начальника личной канцелярии А. Гитлера. После прихода Гитлера к власти переехал в Берлин.

В 1939 году, когда началась печально известная «Программа Т-4», ответственность за её проведение была положена на профессора Карла Брандта и Филиппа Боулера, который в свою очередь переложил эти обязанности на Виктора Брака. Тем самым именно Виктор Брак фактически руководил этой программой в период с 1939 по 1945 года. В годы войны Брак руководил также уничтожением и проведением экспериментов над евреями, в т. н. «Акция Райнхард». Жертвами Акции Т4 стали около 70 тысяч человек, акции Райнхард около 2 миллионов человек.

В августе 1942 года Брак покидает канцелярию фюрера и вступает в горную дивизию СС «Принц Евгений» в качестве унтерштурмфюрера. В ноябре 1944 года вновь возвращается в канцелярию фюрера.

Виктор Герман Брак был одним из главных обвиняемых на Нюрнбергском процессе над врачами, так как непосредственно руководил проведением акций эвтаназии и опытов над людьми. Брак был обвинён в особой ответственности и участии в преступлениях. 20 августа 1947 года Брак был признан виновным в военных преступлениях, преступлениях против человечности и участии в преступных организациях и приговорён к смерти. 2 июня 1948 года он был повешен в тюрьме Ландсберга-на-Лехе в числе 7 осужденных. От исповеди и последнего слова отказался.