Niedokończony gmach, którego budowę wg projektu architekta Zbigniewa Wahla rozpoczęto w 1938 r. z przeznaczeniem na Sąd Apelacyjny i Prokuratorię Generalną, w maju 1946 r. władze Torunia przekazały Uniwersytetowi. W grudniu 1947 r. oddano do użytku prawe skrzydło budynku, które pomieściło katedry chemii z Wydziału Matematyczno-Przyrodniczego. Część środkową przeznaczono na siedzibę zakładów matematycznych, a w części lewego skrzydła miały być umieszczone katedry fizyki. W latach 1948-1951 prof. Stefan Narębski dokonał adaptacji tych części budynku dla potrzeb uniwersyteckich i prowadził budowę oraz rozbudowę lewego skrzydła gmachu, przeznaczonego na siedzibę katedr fizyki, przy czynnej pomocy i nadzorze prof. Aleksandra Jabłońskiego. Bezpośrednią kuratelę nad pracami budowlanymi sprawował inż. Bronisław Awgul. Już w lutym 1951 r. do tej nowej części przeniosły się zakłady fizyczne i seminarium matematyczne. Uroczyste otwarcie nowego skrzydła budynku nazwanego Collegium Physicum odbyło się 30 września 1951 r. W tej części znajdowała się duża sala wykładowa, 58 pokoi zakładowych i sześć gospodarczych oraz mieszkanie służbowe (w którym mieszkali p. Jabłońscy). W części środkowej gmachu, łączącej oba skrzydła, umieszczone były katedry matematyki, przy których 2 kwietnia 1966 r. otwarto Ośrodek Obliczeniowy. Do roku 1974/75 gmach był siedzibą wszystkich Instytutów Wydziału Matematyki, Fizyki i Chemii UMK.
Do połowy lat 50. w sąsiedztwie siedziby fizyki, od strony ul. Chełmińskiej, znajdował się mały i niepozorny domek z szeroką drogą dojazdową, w którym działała wypożyczalnia karet ślubnych.
