Считается, что на месте костел существовал деревянный костел, который построили около 1370 года литовские князья Кориатовичи.