Die frühere Kirche brannte am 24. Mai 1934 nieder. Gerettet werden konnten die Abdeckung des Altars sowie das metallene Turmkreuz. An gleicher Stelle wurde 1936 eine aus Ziegelstein gemauerte Kirche mit rechteckigem Grundriss und quadratischem Holzturm an der Westseite fertiggestellt. Im Jahr 1945 wurde die Kirche über mehrere Monate als Stall für die Kühe der Sowjetarmee genutzt. Ein Teil des Dachs, der Altar sowie die Orgel wurden dabei zerstört. Die Einwohner von Kobylanka reparierten das Dach selbst und bauten einen provisorischen Altar, in dem sich das Abbild des Kirchenpatrons wiederfand.