Podczas pierwszego miesiąca działalności w Jasta 2, do końca września Boelcke zestrzelił 11 brytyjskich samolotów, latając na dwupłatowych myśliwcach Fokker D.III, a od 17 września na Albatros D.II.
Boelcke był propagatorem walki zespołowej – jego jednostka latała w dużych zdyscyplinowanych formacjach, ściśle szkolona w taktyce powietrznej według zbioru zasad sformułowanych przez Boelckego (Dicta Boelcke). Boelcke, wypracowując taktykę użycia lotnictwa myśliwskiego, uważany jest niejako za „ojca” niemieckiego lotnictwa myśliwskiego.
Oswald Boelcke poniósł śmierć 28 października 1916, gdy jego Albatros D.II zderzył się w powietrzu z maszyną Erwina Boehmego, podczas walki z brytyjskimi samolotami Airco DH.2 z 24. dywizjonu RFC (Boehme przeżył kolizję). Do śmierci, Boelcke odniósł 40 zwycięstw powietrznych, co dało mu 10. miejsce wśród niemieckich asów tej wojny (na równi z Lotharem von Richthofenem i Franzem Büchnerem).