Aktorka razem z mężem Olgierdem Skirgiełło-Jacewicz miała domek w Białobrzegach koło Nieporętu nad Zalewem Zegrzyńskim. Gdy była już na emeryturze często przyjeżdżali do niej znajomi i grali w brydża. Podczas jednego z takich letnich spotkań doszło do tragedii. Olga Bielska zasłabła po wejściu do wody i utonęła. Ciało odnaleziono dopiero kilka godzin później. Miała 73 lata.
Zmarła została pochowana w rodzinnym grobowcu męża na Starych Powązkach w Warszawie. Olga Bielska została zapamiętana przez widzów przede wszystkim jako Agata Ostrowska, ciotka Anny (Elżbieta Starostecka) z serialu "Czarne chmury". Zagrała także w takich produkcjach jak "Życie na gorąco", "Ceremonia pogrzebowa" i "Misja specjalna".
Odeszła nagle... Była uosobieniem radości życia. Podobna, ciepła i ogromnie towarzyska. Błyskotliwa i dowcipna, o dużej inteligencji - wspominał ją aktor Witold Sadowy.
Olga Bielska to nie jedyna osoba z polskiego środowiska aktorskiego, która utonęła. W czerwcu 1937 r. podczas wypadku żaglówki na Morzu Bałtyckim, na trasie między Gdynią a Gdańskiem, utonął aktor Wacław Pawłowski. W 1953 r. w Bałtyku śmierć poniósł aktor Mieczysław Borowy, który przyjechał na wakacje do Jastarni.
11 czerwca 1972 r. w Narwi utonął zaledwie 25-letni Andrzej Nardelli, którego widzowie kojarzą z ostatniej sceny "Co mi zrobisz jak mnie złapiesz".
Woda zabrała także aktora Włodzimierza Macudzińskiego, który utonął w jeziorze Łąkorz koło Nowego Miasta Lubawskiego. Do tragedii doszło 17 sierpnia 2003 r.
20 lipca 2023 r. podczas wakacji na Sardynii utonęła natomiast niedowidząca polska aktorka Maria Reimann. Miała 41 lat, osierociła 14-letniego wówczas syna, Franka. Jej grób znajduje się na Powązkach Wojskowych w Warszawie.