「to make matters worse」は「さらに悪いことには」という意味の慣用表現です。
To make matters worse, they were ordered to move out.
ただでさえ困っているのに、彼らは立ち退きを命じられた。
He is in debt, and to make matters worse, he's lost his job.
彼には借金があり、さらに悪いことには失業してしまった。
To make matters worse, he came in just then.
そこへ彼が入ってきて、ますます困ったことになった。
He was tired and hungry, and to make matters worse, he lost his key.
彼は疲れて腹も減っていた。その上悪いことは重なるもので、鍵をなくした。
To make matters worse, he had no license.
その上彼は無免許ときているから、ますますいけない。
It was getting dark, and to make matters worse, it began to rain heavily.
だんだん暗くなってきた。その上さらに悪いことには、雨が激しく降り始めた。
To make matters worse, he didn't come.
なお困ったことに、彼は来なかった。
He came late to school, and to make matters worse, he forgot to bring some textbooks.
彼は学校に遅刻したが、さらに悪いことに教科書を何冊か忘れてしまった。