Cevabınıza teşekkür ediyorum, ben de az önce deneyimlediklerimi paylaşmak istiyorum.
ISO USB'sini tekrar "GPT" olarak yazdırdım. Kurulum yapılacak USB'yi manuel olarak partitionlara(EFI, Home,/) ayırıp tekrar kurulum yaptım.
Kısmen düzeldi diyebilirim. Kısmen dememin sebebi USB takılı olduğu sürece bir sorun yaşamıyorum fakat, USB'siz diğer sistemlere giriş yaptığımda ve tekrar USB takıp Ubuntu'ya girmek istediğimde aynı sorunu yaşıyorum. Ama bu defa 1 kez BIOS'a girip çıkmam yeterli oluyor. Bilgisayarda güç olmadığı durumda USB'yi takıp çıkarmam bir soruna yol açmıyor. Ayrıca BIOS Boot sıralamasında 1. USB, 2.HDD olarak durmalı yoksa aynı sorun tekrar ediyor.