似乎沒有解決方法，不過可以將快速存取中自己加入的全部刪除 (恢復預設)

前往 C:\\Users\\使用者名稱\\AppData\\Roaming\\Microsoft\\Windows\\Recent\\AutomaticDestinations，將此資料夾目錄下的檔案備份後全部刪除

參考文章

FTP 位址無法從快速存取中移除，但其他資料夾可以 – Microsoft Community