「プロジェクト」→「削除」により、削除したいワークスペースを選択して実行してください。
直接ワークスペースのフォルダを削除しないでください。

なお、操作中のプロジェクトを削除することはできません。