Form2にボタンを追加します。
ボタンをダブルクリック。
次のコードを記述します。
this.Close();
デバッグ。
Form1のButton2をクリックしてForm2を表示。
Form2のButton1をクリック。
Form2が閉じられる。