/dev/sda4 を縮小して200~500MB程度の空きを作りfat32でフォーマット boot, espフラグも付けて
それが/dev/sda6になるんかな
/dev/sda6をdebianの/boot/efiにマウントして
grub-install
grub-mkconfig -o /boot/grub/grub.cfg
windowsのブートローダー/dev/sda2は触らない方が良いと思う