GitHub Actions のホストランナーとして Windows が提供されているため、そこに cygwin をインストールすることで cygwin バイナリを動かしてテストなどをすることができます。