1x1もよろしくね！

1x1 convolution?
それなら、それもこないだ別件で知りました―

そうです。
1x1 convolutionでございます。
このへんはいまや基礎教養ですが、現場から遠い人だと通常のconvolutionで止まってるというのはありがちですやね。