可以通过安装窗户密封条来解决。

原因是21楼的高度容易受到风力的影响，导致窗户密封不严，从而产生呼呼的响声。

安装窗户密封条可以有效阻止风力进入室内，减少噪音。

除了安装窗户密封条外，也可以考虑在窗户周围增加一层窗帘或者厚重窗帘，可以有效减少风力对窗户的影响，从而减少室内的噪音。

另外，可以考虑联系物业或专业维修人员检查窗户是否存在其他问题，及时修复。