nginx の裏にある websocket サーバーに対する、 nginx の設定は？

とあるリモートのサーバー上で動いている websocket サーバープログラムに対して、そのサーバー上の nginx からリバースプロキシをはる際に、何も考えずに upstream 指定しただけでは、 websocket はうまく動作しないことに気づきました。