Nginx配置多个SFTP代理？

在centos上搭建了Nginx做代理转发，之前配置过一个sftp的转发策略，近期新增加了一套sftp，发现一套Nginx里只能配置一个SFTP代理转发，如果有多套SFTP服务需要Nginx转发要怎么配置？
以下是现有的nginx.conf里关于sftp的配置：
stream {
    upstream sftp {
        server 192.168.21.xxx:22 max_fails=3 fail_timeout=30s;
    }
    server {
        listen 10046;
        proxy_connect_timeout 10s;
        proxy_timeout 10m;
        proxy_pass sftp;
    }
}