首页 诗词 字典 板报 句子 名言 友答 励志 学校 网站地图
当前位置: 首页 > 教程频道 > 网站开发 > Web前端 >

windows上对chunked模式web services做服务集群的一些有关问题

2012-09-14 
windows下对chunked模式web services做服务集群的一些问题公司的产品各个分布式组件之间使用基于xfire的we

windows下对chunked模式web services做服务集群的一些问题
公司的产品各个分布式组件之间使用基于xfire的web service进行行为触发和信息传递。
之前一直通过网络层虚拟IP工具进行集群,因本人最近要搭建一套开发的测试环境,但硬件集群昂贵,所以想通过Web server反向代理来实现局域网内地址和端口的转发。

备选有两个:nginx和apache,下面做一些探索和分析,希望对大家有帮助

nginx这个反向代理的工具不错,但是就是不支持chunked post
查了一下,可以通过一些第三方的module解决,原理是把chunked request,拦截并聚合成单一的request,再进行转发。
但是问题是这样处理后header保留的Transfer-Encoding header会导致服务端解析错误(服务端又当成chunked处理了)
于是就需要另一个module,拦截并去掉header里的Transfer-Encoding标记

下一个问题是官方只支持核心的module,并且对于windows只提供build,不提供build环境
没办法,用cygwin,需要用到的库有pcre,perl的正则库,然后把上面说的两个module:
HttpChunkinModule和HttpHeadersMoreModule的src下载下来,configure的时候加上

configure参数如下:
$ ./configure --prefix=. --sbin-path=nginx --add-module=./chunk/ --add-module=.
/header-cut/ --with-cc-opt="-D FD_SETSIZE=2048" --with-pcre=./pcre/
然后make make install,最后把程序运行的依赖的dll从cygwin拷贝出来就可以了

这样子试过之后,发现还是不能解决问题,通过wireshark抓包发现原因是chunked请求被合并了,但是头采用的是mtom xop协议,服务端会默认采用chunked来解析,这时又丢失了boundary。
不知道通过修改header能不能解决这个问题,原理是把xop协议相关的头修改成普通的soap协议头

没办法,只能选择apache了,apache2.2默认即支持chunked的反向代理,只需enable相关模块,并配置proxypass即可,这个不需要什么改动,就不赘言了。

结论,对于use了mtom和chunked-enabled的web services请求进行load-balance时,暂时nginx还没有很好的支持,建议直接采用apache2。
否则,就把这两个特性关了吧。

P.S
为什么非要用Windows,因为公司设备监护人员暂时不能管理linux设备,一是操作要求高,二是安全方案的一致性 1 楼 yangyi 2011-04-07   其实我还在想一个问题,就是chunked + xop 模式的优缺点在哪里,如果所有web service都默认采用chunked模式请求,固然默认提供了对binary的传递支持,但是等于又封装了一层编码和解码的工作量,这样对于大量的短的文本请求,效率上是不利的,但是目前我没有数据做支撑,回头做一些压力测试,看一看。
-----------------
update:
3000次hello world调用,非chunked模式可以省一半的时间。
另测试环境在本机,不经过网卡,在真实环境下,I/O应该是更大的负担

热点排行