首页 > 代码库 > 解决“在多字节的目标代码页中,没有此Unicode字符可以映射到的字符”
解决“在多字节的目标代码页中,没有此Unicode字符可以映射到的字符”
今天在处理Google网站管理员中的500错误时发现这样一些URL:
http://www.cnblogs.com/Garnai/tag/3D%3F%96%CA/http://www.cnblogs.com/henryfan/tag/%3F%3F%3F%90%B6%90%AC%3F%8C%8F/http://www.cnblogs.com/zhangpengshou/tag/%3F%96%DA%3F%97%9D%94V%8FC%3F/http://www.cnblogs.com/henryfan/tag/%3F%3F%3F%90%B6%90%AC%3F%8C%8F/...
这些URL不仅出现500错误,而且不显示自定义错误,只显示ASP.NET的默认错误页面:
服务器日志中记录具体的错误信息是:
[ArgumentOutOfRangeException: 在多字节的目标代码页中,没有此 Unicode 字符可以映射到的字符。 (异常来自 HRESULT:0x80070459)] System.Runtime.InteropServices.Marshal.ThrowExceptionForHRInternal(Int32 errorCode, IntPtr errorInfo) +0 System.Runtime.InteropServices.Marshal.ThrowExceptionForHR(Int32 errorCode) +13563503 System.Web.Hosting.IIS7WorkerRequest.GetServerVariableInternal(String name) +50 System.Web.Hosting.IIS7WorkerRequest.ReadRequestHeaders() +144 System.Web.Hosting.IIS7WorkerRequest.GetKnownRequestHeader(Int32 index) +109 System.Web.HttpWorkerRequest.HasEntityBody() +27 System.Web.HttpRequest.GetEncodingFromHeaders() +126 System.Web.HttpRequest.get_ContentEncoding() +162 System.Web.HttpRequest.get_QueryStringEncoding() +10 System.Web.HttpRequest.get_QueryStringText() +209 System.Web.HttpRequest.ValidateInputIfRequiredByConfig() +87 System.Web.PipelineStepManager.ValidateHelper(HttpContext context) +55
对应的英文错误信息是:
No mapping for the Unicode character exists in the target multi-byte code page.
从这些出错的URL中观察到了一个规律:都包含%3F这个编码,解码出来对应的字符是?。
从错误信息的代码执行堆栈信息 System.Web.HttpRequest.get_QueryStringText() 中,可以看出错误发生在从URL中读取查询字符串的时候。
可是出错的URL中并没有查询字符串。。。
后来突然想到,ASP.NET是先进行UrlDecode,然后再进行get_QueryStringText()的。
比如将 http://www.cnblogs.com/Garnai/tag/3D%3F%96%CA/ 进行URLDecode之后得到的URL是:
http://www.cnblogs.com/Garnai/tag/3D?柺/
看到没有,出现了问号,变成有查询字符串的URL。于是,ASP.NET将问号之后的字符作为key进行读取,由于key是不支持中文的,于是引发“在多字节的目标代码页中,没有此Unicode字符可以映射到的字符”。如果ASP.NET先进行get_QueryStringText(),再进行UrlDecode就不会触发这个问题,可是ASP.NET偏偏不这么干。
那如何解决这个问题?
虽然问题出在ASP.NET,但我们无法改变ASP.NET,只能另辟蹊径。
既然是ASP.NET处理上的问题,那我们别无选择,只能抢在ASP.NET之前拦截这样的URL请求,而进行这样的拦截最简单的工具就是IIS的Url Rewrite module。
根据我们的应用场景,在rewriteRules.config中添加一条规则——在URL中如果/tag/之后出现问号就直接返回404,规则定义如下:
<rule name="block_invalid_tag_url" stopProcessing="true"> <match url="^[^/]+/tag/.*?\?.*$" /> <action type="CustomResponse" statusCode="404" statusReason="The request URL is invalid" statusDescription="The request URL is invalid" /></rule>
然后就搞定了这个问题,写了这篇博客。
解决“在多字节的目标代码页中,没有此Unicode字符可以映射到的字符”