在 .NET 下,Fiddler 不再抓取 Web Service 流量问题
在 .NET 下,Fiddler 不再抓取 Web Service 流量问题
问题现象
原来的一个应用中,需要访问 SOAP 服务。在原来的 .NET Framework 版本中,使用 Fiddler 是可以抓取到访问这个 Web Service 的 SOAP 流量的。在迁移到 .NET 之后, Fiddler 就不能再抓取到 SOAP 流量了。
问题分析
Fiddler 通过将自己设置为 WinINET
网络的代理。
在 .NET 环境下,使用了 WCF dotnet-svcutil tool for .NET Core 来生成 Web 服务的客户端代理。
WCF 本身使用 WinHTTP
的网络,而不是 WinINET
。
WinHTTP 主要被设计用于基于服务器的场景,这些服务器应用使用 HTTP 通讯。
而 WinINet 主要被设计用于桌面应用作为 HTTP 的客户端的场景。WinINet 提供一些用于用户凭据接口的操作,例如收集用户的凭据。在一些场景下,它可以显式网络的错误信息,或者弹出连接网络的窗口。如果你在后台服务上使用它,或者在无人值守的应用上使用它,但是不能处理这些弹出的交互窗口,它就会阻塞你的应用。这就是为什么服务器端不应该使用 WinINet 的原因,除非你确认用户会坐在计算机前面进行交互,可以处理类似 "Setup connection" 之类的对话或者错误信息。
所以,需要将 WinHTTP 网络的代理配置为 Fiddler 所支持的代理。
解决方案
Fiddler 默认已经将代理设置到系统的 WinINet 上,这个代理就是浏览器中使用的代理。所以,我们既可以直接将浏览器的代理同步到 WinHTTP 网络上,也可以手工配置它的代理。
对所有应用使用 IE 的代理配置
在 Windows 上,浏览器的代理被称为 ie 的代理。可以使用下面的方式将它同步到 WinHTTP 上。
使用 netsh winhttp import proxy source=ie
可以将 IE 的代理配置应用到 WinHTTP 网络上。
C:\windows\system32>netsh winhttp import proxy source =ie
Current WinHTTP proxy settings:
Proxy Server(s) : http=127.0.0.1:8888;https=127.0.0.1:8888
Bypass List : <-loopback>
检查 WinHTTP 网络代理设置
使用 netsh winhttp show proxy
来检查当前的代理配置。
> netsh winhttp show proxy
Current WinHTTP proxy settings:
Direct access (no proxy server).
在有代理存在的时候,可以看到当前的代理配置。
> netsh winhttp show proxy
Current WinHTTP proxy settings:
Proxy Server(s) : 127.0.0.1:8888
Bypass List : (none)
配置 WinHTTP 网络代理
可以手工设置 WinHTTP 使用的代理,使用 netsh winhttp set proxy
配置网络代理。
>netsh winhttp set proxy 127.0.0.1:8888
Current WinHTTP proxy settings:
Proxy Server(s) : 127.0.0.1:8888
Bypass List : (none
重置 WinHTTP 代理
使用 netsh winhttp reset proxy
命令重置 WinHTTP 网络的代理。
>netsh winhttp reset proxy
Current WinHTTP proxy settings:
Direct access (no proxy server).
抓取的数据示例
正确配置 WinHTTP 网络的代理之后,就可以使用 Fiddler 抓取到 SOAP 访问的流量。下面是访问 SSRS 服务的一个简单实例。
请求示例
POST http://sample.com/ReportServer/ReportService2010.asmx HTTP/1.1
Host: sample.com
Cache-Control: no-cache, max-age=0
SOAPAction: "http://schemas.microsoft.com/sqlserver/reporting/2010/03/01/ReportServer/FindItems"
Expect: 100-continue
Accept-Encoding: gzip, deflate
Content-Type: text/xml; charset=utf-8
Content-Length: 551
<s:Envelope xmlns:s="http://schemas.xmlsoap.org/soap/envelope/">
<s:Body xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
xmlns:xsd="http://www.w3.org/2001/XMLSchema">
<FindItems xmlns="http://schemas.microsoft.com/sqlserver/reporting/2010/03/01/ReportServer">
<Folder>/Sample</Folder>
<BooleanOperator>And</BooleanOperator>
<SearchOptions/>
<SearchConditions>
<SearchCondition>
<Condition>Equals</Condition>
<Values>
<Value>SampleReport</Value></Values>
<Name>Name</Name>
</SearchCondition>
</SearchConditions>
</FindItems>
</s:Body>
</s:Envelope>
响应
HTTP/1.1 200 OK
Cache-Control: private, max-age=0
Content-Length: 1684
Content-Type: text/xml; charset=utf-8
Server: Microsoft-HTTPAPI/2.0
X-AspNet-Version: 4.0.30319
X-Content-Type-Options: nosniff
X-Frame-Options: SAMEORIGIN
Date: Mon, 22 Jul 2024 02:54:55 GMT
<?xml version="1.0" encoding="utf-8"?>
<soap:Envelope xmlns:soap="http://schemas.xmlsoap.org/soap/envelope/"
xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
xmlns:xsd="http://www.w3.org/2001/XMLSchema">
<soap:Header>
<ServerInfoHeader xmlns="http://schemas.microsoft.com/sqlserver/reporting/2010/03/01/ReportServer">
<ReportServerVersionNumber>2018.160.1115.96</ReportServerVersionNumber>
<ReportServerEdition>Standard</ReportServerEdition>
<ReportServerVersion>Microsoft SQL Server Reporting Services Version 16.0.1115.96</ReportServerVersion>
<ReportServerDateTime>2024-07-22T10:54:55</ReportServerDateTime>
<ReportServerTimeZoneInfo>
<Bias>-480</Bias>
<StandardBias>0</StandardBias>
<StandardDate>
<year>0</year>
<month>0</month>
<dayOfWeek>0</dayOfWeek>
<day>0</day>
<hour>0</hour>
<minute>0</minute>
<second>0</second>
<milliseconds>0</milliseconds>
</StandardDate>
<DaylightBias>-60</DaylightBias>
<DaylightDate>
<year>0</year>
<month>0</month>
<dayOfWeek>0</dayOfWeek>
<day>0</day>
<hour>0</hour>
<minute>0</minute>
<second>0</second>
<milliseconds>0</milliseconds>
</DaylightDate>
</ReportServerTimeZoneInfo>
</ServerInfoHeader>
</soap:Header>
<soap:Body>
<FindItemsResponse xmlns="http://schemas.microsoft.com/sqlserver/reporting/2010/03/01/ReportServer">
<Items>
<CatalogItem>
<ID>de678150-93d4-4270-ac77-df1d8098f170</ID>
<Name>SampleReport</Name>
<Path>/SampleReport</Path>
<TypeName>Report</TypeName>
<Size>1381492</Size>
<CreationDate>2024-06-24T15:24:53.877</CreationDate>
<ModifiedDate>2024-06-24T15:24:53.877</ModifiedDate>
<CreatedBy>XXXXX</CreatedBy>
<ModifiedBy>XXXXXX</ModifiedBy>
<ItemMetadata />
</CatalogItem>
</Items>
</FindItemsResponse>
</soap:Body>
</soap:Envelope>