Регистрация необработанного HTTP-запроса/ответа в ASP.NET MVC и IIS7 - программирование

Регистрация необработанного HTTP-запроса/ответа в ASP.NET MVC и IIS7

Я пишу веб-службу (используя ASP.NET MVC), и для поддержки мы хотели бы иметь возможность регистрировать запросы и ответы как можно ближе к необработанному, в-проводном формате ( т.е. включая HTTP-метод, путь, все заголовки и тело) в базу данных.

То, что я не уверен в том, как получить эти данные в наименее "искаженном" виде. Я могу переформулировать, на мой взгляд, запрос, который проверяет все свойства объекта HttpRequest и строит из них строку (и аналогично для ответа), но я действительно хотел бы получить фактический запрос/ответные данные, отправленные на провод.

Я рад использовать любой механизм перехвата, такой как фильтры, модули и т.д., и это решение может быть специфичным для IIS7. Тем не менее, я бы предпочел сохранить его только в управляемом коде.

Любые рекомендации?

Изменить: Я отмечаю, что HttpRequest имеет метод SaveAs, который может сохранить запрос на диск но это реконструирует запрос из внутреннего состояния, используя нагрузку внутренних вспомогательных методов, к которым нельзя получить доступ публично (почему это не позволяет сохранить предоставленный пользователем поток, который я не знаю). Так что это начинает выглядеть так, как будто я должен сделать все возможное, чтобы восстановить текст запроса/ответа от объектов... стон.

Изменить 2: Обратите внимание, что я сказал весь запрос, включая метод, путь, заголовки и т.д. Текущие ответы только смотрят на тесные потоки, которые не включают эту информацию.

Изменить 3: Не читают ли какие-нибудь вопросы здесь? Пять ответов до сих пор, и все же никто даже не намекает на способ получить весь необработанный запрос на провод. Да, я знаю, что могу захватить выходные потоки, заголовки и URL-адрес, и все это из объекта запроса. Я уже сказал, что в вопросе см.:

Я могу переформулировать то, что, по моему мнению, выглядит как запрос, проверяя все свойства объекта HttpRequest и строя из них строку (и аналогично для ответа), но я действительно хотел бы получить фактический запрос/ответных данных, отправленных на провод.

Если вы знаете, что полные необработанные данные (включая заголовки, URL, метод http и т.д.) просто не могут быть восстановлены, то это было бы полезно знать. Точно так же, если вы знаете, как получить все это в необработанном формате (да, я все еще имею в виду, включая заголовки, url, http-метод и т.д.) Без необходимости его реконструировать, что я и задал, тогда это было бы очень полезно. Но сказать мне, что я могу восстановить его из объектов HttpRequest/HttpResponse, не полезно. Я знаю это. Я уже это сказал.

Обратите внимание: прежде чем кто-нибудь начнет говорить, что это плохая идея, или ограничивает масштабируемость и т.д., мы также будем внедрять механизмы дросселирования, последовательной доставки и защиты от повтора в распределенной среде, поэтому требуется ведение базы данных так или иначе. Я не ищу обсуждения, является ли это хорошей идеей, я ищу, как это можно сделать.

4b9b3361

ОТВЕТЫ

Ответ 1

ОК, так что похоже, что ответ "нет, вы не можете получить необработанные данные, вам нужно восстановить запрос/ответ от свойств анализируемых объектов". О, хорошо, я сделал реконструкцию.

Ответ 2

Определенно используйте IHttpModule и реализуйте события BeginRequest и EndRequest.

Все "сырые" данные присутствуют между HttpRequest и HttpResponse, это просто не в одном необработанном формате. Вот части, необходимые для создания дампов в стиле Fiddler (примерно так же, как и исходный HTTP-код):

request.HttpMethod + " " + request.RawUrl + " " + request.ServerVariables["SERVER_PROTOCOL"]
request.Headers // loop through these "key: value"
request.InputStream // make sure to reset the Position after reading or later reads may fail

Для ответа:

"HTTP/1.1 " + response.Status
response.Headers // loop through these "key: value"

Обратите внимание, что вы не можете прочитать поток ответов, поэтому вам нужно добавить фильтр в выходной поток и захватить копию.

В вашем BeginRequest вам нужно будет добавить фильтр ответов:

HttpResponse response = HttpContext.Current.Response;
OutputFilterStream filter = new OutputFilterStream(response.Filter);
response.Filter = filter;

Храните filter, где вы можете перейти к нему в обработчике EndRequest. Я предлагаю в HttpContext.Items. Затем можно получить полные данные ответа в filter.ReadStream().

Затем реализуем OutputFilterStream, используя шаблон Decorator в качестве обертки вокруг потока:

/// <summary>
/// A stream which keeps an in-memory copy as it passes the bytes through
/// </summary>
public class OutputFilterStream : Stream
{
    private readonly Stream InnerStream;
    private readonly MemoryStream CopyStream;

    public OutputFilterStream(Stream inner)
    {
        this.InnerStream = inner;
        this.CopyStream = new MemoryStream();
    }

    public string ReadStream()
    {
        lock (this.InnerStream)
        {
            if (this.CopyStream.Length <= 0L ||
                !this.CopyStream.CanRead ||
                !this.CopyStream.CanSeek)
            {
                return String.Empty;
            }

            long pos = this.CopyStream.Position;
            this.CopyStream.Position = 0L;
            try
            {
                return new StreamReader(this.CopyStream).ReadToEnd();
            }
            finally
            {
                try
                {
                    this.CopyStream.Position = pos;
                }
                catch { }
            }
        }
    }


    public override bool CanRead
    {
        get { return this.InnerStream.CanRead; }
    }

    public override bool CanSeek
    {
        get { return this.InnerStream.CanSeek; }
    }

    public override bool CanWrite
    {
        get { return this.InnerStream.CanWrite; }
    }

    public override void Flush()
    {
        this.InnerStream.Flush();
    }

    public override long Length
    {
        get { return this.InnerStream.Length; }
    }

    public override long Position
    {
        get { return this.InnerStream.Position; }
        set { this.CopyStream.Position = this.InnerStream.Position = value; }
    }

    public override int Read(byte[] buffer, int offset, int count)
    {
        return this.InnerStream.Read(buffer, offset, count);
    }

    public override long Seek(long offset, SeekOrigin origin)
    {
        this.CopyStream.Seek(offset, origin);
        return this.InnerStream.Seek(offset, origin);
    }

    public override void SetLength(long value)
    {
        this.CopyStream.SetLength(value);
        this.InnerStream.SetLength(value);
    }

    public override void Write(byte[] buffer, int offset, int count)
    {
        this.CopyStream.Write(buffer, offset, count);
        this.InnerStream.Write(buffer, offset, count);
    }
}

Ответ 3

Следующий метод расширения в HttpRequest создаст строку, которая может быть вставлена ​​в скрипач и воспроизведена.

namespace System.Web
{
    using System.IO;

    /// <summary>
    /// Extension methods for HTTP Request.
    /// <remarks>
    /// See the HTTP 1.1 specification http://www.w3.org/Protocols/rfc2616/rfc2616.html
    /// for details of implementation decisions.
    /// </remarks>
    /// </summary>
    public static class HttpRequestExtensions
    {
        /// <summary>
        /// Dump the raw http request to a string. 
        /// </summary>
        /// <param name="request">The <see cref="HttpRequest"/> that should be dumped.       </param>
        /// <returns>The raw HTTP request.</returns>
        public static string ToRaw(this HttpRequest request)
        {
            StringWriter writer = new StringWriter();

            WriteStartLine(request, writer);
            WriteHeaders(request, writer);
            WriteBody(request, writer);

            return writer.ToString();
        }

        private static void WriteStartLine(HttpRequest request, StringWriter writer)
        {
            const string SPACE = " ";

            writer.Write(request.HttpMethod);
            writer.Write(SPACE + request.Url);
            writer.WriteLine(SPACE + request.ServerVariables["SERVER_PROTOCOL"]);
        }

        private static void WriteHeaders(HttpRequest request, StringWriter writer)
        {
            foreach (string key in request.Headers.AllKeys)
            {
                writer.WriteLine(string.Format("{0}: {1}", key, request.Headers[key]));
            }

            writer.WriteLine();
        }

        private static void WriteBody(HttpRequest request, StringWriter writer)
        {
            StreamReader reader = new StreamReader(request.InputStream);

            try
            {
                string body = reader.ReadToEnd();
                writer.WriteLine(body);
            }
            finally
            {
                reader.BaseStream.Position = 0;
            }
        }
    }
}

Ответ 4

Вы можете использовать переменную сервера ALL_RAW для получения исходных HTTP-заголовков, отправленных с запросом, тогда вы можете получить InputStream как обычно:

string originalHeader = HttpHandler.Request.ServerVariables["ALL_RAW"];

проверить: http://msdn.microsoft.com/en-us/library/ms524602%28VS.90%29.aspx

Ответ 5

Ну, я работаю над проектом и, возможно, не слишком глубокий, с использованием параметров запроса:

Посмотрите:

public class LogAttribute : ActionFilterAttribute
{
    private void Log(string stageName, RouteData routeData, HttpContextBase httpContext)
    {
        //Use the request and route data objects to grab your data
        string userIP = httpContext.Request.UserHostAddress;
        string userName = httpContext.User.Identity.Name;
        string reqType = httpContext.Request.RequestType;
        string reqData = GetRequestData(httpContext);
        string controller = routeData["controller"];
        string action = routeData["action"];

        //TODO:Save data somewhere
    }

    //Aux method to grab request data
    private string GetRequestData(HttpContextBase context)
    {
        StringBuilder sb = new StringBuilder();

        for (int i = 0; i < context.Request.QueryString.Count; i++)
        {
            sb.AppendFormat("Key={0}, Value={1}<br/>", context.Request.QueryString.Keys[i], context.Request.QueryString[i]);
        }

        for (int i = 0; i < context.Request.Form.Count; i++)
        {
            sb.AppendFormat("Key={0}, Value={1}<br/>", context.Request.Form.Keys[i], context.Request.Form[i]);
        }

        return sb.ToString();
    }

Вы можете украсить свой класс контроллеров для его полного журнала:

[Log]
public class TermoController : Controller {...}

или запишите только некоторые индивидуальные действия

[Log]
public ActionResult LoggedAction(){...}

Ответ 6

Любая причина, по которой вам нужно сохранить ее в управляемом коде?

Следует отметить, что вы можете включить Failed Trace logging в IIS7, если вам не нравится повторно изобретать колесо. Эти заголовки журналов, тело запроса и ответа, а также многое другое.

Failed Trace Logging

Ответ 7

Я пошел с McKAMEY. Здесь модуль, который я написал, поможет вам начать работу и, надеюсь, сэкономит вам время. Вам нужно подключить Logger, очевидно, к чему-то, что работает для вас:

public class CaptureTrafficModule : IHttpModule
{
    public void Init(HttpApplication context)
    {
        context.BeginRequest += new EventHandler(context_BeginRequest);
        context.EndRequest += new EventHandler(context_EndRequest);
    }

    void context_BeginRequest(object sender, EventArgs e)
    {
        HttpApplication app = sender as HttpApplication;

        OutputFilterStream filter = new OutputFilterStream(app.Response.Filter);
        app.Response.Filter = filter;

        StringBuilder request = new StringBuilder();
        request.Append(app.Request.HttpMethod + " " + app.Request.Url);
        request.Append("\n");
        foreach (string key in app.Request.Headers.Keys)
        {
            request.Append(key);
            request.Append(": ");
            request.Append(app.Request.Headers[key]);
            request.Append("\n");
        }
        request.Append("\n");

        byte[] bytes = app.Request.BinaryRead(app.Request.ContentLength);
        if (bytes.Count() > 0)
        {
            request.Append(Encoding.ASCII.GetString(bytes));
        }
        app.Request.InputStream.Position = 0;

        Logger.Debug(request.ToString());
    }

    void context_EndRequest(object sender, EventArgs e)
    {
        HttpApplication app = sender as HttpApplication;
        Logger.Debug(((OutputFilterStream)app.Response.Filter).ReadStream());
    }

    private ILogger _logger;
    public ILogger Logger
    {
        get
        {
            if (_logger == null)
                _logger = new Log4NetLogger();
            return _logger;
        }
    }

    public void Dispose()
    {
        //Does nothing
    }
}

Ответ 8

используйте IHttpModule:

    namespace Intercepts
{
    class Interceptor : IHttpModule
    {
        private readonly InterceptorEngine engine = new InterceptorEngine();

        #region IHttpModule Members

        void IHttpModule.Dispose()
        {
        }

        void IHttpModule.Init(HttpApplication application)
        {
            application.EndRequest += new EventHandler(engine.Application_EndRequest);
        }
        #endregion
    }
}

    class InterceptorEngine
    {       
        internal void Application_EndRequest(object sender, EventArgs e)
        {
            HttpApplication application = (HttpApplication)sender;

            HttpResponse response = application.Context.Response;
            ProcessResponse(response.OutputStream);
        }

        private void ProcessResponse(Stream stream)
        {
            Log("Hello");
            StreamReader sr = new StreamReader(stream);
            string content = sr.ReadToEnd();
            Log(content);
        }

        private void Log(string line)
        {
            Debugger.Log(0, null, String.Format("{0}\n", line));
        }
    }

Ответ 9

если для случайного использования, чтобы обойти узкий угол, как насчет чего-то грубого, как внизу?

Public Function GetRawRequest() As String
    Dim str As String = ""
    Dim path As String = "C:\Temp\REQUEST_STREAM\A.txt"
    System.Web.HttpContext.Current.Request.SaveAs(path, True)
    str = System.IO.File.ReadAllText(path)
    Return str
End Function

Ответ 10

HttpRequest и HttpResponse pre MVC использовали GetInputStream() и GetOutputStream(), которые могли бы использоваться для этой цели. Не смотрите на эту часть в MVC, поэтому я не уверен, что они доступны, но может быть идеей:)

Ответ 11

Согласитесь с FigmentEngine, IHttpModule, как представляется, подходит.

Посмотрите httpworkerrequest, readentitybody и GetPreloadedEntityBody.

Чтобы получить httpworkerrequest, вам нужно сделать это:

(HttpWorkerRequest)inApp.Context.GetType().GetProperty("WorkerRequest", bindingFlags).GetValue(inApp.Context, null);

где inApp - объект httpapplication.

Ответ 12

Я согласен с другими, используйте IHttpModule. Взгляните на ответ на этот вопрос, который делает почти то же самое, что вы просите. Он регистрирует запрос и ответ, но без заголовков.

Как отслеживать запросы ScriptService WebService?

Ответ 13

Лучше всего сделать это за пределами вашего приложения. Вы можете настроить обратный прокси-сервер, чтобы делать такие вещи (и многое другое). Обратный прокси-сервер - это в основном веб-сервер, который находится в вашей серверной комнате и находится между вашим веб-сервером и клиентом. См. http://en.wikipedia.org/wiki/Reverse_proxy

Ответ 14

Вы можете выполнить это в DelegatingHandler без использования OutputFilter, упомянутого в других ответах в .NET 4.5, с помощью Stream.CopyToAsync() функция.

Я не уверен в деталях, но это не вызывает все плохие вещи, которые происходят, когда вы пытаетесь напрямую прочитать поток ответов.

Пример:

public class LoggingHandler : DelegatingHandler
{
    protected override async Task<HttpResponseMessage> SendAsync(HttpRequestMessage request, CancellationToken cancellationToken)
    {
        DoLoggingWithRequest(request);
        var response = await base.SendAsync(request, cancellationToken);
        await DoLoggingWithResponse(response);
        return response;
    }

    private async Task DologgingWithResponse(HttpResponseMessage response) {
        var stream = new MemoryStream();
        await response.Content.CopyToAsync(stream).ConfigureAwait(false);     
        DoLoggingWithResponseContent(Encoding.UTF8.GetString(stream.ToArray()));

        // The rest of this call, the implementation of the above method, 
        // and DoLoggingWithRequest is left as an exercise for the reader.
    }
}

Ответ 15

Я знаю, что это не управляемый код, но я собираюсь предложить фильтр ISAPI. Прошло пару лет с тех пор, как у меня было "удовольствие" от поддержки моего собственного ISAPI, но из того, что я помню, вы можете получить доступ ко всему этому, как до, так и после того, как ASP.Net сделала это.

http://msdn.microsoft.com/en-us/library/ms524610.aspx

Если HTTPModule недостаточно хорош для того, что вам нужно, я просто не думаю, что есть какой-либо управляемый способ сделать это в требуемом объеме деталей. Это будет боль, чтобы сделать, хотя.