Я использовал Jakarta commons HttpClient в другом проекте, и мне бы хотелось, чтобы
Как включить ведение журнала проводки для java HttpURLConnection трафика?
Ответ 1
Я смог зарегистрировать весь трафик SSL, реализующий собственный SSLSocketFactory поверх стандартного.
Это сработало для меня, потому что все наши соединения используют HTTPS, и мы можем установить сокет factory с помощью метода HttpsURLConnection.setSSLSocketFactory,
Более полное решение, которое позволяет осуществлять мониторинг во всех сокетах, можно найти на http://www.javaspecialists.eu/archive/Issue169.html Благодаря Lawrence Dol для указания в правильном направлении использования Socket.setSocketImplFactory
Вот мой не готов для производственного кода:
public class WireLogSSLSocketFactory extends SSLSocketFactory {
private SSLSocketFactory delegate;
public WireLogSSLSocketFactory(SSLSocketFactory sf0) {
this.delegate = sf0;
}
public Socket createSocket(Socket s, String host, int port,
boolean autoClose) throws IOException {
return new WireLogSocket((SSLSocket) delegate.createSocket(s, host, port, autoClose));
}
/*
...
*/
private static class WireLogSocket extends SSLSocket {
private SSLSocket delegate;
public WireLogSocket(SSLSocket s) {
this.delegate = s;
}
public OutputStream getOutputStream() throws IOException {
return new LoggingOutputStream(delegate.getOutputStream());
}
/*
...
*/
private static class LoggingOutputStream extends FilterOutputStream {
private static final Logger logger = Logger.getLogger(WireLogSocket.LoggingOutputStream.class);
//I'm using a fixed charset because my app always uses the same.
private static final String CHARSET = "ISO-8859-1";
private StringBuffer sb = new StringBuffer();
public LoggingOutputStream(OutputStream out) {
super(out);
}
public void write(byte[] b, int off, int len)
throws IOException {
sb.append(new String(b, off, len, CHARSET));
logger.info("\n" + sb.toString());
out.write(b, off, len);
}
public void write(int b) throws IOException {
sb.append(b);
logger.info("\n" + sb.toString());
out.write(b);
}
public void close() throws IOException {
logger.info("\n" + sb.toString());
super.close();
}
}
}
}
Ответ 2
Согласно источнику Sun HttpURLConnection, есть некоторая поддержка регистрации через JUL.
Настройка (отрегулируйте путь по мере необходимости):
-Djava.util.logging.config.file=/full/path/to/logging.properties
logging.properties:
handlers= java.util.logging.ConsoleHandler
java.util.logging.ConsoleHandler.level = FINEST
sun.net.www.protocol.http.HttpURLConnection.level=ALL
Это приведет к входу в консоль, отрегулируйте, как требуется, например, для входа в файл.
Пример вывода:
2010-08-07 00:00:31 sun.net.www.protocol.http.HttpURLConnection writeRequests
FIN: [email protected] pairs: {GET /howto.html HTTP/1.1: null}{User-Agent: Java/1.6.0_20}{Host: www.rgagnon.com}{Accept: text/html, image/gif, image/jpeg, *; q=.2, */*; q=.2}{Connection: keep-alive}
2010-08-07 00:00:31 sun.net.www.protocol.http.HttpURLConnection getInputStream
FIN: [email protected] pairs: {null: HTTP/1.1 200 OK}{Date: Sat, 07 Aug 2010 04:00:33 GMT}{Server: Apache}{Accept-Ranges: bytes}{Content-Length: 17912}{Keep-Alive: timeout=5, max=64}{Connection: Keep-Alive}{Content-Type: text/html}
Обратите внимание, что это печатает только заголовки без тела.
См. Http://www.rgagnon.com/javadetails/java-debug-HttpURLConnection-problem.html для получения подробной информации.
Существует также системное свойство -Djavax.net.debug=all. Но это в основном полезно для отладки SSL.
Ответ 3
Решение №1: Использование шаблона декоратора
Вам нужно будет использовать шаблон Decorator на HttpURLConnection, чтобы расширить его функциональность. Затем переопределите все методы HttpURLCLConnection и делегатов на указатель Component, а также захватите требуемую информацию и запишите ее.
Также убедитесь, что вы переопределите родительский класс URLConnection.getOutputStream(): OutputStream и URLConnection.html#getInputStream(): InputStream методы возврата OutputStream и InputStream.
.
Решение # 2: использование пользовательского прокси-сервера в памяти
Напишите простой HTTP-прокси-сервер и запустите его в отдельном потоке во время запуска и инициализации приложения. См. Пример простого прокси-сервера.
У вас настроено ваше приложение на использование выше HTTP-прокси для всех ваших запросов. См. настройка Java для использования Proxies.
Теперь весь ваш трафик проходит через прокси-сервер, точно так же, как это происходит в скрипаче. Следовательно, у вас есть доступ к необработанному HTTP-потоку "от клиента к серверу", а также "назад от сервера к клиенту". Вам придется интерпретировать эту необработанную информацию и регистрировать ее по мере необходимости.
Update: Используйте HTTP-прокси в качестве адаптера для веб-сервера на основе SSL.
== Client System ===============================
| |
| ------------------------------ |
| | | |
| | Java process | |
| | ---- | |
| | ---------- | | | |
| | | | -O | | |
| | | Logging | | | |
| | | Proxy <---HTTP-- | ----- |
| | | Adapter | | | | |
| | | Thread o------------------> | |
| | | o | | | | |
| | --------|- | | Log | |
| | | | ----- |
| ----------------|------------- |
| | |
=====================|==========================
|
|
HTTPS
SSL
|
== Server System ====|==========================
| | |
| ----------------|---------------- |
| | V | |
| | | |
| | Web Server | |
| | | |
| --------------------------------- |
| |
================================================
Ответ 4
В Linux вы можете запустить VM под strace:
strace -o strace.out -s 4096 -e trace = network -f java...
Ответ 5
Я не думаю, что вы можете сделать это автоматически, но вы можете подклассы FilterOutputStream и FilterInputStream с выходными и входными потоками HttpUrlConnection в качестве параметров. Затем, когда байты записываются/читаются, записывайте их, а затем передавайте их в базовые потоки.
Ответ 6
Как насчет использования AspectJ для вставки Pointcut для добавления рекомендаций по протоколированию вокруг метода? Я считаю, что AspectJ может перетащить его в частные/защищенные методы.
Похоже, что sun.net.www.protocol.http.HttpURLConnection.writeRequest может вызывать sun.net.www.http.HttpClient.writeRequest, который принимает объект MessageHeader в качестве входных данных, чтобы ваша цель была.
В конце концов это может работать, но будет ужасно хрупким и работать только с Sun JVM; и действительно вы можете доверять только точной версии, которую используете.
Ответ 7
В противном случае вам будет интересно получать контент на проводнике (заголовки, тело и т.д.), вы можете дать wireshark a go.
Это имеет то преимущество, что вам не нужно менять какой-либо код, хотя если включить регистрацию кода через то, что вам нужно, этот ответ не применим.
Ответ 8
Чтобы обновить среду Java 8:
После ответа @sleske
System.setProperty("javax.net.debug","all");
работал для меня из коробки.
Также было @weberjn предложение
strace -o strace.out -s 4096 -e trace=network -f java
но бесполезно, если обрабатывается трафик SSL, поскольку он создает дамп закодированного потока.
Все остальные трюки с кодом у меня не сработали, но, возможно, не слишком старались.