Как получить "Заголовок" с веб-страницы с помощью HttpClient

Question

Как получить "Заголовок" с веб-страницы с помощью HttpClient

Я пытаюсь получить "Заголовок" с веб-страницы, используя Apache HttpClient 4.

Изменить: мой первый подход пытался получить его из заголовка (используя HttpHead). Если это невозможно, как я могу получить его из тела ответа, как говорит @Todd?

Изменить 2:

<head>
[...]
<title>This is what I need to get!</title>
[...]
</head>

0

java httpclient http-head

Источник

user1893936 23 янв '15 в 14:23

1 ответ

Решение

Используя этот фрагмент кода, вы все еще можете получить <title> веб-страницы, доказав ее URL.

InputStream response = null;
    try {
        String url = "http://example.com/";
        response = new URL(url).openStream();


        Scanner scanner = new Scanner(response);
        String responseBody = scanner.useDelimiter("\\A").next();
        System.out.println(responseBody.substring(responseBody.indexOf("<title>") + 7, responseBody.indexOf("</title>")));

    } catch (IOException ex) {
        ex.printStackTrace();
    } finally {
        try {
            response.close();
        } catch (IOException ex) {
            ex.printStackTrace();
        }
    }

1

Источник

user3600553 30 апр '19 в 03:38

Другие вопросы по тегам java httpclient http-head

user1893936 23 янв '15 в 15:19 2015-01-23 15:19 · Accepted Answer · 2015-01-23 15:19

Спасибо всем за ваши комментарии. Решение было довольно простым после использования jsoup.

Document doc = Jsoup.connect("http://example.com/").get();
String title = doc.title();

Учитывая, что мне действительно нужно подключиться с помощью HttpClient, вот что у меня есть:

org.jsoup.nodes.Document doc = null;
String title = "";

System.out.println("Getting content... ");

CloseableHttpClient httpclient = HttpClients.createDefault();
HttpHost target = new HttpHost(host);
HttpGet httpget = new HttpGet(path);
CloseableHttpResponse response = httpclient.execute(target, httpget);

System.out.println("Parsing content... ");

try {
    String line = null;
    StringBuffer tmp = new StringBuffer();
    BufferedReader in = new BufferedReader(new InputStreamReader(response.getEntity().getContent()));
    while ((line = in.readLine()) != null) {                    
        String decoded = new String(line.getBytes(), "UTF-8");
        tmp.append(" ").append(decoded);
    }

    doc = Jsoup.parse(String.valueOf(tmp)); 

    title = doc.title();
    System.out.println("Title=" + title); //<== ^_^

    //[...]

} finally {
    response.close();
}

System.out.println("Done.");