Проблемы с использованием расширенного режима выхода для вывода в формате jsoup

Мне нужно преобразовать файл HTML, удалив определенные теги из файла. Для этого у меня есть что-то вроде этого -

import org.jsoup.Jsoup;
import org.jsoup.helper.Validate;
import org.jsoup.nodes.Document;
import org.jsoup.nodes.Entities;
import org.jsoup.nodes.Entities.EscapeMode;

import java.io.IOException;
import java.io.File;
import java.util.*;

public class TestJsoup {
    public static void main(String[] args) throws IOException {
        Validate.isTrue(args.length == 1, "usage: supply url to fetch");
        String url = args[0];

        Document doc = null;
        if(url.contains("http")) {
           doc = Jsoup.connect(url).get();
        } else {
           File f = new File(url);
           doc = Jsoup.parse(f, null);
        }

        /* remove some tags */

        doc.outputSettings().escapeMode(Entities.EscapeMode.extended);
        System.out.println(doc.html());

        return;
    }
}

Проблема с приведенным выше кодом заключается в том, что, когда я использую расширенный режим выхода, выходные данные имеют атрибуты html-тега, закодированные в формате html. Есть ли способ избежать этого? Использование escape-режима в качестве базового или xhtml не работает как некоторые нестандартные расширенные (например, ’) кодирование дает проблемы. Например, для HTML ниже,

<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Strict//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd">
<html>
<head>
<title>Test&reg;</title>
</head>
<body style="background-color:#EDEDED;">
<P>
   <font style="color:#003698; font-weight:bold;">Testing HTML encoding - &rsquo; &copy; with a <a href="http://www.google.com">link</a>
   </font> 
   <br />
</P>
</body>
</html>

Вывод, который я получаю,

<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Strict//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd">
<html>
 <head>&NewLine;
  <title>Test&reg;</title>&NewLine;
 </head>&NewLine;
 <body style="background-color&colon;&num;EDEDED&semi;">&NewLine;
  <p>&NewLine; <font style="color&colon;&num;003698&semi; font-weight&colon;bold&semi;">Testing HTML encoding - &rsquor; &copy; with a <a href="http&colon;&sol;&sol;www&period;g
oogle&period;com">link</a></font> <br />&NewLine;</p>&NewLine;&NewLine;&NewLine;&NewLine;
 </body>
</html>

Есть ли способ обойти эту проблему?

Источник

1 ответ

Решение

Какой выходной кодировочный набор вы используете? (По умолчанию это будет вход, который, если вы загружаете с URL, будет зависеть от сайта).

Вы, вероятно, хотите явно установить либо UTF-8, или же ASCII или другой низкий уровень, если вы работаете с системами, которые не могут работать с UTF-8. Если вы установите режим выхода на base (по умолчанию) и кодировка ascii, затем любой символ (например, rsquo), который не может быть представлен изначально в выбранной кодировке, будет выведен как числовой escape.

Например:

String check = "<p>&rsquo; <a href='../'>Check</a></p>";
Document doc = Jsoup.parse(check);
doc.outputSettings().escapeMode(Entities.EscapeMode.base); // default

doc.outputSettings().charset("UTF-8");
System.out.println("UTF-8: " + doc.body().html());

doc.outputSettings().charset("ASCII");
System.out.println("ASCII: " + doc.body().html());

дает:

UTF-8: <p>’ <a href="../">Check</a></p>
ASCII: <p>&#8217; <a href="../">Check</a></p>

Надеюсь это поможет!

Источник
Другие вопросы по тегам