วิธี unescape หน่วยงานตัวอักษร HTML ใน Java?


147

โดยทั่วไปฉันต้องการที่จะถอดรหัสเอกสาร HTML ที่กำหนดและแทนที่ตัวอักษรพิเศษทั้งหมดเช่น" "-> " ", ->">"">"

ใน. NET เราสามารถใช้ประโยชน์HttpUtility.HtmlDecodeได้

ฟังก์ชั่นที่เทียบเท่าใน Java คืออะไร?


4
& nbsp; เรียกว่าตัวละครนิติบุคคล แก้ไขชื่อ
Eugene Yokota

คำตอบ:


182

ฉันได้ใช้ Apache Commons StringEscapeUtils.unescapeHtml4 ()สำหรับสิ่งนี้:

unescapes สตริงที่มีการยกเว้นนิติบุคคลไปยังสตริงที่มีอักขระ Unicode จริงที่สอดคล้องกับการหลบหนี รองรับเอนทิตี HTML 4.0


19
น่าเศร้าที่ฉันเพิ่งตระหนักในวันนี้ว่ามันไม่ได้ถอดรหัส HTMLspecial ตัวละครได้เป็นอย่างดี :(
ซิด

1
เคล็ดลับสกปรกคือการเก็บค่าเริ่มต้นในเขตข้อมูลที่ซ่อนอยู่เพื่อหลบหนีจากนั้นเขตข้อมูลเป้าหมายควรได้รับค่าจากเขตข้อมูลที่ซ่อนอยู่
setzamora

2
Class StringEscapeUtils เลิกใช้แล้วและย้ายไปที่Apache Commons-text
Pauli

2
ฉันต้องการที่จะแปลงสตริง<p>&uuml;&egrave;</p>ไป<p>üé</p>กับฉันได้รับStringEscapeUtils.unescapeHtml4() &lt;p&gt;üè&lt;/p&gt;มีวิธีรักษาแท็ก html ที่มีอยู่เหมือนเดิมหรือไม่
Nickkk

48

ห้องสมุดที่กล่าวถึงในคำตอบอื่น ๆ จะเป็นคำตอบที่ดี แต่ถ้าคุณบังเอิญขุดผ่าน html ในโลกแห่งความเป็นจริงในโครงการของคุณโครงการJsoupนี้มีอะไรมากมายที่จะให้มากกว่าการจัดการสิ่งต่าง ๆ"ampersand pound FFFF semicolon"

// textValue: <p>This is a&nbsp;sample. \"Granny\" Smith &#8211;.<\/p>\r\n
// becomes this: This is a sample. "Granny" Smith –.
// with one line of code:
// Jsoup.parse(textValue).getText(); // for older versions of Jsoup
Jsoup.parse(textValue).text();

// Another possibility may be the static unescapeEntities method:
boolean strictMode = true;
String unescapedString = org.jsoup.parser.Parser.unescapeEntities(textValue, strictMode);

และคุณยังได้รับ API ที่สะดวกสบายสำหรับการแยกและจัดการข้อมูลโดยใช้วิธีที่ดีที่สุดของ DOM, CSS และ jQuery มันเป็นโอเพนซอร์สและใบอนุญาต MIT


3
upvote + แต่ฉันควรชี้ให้เห็นว่า Jsoup เวอร์ชันใหม่ใช้.text()แทน.getText()
SourceVisor

4
org.jsoup.parser.Parser.unescapeEntities(String string, boolean inAttribute)บางทีโดยตรงมากขึ้นคือการใช้งาน API เอกสาร: jsoup.org/apidocs/org/jsoup/parser/…
danneu

3
มันสมบูรณ์แบบเพราะฉันใช้ Jsoup ในโครงการของฉันอยู่แล้ว นอกจากนี้ @danneu พูดถูก - Parser.unescapeEntities ทำงานตรงตามที่โฆษณาไว้
MandisaW

42

ฉันลอง Apache Commons StringEscapeUtils.unescapeHtml3 () ในโครงการของฉัน แต่ไม่พอใจกับประสิทธิภาพของมัน ปรากฎว่าเป็นการทำงานที่ไม่จำเป็นจำนวนมาก สำหรับหนึ่งมันจัดสรร StringWriter สำหรับการโทรทุกครั้งแม้ว่าจะไม่มีสิ่งใดที่จะ unescape ในสตริง ฉันเขียนรหัสนั้นแตกต่างกันตอนนี้ทำงานได้เร็วขึ้นมาก ใครก็ตามที่พบสิ่งนี้ใน google สามารถใช้งานได้

รหัสต่อไปนี้ unescapes สัญลักษณ์ HTML 3 ทั้งหมดและ escapes ตัวเลข (เทียบเท่ากับ Apache unescapeHtml3) คุณสามารถเพิ่มรายการเพิ่มเติมลงในแผนที่ได้หากคุณต้องการ HTML 4

package com.example;

import java.io.StringWriter;
import java.util.HashMap;

public class StringUtils {

    public static final String unescapeHtml3(final String input) {
        StringWriter writer = null;
        int len = input.length();
        int i = 1;
        int st = 0;
        while (true) {
            // look for '&'
            while (i < len && input.charAt(i-1) != '&')
                i++;
            if (i >= len)
                break;

            // found '&', look for ';'
            int j = i;
            while (j < len && j < i + MAX_ESCAPE + 1 && input.charAt(j) != ';')
                j++;
            if (j == len || j < i + MIN_ESCAPE || j == i + MAX_ESCAPE + 1) {
                i++;
                continue;
            }

            // found escape 
            if (input.charAt(i) == '#') {
                // numeric escape
                int k = i + 1;
                int radix = 10;

                final char firstChar = input.charAt(k);
                if (firstChar == 'x' || firstChar == 'X') {
                    k++;
                    radix = 16;
                }

                try {
                    int entityValue = Integer.parseInt(input.substring(k, j), radix);

                    if (writer == null) 
                        writer = new StringWriter(input.length());
                    writer.append(input.substring(st, i - 1));

                    if (entityValue > 0xFFFF) {
                        final char[] chrs = Character.toChars(entityValue);
                        writer.write(chrs[0]);
                        writer.write(chrs[1]);
                    } else {
                        writer.write(entityValue);
                    }

                } catch (NumberFormatException ex) { 
                    i++;
                    continue;
                }
            }
            else {
                // named escape
                CharSequence value = lookupMap.get(input.substring(i, j));
                if (value == null) {
                    i++;
                    continue;
                }

                if (writer == null) 
                    writer = new StringWriter(input.length());
                writer.append(input.substring(st, i - 1));

                writer.append(value);
            }

            // skip escape
            st = j + 1;
            i = st;
        }

        if (writer != null) {
            writer.append(input.substring(st, len));
            return writer.toString();
        }
        return input;
    }

    private static final String[][] ESCAPES = {
        {"\"",     "quot"}, // " - double-quote
        {"&",      "amp"}, // & - ampersand
        {"<",      "lt"}, // < - less-than
        {">",      "gt"}, // > - greater-than

        // Mapping to escape ISO-8859-1 characters to their named HTML 3.x equivalents.
        {"\u00A0", "nbsp"}, // non-breaking space
        {"\u00A1", "iexcl"}, // inverted exclamation mark
        {"\u00A2", "cent"}, // cent sign
        {"\u00A3", "pound"}, // pound sign
        {"\u00A4", "curren"}, // currency sign
        {"\u00A5", "yen"}, // yen sign = yuan sign
        {"\u00A6", "brvbar"}, // broken bar = broken vertical bar
        {"\u00A7", "sect"}, // section sign
        {"\u00A8", "uml"}, // diaeresis = spacing diaeresis
        {"\u00A9", "copy"}, // © - copyright sign
        {"\u00AA", "ordf"}, // feminine ordinal indicator
        {"\u00AB", "laquo"}, // left-pointing double angle quotation mark = left pointing guillemet
        {"\u00AC", "not"}, // not sign
        {"\u00AD", "shy"}, // soft hyphen = discretionary hyphen
        {"\u00AE", "reg"}, // ® - registered trademark sign
        {"\u00AF", "macr"}, // macron = spacing macron = overline = APL overbar
        {"\u00B0", "deg"}, // degree sign
        {"\u00B1", "plusmn"}, // plus-minus sign = plus-or-minus sign
        {"\u00B2", "sup2"}, // superscript two = superscript digit two = squared
        {"\u00B3", "sup3"}, // superscript three = superscript digit three = cubed
        {"\u00B4", "acute"}, // acute accent = spacing acute
        {"\u00B5", "micro"}, // micro sign
        {"\u00B6", "para"}, // pilcrow sign = paragraph sign
        {"\u00B7", "middot"}, // middle dot = Georgian comma = Greek middle dot
        {"\u00B8", "cedil"}, // cedilla = spacing cedilla
        {"\u00B9", "sup1"}, // superscript one = superscript digit one
        {"\u00BA", "ordm"}, // masculine ordinal indicator
        {"\u00BB", "raquo"}, // right-pointing double angle quotation mark = right pointing guillemet
        {"\u00BC", "frac14"}, // vulgar fraction one quarter = fraction one quarter
        {"\u00BD", "frac12"}, // vulgar fraction one half = fraction one half
        {"\u00BE", "frac34"}, // vulgar fraction three quarters = fraction three quarters
        {"\u00BF", "iquest"}, // inverted question mark = turned question mark
        {"\u00C0", "Agrave"}, // А - uppercase A, grave accent
        {"\u00C1", "Aacute"}, // Б - uppercase A, acute accent
        {"\u00C2", "Acirc"}, // В - uppercase A, circumflex accent
        {"\u00C3", "Atilde"}, // Г - uppercase A, tilde
        {"\u00C4", "Auml"}, // Д - uppercase A, umlaut
        {"\u00C5", "Aring"}, // Е - uppercase A, ring
        {"\u00C6", "AElig"}, // Ж - uppercase AE
        {"\u00C7", "Ccedil"}, // З - uppercase C, cedilla
        {"\u00C8", "Egrave"}, // И - uppercase E, grave accent
        {"\u00C9", "Eacute"}, // Й - uppercase E, acute accent
        {"\u00CA", "Ecirc"}, // К - uppercase E, circumflex accent
        {"\u00CB", "Euml"}, // Л - uppercase E, umlaut
        {"\u00CC", "Igrave"}, // М - uppercase I, grave accent
        {"\u00CD", "Iacute"}, // Н - uppercase I, acute accent
        {"\u00CE", "Icirc"}, // О - uppercase I, circumflex accent
        {"\u00CF", "Iuml"}, // П - uppercase I, umlaut
        {"\u00D0", "ETH"}, // Р - uppercase Eth, Icelandic
        {"\u00D1", "Ntilde"}, // С - uppercase N, tilde
        {"\u00D2", "Ograve"}, // Т - uppercase O, grave accent
        {"\u00D3", "Oacute"}, // У - uppercase O, acute accent
        {"\u00D4", "Ocirc"}, // Ф - uppercase O, circumflex accent
        {"\u00D5", "Otilde"}, // Х - uppercase O, tilde
        {"\u00D6", "Ouml"}, // Ц - uppercase O, umlaut
        {"\u00D7", "times"}, // multiplication sign
        {"\u00D8", "Oslash"}, // Ш - uppercase O, slash
        {"\u00D9", "Ugrave"}, // Щ - uppercase U, grave accent
        {"\u00DA", "Uacute"}, // Ъ - uppercase U, acute accent
        {"\u00DB", "Ucirc"}, // Ы - uppercase U, circumflex accent
        {"\u00DC", "Uuml"}, // Ь - uppercase U, umlaut
        {"\u00DD", "Yacute"}, // Э - uppercase Y, acute accent
        {"\u00DE", "THORN"}, // Ю - uppercase THORN, Icelandic
        {"\u00DF", "szlig"}, // Я - lowercase sharps, German
        {"\u00E0", "agrave"}, // а - lowercase a, grave accent
        {"\u00E1", "aacute"}, // б - lowercase a, acute accent
        {"\u00E2", "acirc"}, // в - lowercase a, circumflex accent
        {"\u00E3", "atilde"}, // г - lowercase a, tilde
        {"\u00E4", "auml"}, // д - lowercase a, umlaut
        {"\u00E5", "aring"}, // е - lowercase a, ring
        {"\u00E6", "aelig"}, // ж - lowercase ae
        {"\u00E7", "ccedil"}, // з - lowercase c, cedilla
        {"\u00E8", "egrave"}, // и - lowercase e, grave accent
        {"\u00E9", "eacute"}, // й - lowercase e, acute accent
        {"\u00EA", "ecirc"}, // к - lowercase e, circumflex accent
        {"\u00EB", "euml"}, // л - lowercase e, umlaut
        {"\u00EC", "igrave"}, // м - lowercase i, grave accent
        {"\u00ED", "iacute"}, // н - lowercase i, acute accent
        {"\u00EE", "icirc"}, // о - lowercase i, circumflex accent
        {"\u00EF", "iuml"}, // п - lowercase i, umlaut
        {"\u00F0", "eth"}, // р - lowercase eth, Icelandic
        {"\u00F1", "ntilde"}, // с - lowercase n, tilde
        {"\u00F2", "ograve"}, // т - lowercase o, grave accent
        {"\u00F3", "oacute"}, // у - lowercase o, acute accent
        {"\u00F4", "ocirc"}, // ф - lowercase o, circumflex accent
        {"\u00F5", "otilde"}, // х - lowercase o, tilde
        {"\u00F6", "ouml"}, // ц - lowercase o, umlaut
        {"\u00F7", "divide"}, // division sign
        {"\u00F8", "oslash"}, // ш - lowercase o, slash
        {"\u00F9", "ugrave"}, // щ - lowercase u, grave accent
        {"\u00FA", "uacute"}, // ъ - lowercase u, acute accent
        {"\u00FB", "ucirc"}, // ы - lowercase u, circumflex accent
        {"\u00FC", "uuml"}, // ь - lowercase u, umlaut
        {"\u00FD", "yacute"}, // э - lowercase y, acute accent
        {"\u00FE", "thorn"}, // ю - lowercase thorn, Icelandic
        {"\u00FF", "yuml"}, // я - lowercase y, umlaut
    };

    private static final int MIN_ESCAPE = 2;
    private static final int MAX_ESCAPE = 6;

    private static final HashMap<String, CharSequence> lookupMap;
    static {
        lookupMap = new HashMap<String, CharSequence>();
        for (final CharSequence[] seq : ESCAPES) 
            lookupMap.put(seq[1].toString(), seq[0]);
    }

}

เมื่อเร็ว ๆ นี้ฉันต้องเพิ่มประสิทธิภาพโครงการ Struts ช้า ปรากฎว่าภายใต้ฝาครอบ Struts เรียก Apache สำหรับสตริง html ที่หลบหนีโดยค่าเริ่มต้น ( <s:property value="..."/>) การปิดการหลบหนี ( <s:property value="..." escaping="false"/>) ทำให้บางหน้าทำงานเร็วขึ้น 5% ถึง 20%
เตฟาน

ต่อมาฉันพบว่ารหัสนี้สามารถใส่วนซ้ำเมื่อได้รับสตริงที่ว่างเปล่าเป็นอาร์กิวเมนต์ ฉบับปัจจุบันได้แก้ไขปัญหานั้นแล้ว
Nick Frolov

การหลบหนีหรือการตอบสนองนี้ไม่? & amp; ไม่ได้ถอดรหัส มีการเพิ่มเฉพาะ & ลงในแผนที่จึงใช้งานทางเดียวได้หรือไม่
mmm

3
StringWriter ใช้ StringBuffer ภายในซึ่งใช้การล็อค การใช้ StringBuilder โดยตรงควรเร็วขึ้น
Axel Dörfler

4
@NickFrolov ความคิดเห็นของคุณดูสับสนเล็กน้อย aumlเป็นตัวอย่างและไม่ได้ä д
aioobe

12

ห้องสมุดต่อไปนอกจากนี้ยังสามารถนำมาใช้สำหรับการหลบหนี HTML ใน Java: unbescape

HTML สามารถ unescaped ได้ด้วยวิธีนี้:

final String unescapedText = HtmlEscape.unescapeHtml(escapedText); 

2
มันไม่ได้ทำสิ่งนี้:%3Chtml%3E%0D%0A%3Chead%3E%0D%0A%3Ctitle%3Etest%3C%2Ftitle%3E%0D%0A%3C%2Fhead%3E%0D%0A%3Cbody%3E%0D%0Atest%0D%0A%3C%2Fbody%3E%0D%0A%3C%2Fhtml%3E
58

40
@ThreaT ข้อความของคุณไม่ได้รับการเข้ารหัส html แต่จะเป็นการเข้ารหัส URL
Mikhail Batcer

9

นี่เป็นงานสำหรับฉัน

import org.apache.commons.lang.StringEscapeUtils;
...
String decodedXML= StringEscapeUtils.unescapeHtml(encodedXML);

หรือ

import org.apache.commons.lang3.StringEscapeUtils;
...
String decodedXML= StringEscapeUtils.unescapeHtml4(encodedXML);

ฉันเดาว่ามันจะดีกว่าเสมอที่จะใช้lang3ด้วยเหตุผลที่ชัดเจน หวังว่าจะช่วย :)


4

โซลูชันที่เรียบง่าย แต่ไม่มีประสิทธิภาพโดยไม่มีไลบรารี่ภายนอกคือ:

public static String unescapeHtml3( String str ) {
    try {
        HTMLDocument doc = new HTMLDocument();
        new HTMLEditorKit().read( new StringReader( "<html><body>" + str ), doc, 0 );
        return doc.getText( 1, doc.getLength() );
    } catch( Exception ex ) {
        return str;
    }
}

สิ่งนี้ควรใช้ต่อเมื่อคุณมีจำนวนสตริงที่ต้องถอดรหัสเท่านั้น


1
ใกล้มาก แต่ไม่แน่นอน - มันแปลง "qwAS12ƷƸDžǚǪǼȌ" เป็น "qwAS12ƷƸDžǚǪǼȌ \ n"
เกร็ก

3

วิธีที่น่าเชื่อถือที่สุดก็คือ

String cleanedString = StringEscapeUtils.unescapeHtml4(originalString);

org.apache.commons.lang3.StringEscapeUtilsจาก

และเพื่อหนีช่องว่าง

cleanedString = cleanedString.trim();

สิ่งนี้จะช่วยให้มั่นใจได้ว่าช่องว่างที่เกิดขึ้นเนื่องจากการคัดลอกและวางในเว็บฟอร์มเพื่อไม่ได้รับการยืนยันในฐานข้อมูล


1

Spring Framework HtmlUtils

หากคุณใช้ Spring Framework อยู่แล้วให้ใช้วิธีการต่อไปนี้:

import static org.springframework.web.util.HtmlUtils.htmlUnescape;

...

String result = htmlUnescape(source);

0

พิจารณาใช้คลาส HtmlManipulator Java คุณอาจต้องเพิ่มบางรายการ (ไม่ใช่เอนทิตีทั้งหมดที่อยู่ในรายการ)

Apache Commons StringEscapeUtils ตามคำแนะนำของ Kevin Hakanson ไม่ได้ผล 100% สำหรับฉัน หลายหน่วยงานเช่น & # 145 (ใบเสนอราคาเดียวซ้าย) ถูกแปลเป็น '222' อย่างใด ฉันยังลอง org.jsoup และมีปัญหาเดียวกัน


0

ในกรณีของฉันฉันใช้วิธีการแทนที่โดยการทดสอบทุกหน่วยงานในทุกตัวแปรรหัสของฉันมีลักษณะเช่นนี้:

text = text.replace("&Ccedil;", "Ç");
text = text.replace("&ccedil;", "ç");
text = text.replace("&Aacute;", "Á");
text = text.replace("&Acirc;", "Â");
text = text.replace("&Atilde;", "Ã");
text = text.replace("&Eacute;", "É");
text = text.replace("&Ecirc;", "Ê");
text = text.replace("&Iacute;", "Í");
text = text.replace("&Ocirc;", "Ô");
text = text.replace("&Otilde;", "Õ");
text = text.replace("&Oacute;", "Ó");
text = text.replace("&Uacute;", "Ú");
text = text.replace("&aacute;", "á");
text = text.replace("&acirc;", "â");
text = text.replace("&atilde;", "ã");
text = text.replace("&eacute;", "é");
text = text.replace("&ecirc;", "ê");
text = text.replace("&iacute;", "í");
text = text.replace("&ocirc;", "ô");
text = text.replace("&otilde;", "õ");
text = text.replace("&oacute;", "ó");
text = text.replace("&uacute;", "ú");

ในกรณีของฉันนี้ทำงานได้ดีมาก


2
นี่ไม่ใช่เอนทิตีพิเศษทุกอัน แม้แต่สองที่กล่าวถึงในคำถามจะหายไป
Sandy Gifford

สิ่งนี้จะไม่ขยายได้ดี
denov

-7

ในกรณีที่คุณต้องการเลียนแบบฟังก์ชั่น php htmlspecialchars_decode ใช้ฟังก์ชั่น php get_html_translation_table () เพื่อถ่ายโอนข้อมูลตารางแล้วใช้รหัส java เช่น

static Map<String,String> html_specialchars_table = new Hashtable<String,String>();
static {
        html_specialchars_table.put("&lt;","<");
        html_specialchars_table.put("&gt;",">");
        html_specialchars_table.put("&amp;","&");
}
static String htmlspecialchars_decode_ENT_NOQUOTES(String s){
        Enumeration en = html_specialchars_table.keys();
        while(en.hasMoreElements()){
                String key = en.nextElement();
                String val = html_specialchars_table.get(key);
                s = s.replaceAll(key, val);
        }
        return s;
}

7
อย่าหล่อมากนัก ใช้ generics กับ HashMap นั้น! นอกจากนี้ให้ใช้ foreach ไม่ใช่สักครู่เพื่อย้ำว่าโค้ดจะมีลักษณะที่อ่านได้ง่ายกว่า!
WhyNotHugo

3
@BalaDutt ถ้าคุณปรับปรุงคำตอบของคุณผู้ชายที่จะทำให้คุณชี้ :)
sparkyspider

3
ปรับปรุงฟังก์ชั่นและชื่อตัวแปรของคุณด้วย @Bala
โทมัส W
โดยการใช้ไซต์ของเรา หมายความว่าคุณได้อ่านและทำความเข้าใจนโยบายคุกกี้และนโยบายความเป็นส่วนตัวของเราแล้ว
Licensed under cc by-sa 3.0 with attribution required.