BufferedReader가 지정된 UTF-8 형식으로 읽히지 않는 이유는 무엇입니까?

Question

몇 개의 웹 사이트를 고치고 있습니다. 그 중 일부는 ' 대신에 어퍼 스트로피 대신 " 및 ’ 대신 따옴표로 “과 같은 특수 문자와 라틴 문자가 아닌 문자를 포함하고 있습니다.

여기

내가 콘솔에 인쇄 관련 텍스트가 ... 진짜 커브 볼이다. IDE (Netbeans)에서 실행하면 모든 것이 잘 인코딩됩니다. ...

사람이 내가 나에게 나는 이미 그 일을했다고 가정 해 봅시다 -Dfile.encoding=UTF8 내 JAVA_TOOL_OPTIONS 환경 변수를 설정해야이 여전히 문제라고하기 전에 ΓÇ£I Need Your HelpΓÇ¥ : 내 컴퓨터에서 실행할 때 “I Need Your Help”는 다음과 같이 출력됩니다 . 게다가, 버퍼링 된 리더의 인코딩을 "UTF-8"으로 지정하는 것이 어쨌든 무시되지 않아야합니까? 여기

는 몇 가지 정보입니다 :

• 나는 1.7
• 나는 모든 기계에 대한 윈도우 7 시스템에서 실행 해요로 대상 플랫폼으로 JDK 7을 사용하고 있는데 나는 이것을에 실행하고있어 동일한 문제가 발생합니다 (일부는 JAVA_TOOL_OPTIONS 집합이 없지만 어떤 차이가없는 것으로 보입니다).
• 나는

여기 내 코드의 ... 그것을 사용하고 기본 인코딩은 Cp1252를 생각합니다. 더 많은 정보가 필요한지 여부를 알려주세요. 감사!

/** 
* Using the given url, this method creates and returns the buffered reader for that url 
* 
* @param urlString 
* @return 
* @throws MalformedURLException 
* @throws IOException 
*/ 
public synchronized static BufferedReader getBufferedReader(String urlString) throws MalformedURLException, IOException { 
    URL url = new URL(urlString); 
    InputStream is = url.openStream(); 
    BufferedReader br = new BufferedReader(new InputStreamReader(is, "UTF-8")); 
    return br; 
} 

Answer 1

두 가지 가능성이 있습니다. user1291492이 말한 것처럼 내용을 올바르게 읽을 수 있지만 터미널에서 사용하는 인코딩은 IDE에서 사용하는 인코딩과 다릅니다.

다른 가능성은 소스 데이터가 UTF-8이 아니기 때문입니다. 웹 사이트를 스크래핑하는 경우 웹 사이트에서 Content-Type 헤더를 통해 인코딩하는 데 사용하고 있다고 말하면 항상 UTF-8이라고 가정하지 말아야합니다.

Answer 2

IDE의 출력 "창"에는 아마도 utf-8 문자를 이해하고 인쇄 할 수있는 용량이 있습니다. 콘솔이 너무 발전되지 않을 수도 있습니다.

Answer 3

try { 
     reader = new BufferedReader(new InputStreamReader(in,"UTF-8")); 
    } catch (UnsupportedEncodingException e1) { 
     // TODO Auto-generated catch block 
     e1.printStackTrace(); 
    } 
     String line=""; 
     String s =""; 
    try 
    { 
     line = reader.readLine(); 
    } 
    catch (IOException e) 
    { 
     e.printStackTrace(); 
    } 
     while (line != null) 
     { 
     s = s + line; 
     s =s+"\n"; 
     try 
     { 
      line = reader.readLine(); 
     } 
     catch (IOException e) 
     { 
      e.printStackTrace(); 
     } 
    } 
    tv.setText(""+s); 
    }