이 이중 인코딩을 해결하는 방법은 무엇입니까?

Question

요청을 전처리하기 위해 파이썬과 정보를 저장하는 MySQL 데이터베이스를 사용하여 웹 사이트를 개발 중입니다.

내 모든 테이블은 utf8이고 utf8도 Content-type으로 사용됩니다.

print results.encode("utf-8") 

가를 표시합니다 :이 같은 간단한 SELECT 쿼리의 결과를 인쇄 호스팅 내에서 GoDaddy에 대한 간단한 테스트를 실행

database_connection = MySQLdb.connect(host = database_host, user = database_username, passwd = database_password, db = database_name, use_unicode = True) 
cursor = database_connection.cursor() 
cursor.execute("""SET NAMES utf8;"""); 
cursor.execute("""SET CHARACTER SET utf8;"""); 
cursor.execute("""SET character_set_connection=utf8;"""); 

:

나는 DB에 연결을 설정하기 위해이 코드를 이중으로 인코딩 된 문자열. (따라서 ASCII 문자가 아닌 모든 문자는 두 개의 다른 스페셜로 변환됩니다.) 그러나 encode 문을두면 ASCII 문자가 아닌 문자 각각에 대해 인코딩 오류가 발생합니다.

Answer 1

마치 results에 데이터베이스에서 오는 바이트 문자열에서 잘못 해독 된 유니 코드 문자열이있는 것처럼 들립니다. 나는. 데이터베이스에서 데이터를 읽을 때 실제로 UTF-8이 아닌 Latin-1로 바이트 문자열을 디코딩합니다.

데이터베이스 내용의 디코딩을 수정하면 비즈니스에 있어야합니다.

Answer 2

나는 내 자신의 인코딩 사냥 중 하나를 인터넷에서 발견 한 이와 비슷한 것을 사용합니다. 적합성을 찾기 위해 연쇄 (chaining) 인코딩 스타일을 유지할 수 있습니다.

다른 사람이 말했듯이, 소스를 먼저 고정 시키십시오. 이 해킹은 인코딩이 실제로 반환되는지 파악하는 것입니다. 희망이 도움이됩니다.

#this method is a simple recursive hack that is going to find a compatible encoding for the problematic field 
#does not guarantee successful encoding match. If no match is found, an error code will be returned: ENC_ERR 

def findencoding(field, level): 
    print "level: " + str(level) 
    try: 
     if(level == 0): 
      field = field.encode('cp1252') 
     elif(level == 1): 
      field = field.encode('cp1254') 
     else: 
      return "ENC_ERR" 
    except Exception: 
     field = findencoding(field,level+1) 

    return field