python3로 json 형식의 파일을 읽는 경우의 인코딩 오류 현상.

Question

안녕하세요, 저는 코딩 초보자입니다.제가 python3로 json 형식의 파일을 읽으려 하고 있습니다. 문제는 출력 결과물이 인코딩(utf-8)을 했음에도 불구하고, 자료의 일부분 스트링이 유니코드(16진수)로 보여진다는 점입니다. 이 유니코드로 보이는 부분을 한글로 보일 수 있도록해결할 수 있는 방법을 일주일 간 강구해보았는데, 뾰족한 수가 없어서 이곳에 여쭤보는 점 양해해주시면 감사하겠습니다. 1) python3 에 친 코드import json from collections import OrderedDict from pprint import pprint with open('articles.json', encoding="utf-8") as data_file: data = json.load(data_file, object_pairs_hook=OrderedDict) pprint(data) 2) 출력 결과물 예시 OrderedDict([('path', '/Club/Board/General/View.asp?club_id=50998073&item_seq=189555857&cpage=1¬ice=yes&search_block=1&Scpage=1&board_type=1&list_type=0&show_type=5&headtag_seq=&club_auth=0'), ('articleNo', 189555857), ('category', '전체글보기: 다담실록(實錄)'), ('subject', '[일지] 141120 다담배세다 8,4강전 뒤풀이 ,etc'), ('registerAt', '2014.11.21 23:39'), ('username', '백종현'), ('files', ''), ('contents', ' ' '

[세션 ' '중]

' '

회장단 ' '기념품 택배 발송 ' '도움 주신 분 > 유니코드로 나오고 있습니다. 귀한 시간 내주셔서 확인해주시고, 아시는 부분을 공유해주신다면 정말 감사하겠습니다.

Christopher · Accepted Answer

정규식으로 해결 가능 할 듯 하네요:import re f = lambda x: x.group(0).replace("#x", "\u").encode().decode("unicode-escape").strip("&;") re.sub("&#x\w{4};", f, data["contents"])결과물: '

[세션 중]

회장단 기념품 택배 발송 도움 주신 분

cabobot · Answer

큰 도움 주셔서 정말 감사합니다.잘 활용하겠습니다.저도 좀더 분발해서 코딩 지식을 쌓아볼게요. 감사합니다

cabobot · Answer

감사히 제안해주신 코드를 넣어서 해보았는데,오류 메시지가 출력되고 구글링을 해보았지만 해결이 어려워 다시 질문 드리는 점 양해 부탁드립니다.. import re import json from collections import OrderedDict from pprint import pprint with open('articles.json', encoding&#61;&#34;utf-8&#34;) as data_file: data &#61; json.load(data_file, object_pairs_hook&#61;OrderedDict) f &#61; lambda x: x.group(0).replace(&#34;#x&#34;, &#34;\u&#34;).encode().decode(&#34;unicode-escape&#34;).strip(&#34;&;&#34;) re.sub(&#34;&#x\w{4};&#34;, f, data[&#34;contents&#34;]) pprint(data) 위와 같이 하였는데, Traceback (most recent call last): File &#34;파일경로&#34;, line 10, in <module> re.sub(&#34;&#x\w{4};&#34;, f, data[&#34;contents&#34;]) TypeError: list indices must be integers or slices, not str 이러한 오류 메시지가 출력됩니다. 이 에러를 고치려고 하였는데, 다시 이것저것 해보아도다른 타입의 새로운 에러메시지만 나와서 죄송하게도 다시 답을 구하게 되었습니다. 제가 프로그래밍 관련 지식이 부족한 관계로, 염치 불구하고 반복하여 답을 여쭙는 점 양해 부탁드립니다.감사합니다.

Christopher · Answer

data가 리스트인가보네요. print(data) 하신 결과물을 올려주시면 좋을것같아요

cabobot · Answer

우선 추가로 확인해주신 점 정말 감사합니다! 귀한 시간 내주셔서 확인해주신 점 진심으로 감사합니다.. 코드블록으로 처리가 안 되어.. 죄송하게도 print(data) 출력물의 가독성이 떨어집니다. 1) print(data)하기 위해 친 코드 import json with open('articles.json', encoding="utf-8") as data_file: data = json.load(data_file) print(data) 2) print(data)할 시, 출력물은 아래와 같이 뜹니다. (맨 앞부분 일부분) <이전> 6.1 매달 마지막 주 세션 후 동아리 안건이나 운영에 관한 전체 회의를 할 수 있다.

<추가> 6.1 운영진 회의의 결정으로 매달 마지막 주 세션 후 동아리 안건이나 운영에 관한 전체 회의를 할 수 있다.

→찬성14표 가결

----------------------------------------------------------------------------------

'}, {'path': '/Club/Board/General/View.asp?club_id=50998073&item_seq=161539939&cpage=1¬ice=yes&search_block=1&Scpage=1&board_type=1&list_type=0&show_type=5&headtag_seq=&club_auth=0', 'articleNo': 161539939, 'category': '전체글보기: 다담실록(實錄)', 'subject': '[일지]2008년 1학기 7월 15일', 'registerAt': '2008.07.16 23:26', 'username': '최민옥', 'files': '', 'contents': '

1. 출결사항

<출석>

정상출석 : 정대철 공수진 김동균 김동훈 문선영 오지민 임지원 박준서 이인환 주하람 최지숙 노우진 이기출 이종혁

지 각 : 서하람 (유계) 김성수( 4시10분 후 ) 김윤혜( 4시 10분 후 )

<결석>

유계결석 : 김재연 정호경 최민옥 이상길 강지숙 윤이나 김주영 배선정 전예원

무계결&Y: 바탕">그리고, 5/20일 이후로 동아리방을 잠정 폐쇄할 예정입니다. 또한 자물쇠를 추가적으로 부착하고 저를 비롯한 운영진이 동아리방 내에 상시 대기하는 등의 조치를 통해 일방적인 철거 행태에 대비하고자 합니다.

따라서 개인 짐을 동아리방에 보관하신 회원님들은 혹시모를 피해에 대비하여 개인짐을 되찾아가시길 당부드립니다.

동아리방 없는 동아리는 모임과 다르지 않습니다. 동아리방에 머무는 혹은 들르는 빈도수에는 분명 개인차가 존재한다는 점 알고 있습니다. 그러나 동시에, 모임이 아니라 동아리 다담의 ‘집’이 동아리방이라는 점 역시 알고 있습니다.

저를 비롯한 운영진은 동아리방을 지키기 위해 최선을 다할 것이니 응원 부탁드립니다.

그리고 이번 사안은 저를 믿고 따라와 주시길 고개 숙여 부탁드립니다.

끝으로

비 온 뒤 땅이 굳듯, 이번 위기를 통해 다담은 더 좋은 동아리가 될 것이라 확신합니다.

'}, 3) 동일한 내용으로 pprint(data) 했을 시, 결과물 OrderedDict([('path', '/Club/Board/General/View.asp?club_id=50998073&item_seq=189555857&cpage=1¬ice=yes&search_block=1&Scpage=1&board_type=1&list_type=0&show_type=5&headtag_seq=&club_auth=0'), ('articleNo', 189555857), ('category', '전체글보기: 다담실록(實錄)'), ('subject', '[일지] 141120 다담배세다 8,4강전 뒤풀이 ,etc'), ('registerAt', '2014.11.21 23:39'), ('username', '백종현'), ('files', ''), ('contents', ' ' '

[세션 ' '중]

' '

회장단 ' '기념품 택배 발송 ' '도움 주신 분

Christopher · Answer

파일을 직접 받지 않는 한 더 이상 힘들 것 같아서, 의심되는 모든 점을 한번 적어봅니다.1. 먼저 에러는 리스트 인덱싱을 str으로 할 수 없다 라는 에러에요. 해당 코드에서 스트링 인덱싱 하고 있는 부분은 data["contents"] 밖에 없으니, data가 리스트라고 유추할 수 있겠죠. type(data)로 확인 해보시면 dict이 나와야 할텐데, 뭔가 이상 하네요.2. pprint(data)를 했을 때, OrderedDict으로 나온 것은, 당연히 현재 data가 dict 형식이라는 거에요. 여기서부터 파일 없이는 디버깅이 막힙니다.3. json으로 로드를 하셨으니, json 덤프도 되겠죠. 아래와 같이 한번 해보시고, 최종적으로 안되면 어렵겠네요. 마지막 의심 스러운 것은, pprint의 결과물의 끝에 )])가 비어 있는 건데, 큰 의미 없을 듯 해서 넘어 갑니다. import json from collections import OrderedDict # 파일을 읽은 후, 다시 dump 합니다 with open("test.json", "w") as f: json.dump(data, f) with open('test.json', encoding="utf-8") as data_file: data = json.load(data_file, object_pairs_hook=OrderedDict) print(data["contents"]) '

[세션 중]

회장단 기념품 택배 발송 도움 주신 분 P {MARGIN-TOP: 2px; MARGIN-BOTTOM: 2px}

[세션 중]

회장단 기념품 택배 발송 도움 주신 분

cabobot · Answer

네, 정말 감사합니다!! 알려주신 정보들 활용해서 해결해보도록 하겠습니다. 귀한 시간 할애해주신 점 정말 감사합니다.

python3로 json 형식의 파일을 읽는 경우의 인코딩 오류 현상.

7개의 답변

Q&A 목록