Экспорт Python MySQL CSV в странную кодировку json

Я получил действительно хорошие результаты, используя фреймворк данных pandas из Continuum Analytics.

Вы можете сделать что-то вроде:

import pandas as pd
from pandas import *

con='Your database connection credentials user, password, host, database to use'
data=pd.read_sql_query('SELECT * FROM YOUR TABLE',conn=con)

Тогда вы можете сделать:

data.to_csv('path_with_file_name')

или конвертировать в JSON:

data.to_json(orient='records')

или, если вы предпочитаете настроить формат json, см. документацию здесь: http://pandas.pydata.org/pandas-docs/stable/generated/pandas.DataFrame.to_json.html

Вы пробовали использовать модуль кодеков?:

import codecs
....
codecs.EncodedFile(r, 'latin1').reader.read()

Я помню, что некоторое время назад у меня была похожая проблема, и ответ был как-то связан с тем, как кодирование выполнялось до Python 3. Кодеки, кажется, справляются с этой проблемой относительно элегантно.

Как упомянул кодер в комментариях к вопросу, трудно точно определить проблему, не имея возможности воспроизвести ее, поэтому я могу лаять не по тому дереву.

У вас, наверное, две проблемы. Но давайте отступим... Мы не можем сказать, был ли текст неправильно импортирован, неправильно экспортирован или просто отображен дурацким образом.

Во-первых, я собираюсь обсудить "импорт"...

Не пытайтесь изменить кодировку. Вместо этого живите с кодировкой. Но сначала разберитесь, что такое кодировка. Это может быть latin1 или utf8. (Или любой из множества менее вероятных кодировок.)

Узнайте шестнадцатеричный код входящего файла. В Python код для дампа шестнадцатеричного кода (и т. д.) для строки u выглядит примерно так:

for i, c in enumerate(u):
    print i, '%04x' % ord(c), unicodedata.category(c),
    print unicodedata.name(c)

Вы можете здесь просмотреть список шестнадцатеричные значения для всех символов latin1 вместе с шестнадцатеричным значением utf8. Например, ó — это latin1 F3 или utf8 C2B3.

Теперь, вооружившись знанием кодировки, сообщите об этом MySQL.

LOAD DATA INFILE ...
    ...
    CHARACTER SET utf8  -- or latin1
    ...;

Между тем, не имеет значения, что CHARACTER SET ... определяет таблица или столбец; mysql перекодирует при необходимости. Все испанские символы доступны в latin1 и utf8.

Перейдите к этим вопросам и ответам< /эм> .