Chargement de texte utf-8 dans une table MySQL

J'ai un gros fichier CSV que je vais le charger dans une table MySQL. Cependant, ces données sont encodées en utf-8, car ils comportent des caractères non anglais.
J'ai déjà le jeu de caractères de la colonne correspondante dans la table de l'utf-8. Mais quand je charge mon fichier. les non-anglais caractères en caractères bizarres(quand je fais un select sur mes lignes de la table). Ai-je besoin pour encoder mes données avant que je charge la dans la table? si oui comment puis-je faire cela. Je suis à l'aide de Python pour charger les données et en utilisant la commande LOAD DATA LOCAL INFILE.
grâce

  • Voici mon problème. Pour certains caractères, tels que certaines émoticônes, vous devez utiliser CHARACTER SET utf8mb4 comme décrit ici: stackoverflow.com/a/10959780/470749
InformationsquelleAutor Hossein | 2011-02-10
  1. 16

    comme dit dans http://dev.mysql.com/doc/refman/5.1/en/load-data.html,
    vous pouvez spécifier le jeu de caractères utilisé par votre fichier CSV avec le "JEU de CARACTÈRES" paramètre facultatif de LOAD DATA LOCAL INFILE

    • Il ne dit pas que mysql utilise à tort un autre jeu de caractères, indépendamment de ce que la colonne jeu de caractères que vous avez mis !
    InformationsquelleAutor dweeves
  2. 86

    Essayer

    LOAD DATA INFILE 'file'
IGNORE INTO TABLE table
CHARACTER SET UTF8
FIELDS TERMINATED BY ';'
OPTIONALLY ENCLOSED BY '"'
LINES TERMINATED BY '\n'
    • doit être accepté de répondre à
    • l'ajout de "CHARACTER SET UTF8" était la clé!
    • Oh mon dieu, m'a pris du temps. Tout essayé, il a juste cessé de conversion utf8 latine et de l'importer dans un utf 8 table. L'option d'encodage fait des merveilles.
    • Excellente solution, merci bro
    • En gros, c'est une erreur de mysql, jusqu'à la dernière version, y compris MariaDb. Si une table ou une colonne est UTF8, il doit automatiquement prendre les valeurs correctes. Eh bien, il ne le fait pas, vous devez le spécifier et j'espère que vous avez pas de tables mixtes.
    InformationsquelleAutor JMHeap
  3. 3

    N'avez pas besoin d'encoder vos personnages dans le fichier, mais vous devez vous assurer que votre fichier est l'encodage en UTF-8 avant de charger ce fichier de base de données.

    InformationsquelleAutor BuiXuanThanh
  4. 2

    Vous devez envoyer 

    init_command = 'SET NAMES UTF8'
use_unicode = True
charset = 'utf8'

    lors MySQLdb.connect()
    par exemple,

    dbconfig = {}
dbconfig['host']            = 'localhost'
dbconfig['user']            = ''
dbconfig['passwd']          = ''
dbconfig['db']              = ''
dbconfig['init_command']    = 'SET NAMES UTF8'
dbconfig['use_unicode']     = True
dbconfig['charset']         = 'utf8'

conn = MySQLdb.connect(**dbconfig)

    edit: ah, désolé, je vois que vous avez ajouté que vous êtes à l'aide de "LOAD DATA LOCAL INFILE" -- ce n'était pas clair à partir de votre question initiale 🙂

    • C'est le langage de programmation spécifique.
    • oui, c'est python comme précisé dans la question... avez-vous downvote pour ça?!
    • Ah, oui! Raté et j'ai vu pas python tag.
    • ...et oui. J'ai essayé de le défaire, mais le site, malheureusement, m'empêche de changer le vote avant la réponse est édité. Donc, si vous modifier de quelque manière à un certain point, laissez-moi savoir et je vais le défaire.
    • pas de soucis -- j'étais juste intrigué 🙂
    InformationsquelleAutor simon
  5. 0

    Essayer quelque chose comme,

    LOAD DATA LOCAL INFILE "fichier"
    DANS le TABLEAU message_history
    JEU DE CARACTÈRES UTF8
    LES COLONNES RÉSILIÉ PAR '|'
    ÉVENTUELLEMENT ENCLOSED BY '"'
    ESCAPED BY '"';

    Structure D'Origine,

    https://dev.mysql.com/doc/refman/8.0/en/load-data.html

    InformationsquelleAutor Hasitha Nanayakkara