La comparaison de deux fichiers csv et l'obtention de différence

J'ai deux fichier csv j'ai besoin de comparer et de cracher le concernant les différences au:

FORMAT CSV:

 Name   Produce   Number
 Adam   Apple     5
 Tom    Orange    4
 Adam   Orange    11

J'ai besoin de comparer les deux fichiers csv et ensuite me dire si il y a une différence entre Adams pommes sur la feuille et de la feuille 2 et de le faire pour tous les noms et de produire des chiffres. Les deux fichiers CSV sera formaté de la même.

Tous les pointeurs seront grandement appréciés

Quelle est la version de Python que vous utilisez?
Vous avez marqués ce avec excel mais la mention de fichiers CSV. Avez-vous besoin de travailler avec xlsx ou les fichiers xls? Vous trouverez peut-être que diff fonctionne pour voulez vous en avez besoin, mais vous n'avez pas vraiment dire si cela doit être fait beaucoup de choses et construire un programme en python.
Désolé, vous avez raison d'éditer
2.7.2 verison de python

OriginalL'auteur Trying_hard | 2012-06-19

  1. 6

    J'ai utilisé csvdiff 

    $pip install csvdiff
$csvdiff --style=compact col1 a.csv b.csv

    Lien vers le package sur pypi

    J'ai trouvé ce lien utile

    OriginalL'auteur Aakash Gupta

  2. 5

    Si vos fichiers CSV ne sont pas si grandes qu'ils vont apporter votre machine à genoux si vous les charger dans la mémoire, alors vous pouvez essayer quelque chose comme:

    import csv
csv1 = list(csv.DictReader(open('file1.csv')))
csv2 = list(csv.DictReader(open('file2.csv')))
set1 = set(csv1)
set2 = set(csv2)
print set1 - set2 # in 1, not in 2
print set2 - set1 # in 2, not in 1
print set1 & set2 # in both

    Pour les gros fichiers, vous pouvez les charger dans une base de données SQLite3 et utiliser des requêtes SQL à faire de même, ou le tri par les touches et puis faire un match de fusion.

    Les dicts dans le csv1 liste ne sont pas hashable à la création de set1 ne sera pas possible. Ceci peut être évité par la conversion de la dicts à cordes avec json.décharges
    bon, je suis heureux pour vous d'ajouter de réponse... il suffit de ne pas le modifier comme vous le suggedted...
    TypeError: unhashable type: 'dict'. Venez sur!

    OriginalL'auteur Jon Clements

  3. 1

    L'un des meilleurs utilitaires pour la comparaison de deux fichiers différents est diff.

    Voir Python de mise en œuvre ici: La comparaison de deux .les fichiers txt à l'aide de difflib en Python

    OriginalL'auteur SomeKittens

  4. 1
    import csv

def load_csv_to_dict(fname, get_key, get_data):
    with open(fname, 'rb') as inf:
        incsv = csv.reader(inf)
        incsv.next()  # skip header
        return {get_key(row):get_data(row) for row in incsv}

def main():
    key = lambda r: tuple(r[0:2])
    data = lambda r: int(r[2])
    f1 = load_csv_to_dict('file1.csv', key, data)
    f2 = load_csv_to_dict('file2.csv', key, data)

    f1keys = set(f1.iterkeys())
    f2keys = set(f2.iterkeys())

    print("Keys in file1 but not file2:")
    print(", ".join(str(a)+":"+str(b) for a,b in (f1keys-f2keys)))

    print("Keys in file2 but not file1:")
    print(", ".join(str(a)+":"+str(b) for a,b in (f2keys-f1keys)))

    print("Differing values:")
    for k in (f1keys & f2keys):
        a,b = f1[k], f2[k]
        if a != b:
            print("{}:{} {} <> {}".format(k[0],k[1], a, b))

if __name__=="__main__":
    main()
    Quand j'ai essayer ce en IDLE j'obtiens ceci: pastebin.com/6U035ERr (à l'Aide de pastebin de sorte que vous pouvez voir le message d'erreur complet avec mise en forme)

    OriginalL'auteur Hugh Bothwell

  5. 1

    Si vous souhaitez utiliser Python csv module avec un générateur de fonction, vous pouvez utiliser la boucle imbriquée et de comparer de grandes .les fichiers csv. L'exemple ci-dessous compare chaque ligne à l'aide d'une rapide comparaison:

    import csv

def csv_lazy_get(csvfile):
    with open(csvfile) as f:
        r = csv.reader(f)
        for row in r:
            yield row

def csv_cmp_lazy(csvfile1, csvfile2):
    gen_2 = csv_lazy_get(csvfile2)

    for row_1 in csv_lazy_get(csvfile1):
        row_2 = gen_2.next()

        print("row_1: ", row_1)
        print("row_2: ", row_2)

        if row_2 == row_1:
            print("row_1 is equal to row_2.")
        else:
            print("row_1 is not equal to row_2.")

    gen_2.close()

    OriginalL'auteur octopusgrabbus

  6. 0

    Ici un début qui n'utilise pas difflib. Il est vraiment juste un point pour construire à partir de parce que peut-être Adam et pommes apparaissent deux fois sur la feuille; pouvez-vous vous assurer que n'est pas le cas? Si l'pommes être additionnés, ou est-ce une erreur?

    import csv
fsock = open('sheet.csv','rU')
rdr = csv.reader(fsock)
sheet1 = {}
for row in rdr:
    name, produce, amount = row
    sheet1[(name, produce)] = int(amount) # always an integer?
fsock.close()
# repeat the above for the second sheet, then compare

    - Vous eu l'idée?

    OriginalL'auteur ChrisP