简体   繁体   中英

How to count the number of line in a tsv file which end with a specific string?

I have a tsv file with two columns seperate by tabulation. The first column is the colum of sentences and the second the column of label I want to count the number of sentences which are positive, negative or neutral in the file sa I read it and loop inside it. I come up with this small code but It does not work? How can I improve it?


tsv = ['jdmfreins', 'jdmconditions', 'jdmne', 'jdmmotivations']

for s in tsv:
    
    c_pos = 0
    c_neu = 0
    c_neg = 0
    
    path = os.path.join(fileDir, '/mnt/c/Users/Emmanuelle/Documents/Extraction_corpus/fichier_sorti_tsv', s + '.tsv')
    with open(path, 'r', encoding='utf-8') as l_1:
        next(l_1)
        print(s, '\n ')
        l_1 = [line.rstrip() for line in l_1]
        for line in l_1:
            print(line)
            if line.strip().endswith('positif'):
                c_pos =+ 1
            elif line.strip().endswith('neutre'):
                c_neu =+ 1
            else:
                c_neg =+ 1

    print('nombre positif :', c_pos)
    print('nombre négatif :', c_neg)
    print('nombre neutre :', c_neu, '\n')

The file look like this:

"""""""J'avais adoré les deux premières, mais celui-ci n'est pas du tout à la hauteur."""   positif
Peter Criss et Ace Frehley trouvent davantage leur place dans le travail de composition et au chant (Hooligan / Shock Me) face à l'omniprésence de la paire Stanley/Simmons mais les tensions internes existent et conduiront aux 4 albums solos de 1978... positif
Le contexte est certes bien rendu, mais les rapports entre les héros sont exécrables.   positif
Le sujet aurait pu faire un bon vaudeville avec un tant soit peu d'humour et de finesse, mais, la plus belle femme du monde ne peut donner que ce qu'elle a !!! positif
arnold est mauvais, il fait des blagues pas marrantes le mechant est simplement le meme que dans le 2 mais en plus balezes, nick stahl est mauvais : pour finir c'est pitoyable de voir ce que peut faire hollywood pour du fric!   neutre
Oui mais... Excusez moi mais même si les sketch me font rire séparément, essayer de tous les avaler en une soirée, c'est comme essayer de manger des kilos de foie gras en un repas.    neutre
Au risque de ne pas brosser la majorité dans le sens du poil, je vais donner un avis honnête, qui n'engage que moi mais qui est tellement différent de ceux que j'avais pu lire qu'il peut être utile à certains.   positif
(oubliez les compils recentes qui n'ont de compils que le nom,mais n'ont pas oublié au passage le coté biseness négatif
Début long avant d'etre pris par un peu de suspens devant un personnage que l'on pense interessant ( psychothérapeute tueur !)mais elle nous amène vers d'autres personnages s'étendant sur leur séjour, leur rencontre que l'on s'imagine utile pour la fin mais il n'en est rien!!    neutre
La charge est un peu cruelle, mais l’unicité du style des DA de Miyasaki finit par me lasser.   positif
Bon et bien le premier n'était déjas pas une révélation du cinéma mais là on frise le délit d'abut de confience.    positif
Peut être suis-je excessif dans mes propos, mais je crois qu'ils sont à la mesure de ma déception.  positif
"""presque cristalline chante pour 2 minutes de Bonheur auditif après tant de déception: Pourquoi ne se lancerait elle pas plutôt dans l'opéra et le répertoire classique revisité???ses nouvelles fréquentations lui font probablement du bien au cœur mais feraient mieux de changer de métier et arrêter de pervertir son talent si mal exploité"""""""  neutre

and the answer:

nombre positif : 0
nombre négatif : 0
nombre neutre : 1

I tried also: if line.split('\t') == 'positif': but same answer

You can use Counter from the collections module:

from collections import Counter
 
with open('file.txt','r') as f:
    lines = f.read().splitlines()

count = Counter([l.split()[-1] for l in lines])

print(count)

Output:

Counter({'positif': 8, 'neutre': 4, 'négatif': 1})


If you want the results in a dictionary:

print(dict(count))

Output:

{'positif': 8, 'neutre': 4, 'négatif': 1}


Breaking it down. This part:

with open('file.txt','r') as f:
    lines = f.read().splitlines()

will assign all the lines in file.txt to a list called lines . The newlines have already been taken care of by the read().splitlines() . This part:

[l.split()[-1] for l in lines]

is a list comprehension that will list all the last words from the lines in lines , where str.split() will return a list of strings that have been separated by a space, and [-1] means the last element of the list.

The technical post webpages of this site follow the CC BY-SA 4.0 protocol. If you need to reprint, please indicate the site URL or the original address.Any question please contact:yoyou2525@163.com.

 
粤ICP备18138465号  © 2020-2024 STACKOOM.COM