Saya menggunakan python (Django Framework) untuk membaca file CSV. Saya menarik hanya 2 baris dari CSV ini seperti yang Anda lihat. Apa yang telah saya coba lakukan adalah menyimpan dalam variabel jumlah baris CSV juga.

Bagaimana saya bisa mendapatkan jumlah baris?

file = object.myfilePath
fileObject = csv.reader(file)
for i in range(2):
    data.append(fileObject.next()) 

Saya telah mencoba:

len(fileObject)
fileObject.length

Anda perlu menghitung jumlah baris:

row_count = sum(1 for row in fileObject)  # fileObject is your csv.reader

Menggunakan sum()dengan ekspresi generator membuat penghitung yang efisien, menghindari penyimpanan seluruh file dalam memori.

Jika Anda sudah membaca 2 baris untuk memulai, maka Anda perlu menambahkan 2 baris tersebut ke total Anda; baris yang telah dibaca tidak dihitung.

2018-10-29 EDIT

Terima kasih atas komentarnya

Saya menguji beberapa jenis kode untuk mendapatkan jumlah baris dalam file csv dalam hal kecepatan. Metode terbaik ada di bawah.

with open(filename) as f:
    sum(1 for line in f)

Ini kode yang diuji.

import timeit
import csv
import pandas as pd

filename = './sample_submission.csv'

def talktime(filename, funcname, func):
    print(f"# {funcname}")
    t = timeit.timeit(f'{funcname}("{filename}")', setup=f'from __main__ import {funcname}', number = 100) / 100
    print('Elapsed time : ', t)
    print('n = ', func(filename))
    print('\n')

def sum1forline(filename):
    with open(filename) as f:
        return sum(1 for line in f)
talktime(filename, 'sum1forline', sum1forline)

def lenopenreadlines(filename):
    with open(filename) as f:
        return len(f.readlines())
talktime(filename, 'lenopenreadlines', lenopenreadlines)

def lenpd(filename):
    return len(pd.read_csv(filename)) + 1
talktime(filename, 'lenpd', lenpd)

def csvreaderfor(filename):
    cnt = 0
    with open(filename) as f:
        cr = csv.reader(f)
        for row in cr:
            cnt += 1
    return cnt
talktime(filename, 'csvreaderfor', csvreaderfor)

def openenum(filename):
    cnt = 0
    with open(filename) as f:
        for i, line in enumerate(f,1):
            cnt += 1
    return cnt
talktime(filename, 'openenum', openenum)

Hasilnya di bawah.

# sum1forline
Elapsed time :  0.6327946722068599
n =  2528244


# lenopenreadlines
Elapsed time :  0.655304473598555
n =  2528244


# lenpd
Elapsed time :  0.7561274056295324
n =  2528244


# csvreaderfor
Elapsed time :  1.5571560935772661
n =  2528244


# openenum
Elapsed time :  0.773000013928679
n =  2528244

Kesimpulannya, sum(1 for line in f)paling cepat. Tetapi mungkin tidak ada perbedaan yang signifikan dari len(f.readlines()).

sample_submission.csv berukuran 30,2MB dan memiliki 31 juta karakter.

Untuk melakukannya, Anda perlu memiliki sedikit kode seperti contoh saya di sini:

file = open("Task1.csv")
numline = len(file.readlines())
print (numline)

Saya harap ini membantu semua orang.

Beberapa saran di atas menghitung jumlah LINES di file csv. Tetapi beberapa file CSV akan berisi string yang dikutip yang berisi karakter baris baru. File MS CSV biasanya membatasi record dengan \ r \ n, tetapi menggunakan \ n sendiri dalam string yang dikutip.

Untuk file seperti ini, menghitung baris teks (seperti yang dipisahkan oleh baris baru) dalam file akan memberikan hasil yang terlalu besar. Jadi untuk penghitungan yang akurat Anda perlu menggunakan csv.reader untuk membaca catatan.

Pertama Anda harus membuka file dengan open

input_file = open("nameOfFile.csv","r+")

Kemudian gunakan csv.reader untuk membuka csv

reader_file = csv.reader(input_file)

Terakhir, Anda dapat mengambil jumlah baris dengan instruksi 'len'

value = len(list(reader_file))

Kode totalnya adalah ini:

input_file = open("nameOfFile.csv","r+")
reader_file = csv.reader(input_file)
value = len(list(reader_file))

Ingatlah bahwa jika Anda ingin menggunakan kembali file csv, Anda harus membuat input_file.fseek (0), karena ketika Anda menggunakan daftar untuk reader_file, itu membaca semua file, dan penunjuk di file mengubah posisinya

row_count = sum(1 for line in open(filename)) bekerja untuk saya.

Catatan: sum(1 for line in csv.reader(filename))sepertinya menghitung panjang baris pertama

numline = len(file_read.readlines())

ketika Anda membuat instance objek csv.reader dan Anda mengulang seluruh file, maka Anda dapat mengakses variabel instance yang disebut line_num yang memberikan jumlah baris:

import csv
with open('csv_path_file') as f:
    csv_reader = csv.reader(f)
    for row in csv_reader:
        pass
    print(csv_reader.line_num)

import csv
count = 0
with open('filename.csv', 'rb') as count_file:
    csv_reader = csv.reader(count_file)
    for row in csv_reader:
        count += 1

print count

Gunakan "daftar" agar sesuai dengan objek yang lebih bisa diterapkan.

Anda kemudian dapat menghitung, melewati, bermutasi sampai keinginan hati Anda:

list(fileObject) #list values

len(list(fileObject)) # get length of file lines

list(fileObject)[10:] # skip first 10 lines

Ini berfungsi untuk csv dan semua file yang berisi string di OS berbasis Unix:

import os

numOfLines = int(os.popen('wc -l < file.csv').read()[:-1])

Jika file csv berisi baris kolom, Anda dapat mengurangi satu dari di numOfLinesatas:

numOfLines = numOfLines - 1

Anda juga dapat menggunakan for loop klasik:

import pandas as pd
df = pd.read_csv('your_file.csv')

count = 0
for i in df['a_column']:
    count = count + 1

print(count)

mungkin ingin mencoba sesuatu yang sederhana seperti di bawah ini pada baris perintah:

sed -n '$=' filename atau wc -l filename

Saya pikir kami dapat sedikit meningkatkan jawaban terbaik, saya menggunakan:

len = sum(1 for _ in reader)

Selain itu, kita tidak boleh lupa kode pythonic tidak selalu memiliki performa terbaik dalam proyek ini. Sebagai contoh: Jika kita dapat melakukan lebih banyak operasi pada waktu yang sama dalam kumpulan data yang sama Lebih baik melakukan semua dalam bucle yang sama daripada membuat dua atau lebih bucle pythonic.

import pandas as pd
data = pd.read_csv('data.csv') 
totalInstances=len(data)

mencoba

data = pd.read_csv("data.csv")
data.shape

dan dalam output Anda dapat melihat sesuatu seperti (aa, bb) di mana aa adalah # baris