Pertanyaan yang diberi tag «dataframe»

Saya hanya ingin tahu apa perbedaan antara sebuah RDDdan DataFrame (Spark 2.0.0 DataFrame adalah tipe alias untuk Dataset[Row]) di Apache Spark? Bisakah Anda mengonversi satu ke yang lain?

257 dataframe  apache-spark  apache-spark-sql  rdd  apache-spark-dataset 

Bagaimana cara mendapatkan nama kolom indeks dalam python panda? Berikut ini contoh bingkai data: Column 1 Index Title Apples 1 Oranges 2 Puppies 3 Ducks 4 Apa yang saya coba lakukan adalah mendapatkan / mengatur judul indeks dataframe. Inilah yang saya coba: import pandas as pd data = {'Column 1' …

255 python  pandas  dataframe  columnname 

Saya ingin mengambil data formulir before = data.frame(attr = c(1,30,4,6), type=c('foo_and_bar','foo_and_bar_2')) attr type 1 1 foo_and_bar 2 30 foo_and_bar_2 3 4 foo_and_bar 4 6 foo_and_bar_2 dan gunakan split()pada kolom " type" dari atas untuk mendapatkan sesuatu seperti ini: attr type_1 type_2 1 1 foo bar 2 30 foo bar_2 3 …

245 r  string  dataframe  split  r-faq 

Tutup. Pertanyaan ini tidak dapat direproduksi atau disebabkan oleh kesalahan ketik . Saat ini tidak menerima jawaban. Ingin meningkatkan pertanyaan ini? Perbarui pertanyaan sehingga sesuai topik untuk Stack Overflow. Ditutup tahun lalu . Perbaiki pertanyaan ini Saya memiliki beberapa masalah dengan fungsi berlaku Pandas, ketika menggunakan beberapa kolom dengan kerangka …

239 python  python-2.7  pandas  dataframe  apply 

Mungkinkah untuk mengikat dua bingkai data yang tidak memiliki kumpulan kolom yang sama? Saya berharap dapat mempertahankan kolom yang tidak cocok setelah diikat.

232 r  dataframe  r-faq 

Saya punya dua bingkai data panda yang memiliki beberapa baris yang sama. Misalkan dataframe2 adalah subset dari dataframe1. Bagaimana saya bisa mendapatkan baris dataframe1 yang tidak ada di dataframe2? df1 = pandas.DataFrame(data = {'col1' : [1, 2, 3, 4, 5], 'col2' : [10, 11, 12, 13, 14]}) df2 = pandas.DataFrame(data …

229 python  pandas  dataframe 

Saya memiliki dataframe dalam panda di mana setiap kolom memiliki rentang nilai yang berbeda. Sebagai contoh: df: A B C 1000 10 0.5 765 5 0.35 800 7 0.09 Adakah yang tahu bagaimana saya bisa menormalkan kolom-bingkai dataframe ini di mana setiap nilai antara 0 dan 1? Output yang saya …

227 python  pandas  dataframe  normalize 

Di R ketika Anda perlu mengambil indeks kolom berdasarkan nama kolom yang bisa Anda lakukan idx <- which(names(my_data)==my_colum_name) Apakah ada cara untuk melakukan hal yang sama dengan kerangka data panda?

220 python  pandas  dataframe  indexing 

Saya memiliki Bingkai Data Pandas seperti yang ditunjukkan di bawah ini: 1 2 3 0 a NaN read 1 b l unread 2 c NaN read Saya ingin menghapus nilai NaN dengan string kosong sehingga terlihat seperti ini: 1 2 3 0 a "" read 1 b l unread 2 …

217 python  pandas  dataframe  nan 

Saya memiliki bingkai data panda yang terlihat seperti ini (ini yang cukup besar) date exer exp ifor mat 1092 2014-03-17 American M 528.205 2014-04-19 1093 2014-03-17 American M 528.205 2014-04-19 1094 2014-03-17 American M 528.205 2014-04-19 1095 2014-03-17 American M 528.205 2014-04-19 1096 2014-03-17 American M 528.205 2014-05-17 sekarang saya …

214 python  pandas  updates  dataframe 

Misalkan saya memiliki dua DataFrames seperti itu: left = pd.DataFrame({'key1': ['foo', 'bar'], 'lval': [1, 2]}) right = pd.DataFrame({'key2': ['foo', 'bar'], 'rval': [4, 5]}) Saya ingin menggabungkan mereka, jadi saya mencoba sesuatu seperti ini: pd.merge(left, right, left_on='key1', right_on='key2') Dan saya senang key1 lval key2 rval 0 foo 1 foo 4 1 …

208 python  pandas  dataframe  join 

Saya menggunakan bingkai data ini: Fruit Date Name Number Apples 10/6/2016 Bob 7 Apples 10/6/2016 Bob 8 Apples 10/6/2016 Mike 9 Apples 10/7/2016 Steve 10 Apples 10/7/2016 Bob 1 Oranges 10/7/2016 Bob 2 Oranges 10/6/2016 Tom 15 Oranges 10/6/2016 Mike 57 Oranges 10/6/2016 Bob 65 Oranges 10/7/2016 Tony 1 Grapes …

206 python  pandas  dataframe  group-by  aggregate 

Saya menggunakan spark-csv untuk memuat data ke dalam DataFrame. Saya ingin melakukan kueri sederhana dan menampilkan konten: val df = sqlContext.read.format("com.databricks.spark.csv").option("header", "true").load("my.csv") df.registerTempTable("tasks") results = sqlContext.sql("select col from tasks"); results.show() Col tampaknya terpotong: scala> results.show(); +--------------------+ | col| +--------------------+ |2015-11-16 07:15:...| |2015-11-16 07:15:...| |2015-11-16 07:15:...| |2015-11-16 07:15:...| |2015-11-16 07:15:...| |2015-11-16 …

201 apache-spark  dataframe  spark-csv  output-formatting 

Saya memiliki pandas dataframedi mana satu kolom string teks berisi nilai yang dipisahkan koma. Saya ingin membagi setiap bidang CSV dan membuat baris baru per entri (asumsikan bahwa CSV bersih dan hanya perlu dibagi pada ','). Misalnya, aharus menjadi b: In [7]: a Out[7]: var1 var2 0 a,b,c 1 1 …

200 python  pandas  numpy  dataframe 

Saya memiliki bingkai data panda dengan beberapa kolom. Sekarang saya tahu bahwa baris tertentu outlier berdasarkan nilai kolom tertentu. Misalnya kolom 'Vol' memiliki semua nilai sekitar 12xxdan satu nilai adalah 4000(outlier). Sekarang saya ingin mengecualikan baris-baris yang memiliki Volkolom seperti ini. Jadi, pada dasarnya saya perlu meletakkan filter pada bingkai …

198 python  pandas  filtering  dataframe  outliers