Pertanyaan yang diberi tag «dataframe»

Apa cara paling efisien untuk mengatur panda Dataframe berikut: data = Position Letter 1 a 2 b 3 c 4 d 5 e seperti kamus alphabet[1 : 'a', 2 : 'b', 3 : 'c', 4 : 'd', 5 : 'e']?

136 python  dictionary  pandas  dataframe 

df = pd.DataFrame({'Col1': ['Bob', 'Joe', 'Bill', 'Mary', 'Joe'], 'Col2': ['Joe', 'Steve', 'Bob', 'Bob', 'Steve'], 'Col3': np.random.random(5)}) Apa cara terbaik untuk mengembalikan nilai unik 'Col1' dan 'Col2'? Output yang diinginkan adalah 'Bob', 'Joe', 'Bill', 'Mary', 'Steve'

134 python  pandas  dataframe  unique 

Tugas sederhana untuk menambahkan baris ke pandas.DataFrameobjek tampaknya sulit untuk diselesaikan. Ada 3 pertanyaan stackoverflow yang berkaitan dengan ini, tidak ada yang memberikan jawaban yang berfungsi. Inilah yang saya coba lakukan. Saya memiliki DataFrame yang saya sudah tahu bentuknya serta nama-nama baris dan kolom. >>> df = pandas.DataFrame(columns=['a','b','c','d'], index=['x','y','z']) >>> …

133 python  dataframe  row  pandas 

Saya memiliki DataFrame sederhana seperti berikut: Saya ingin memilih semua nilai dari kolom 'Musim Pertama' dan mengganti nilai yang lebih dari tahun 1990 dengan 1. Dalam contoh ini, hanya Baltimore Ravens yang tahun 1996 akan diganti dengan 1 (menjaga data lainnya tetap utuh). Saya telah menggunakan yang berikut ini: df.loc[(df['First …

132 python  pandas  dataframe 

Saya ingin tahu cara menghilangkan NAnilai dalam bingkai data, tetapi hanya di beberapa kolom saya tertarik. Sebagai contoh, DF <- data.frame(x = c(1, 2, 3), y = c(0, 10, NA), z=c(NA, 33, 22)) tapi aku hanya ingin omit data mana yyang NA, oleh karena itu hasilnya harus x y z …

130 r  dataframe  na 

Apa cara terbaik untuk menggunakan beberapa kolom data.table? Sebagai contoh: f <- function(x) {c("hi", "hello")} x <- data.table(id = 1:10) Saya ingin melakukan sesuatu seperti ini (tentu saja sintaks ini salah): x[ , (col1, col2) := f(), by = "id"] Dan untuk memperluas itu, saya mungkin memiliki banyak kolom dengan …

130 r  dataframe  data.table  variable-assignment  colon-equals 

Saya mencari cara yang efisien untuk menghapus bagian yang tidak diinginkan dari string di kolom DataFrame. Data terlihat seperti: time result 1 09:00 +52A 2 10:00 +62B 3 11:00 +44a 4 12:00 +30b 5 13:00 -110a Saya perlu memotong data ini ke: time result 1 09:00 52 2 10:00 62 …

129 python  string  pandas  dataframe 

Diberikan dua kerangka data adan b: > a a b c 1 -0.2246894 -1.48167912 -1.65099363 2 0.5559320 -0.87898575 -0.15634590 3 1.8469466 -0.01487524 -0.53098215 4 -0.6875051 0.23880967 0.01824621 5 -0.6735163 0.75485292 0.44154092 > b a c 1 0.4287284 -0.3295925 2 0.5201492 0.3341251 3 -2.6355570 1.7916780 4 -1.3645337 1.3642276 5 -0.4954542 -0.6660001 …

129 r  dataframe  concatenation 

Di R, bagaimana Anda menambahkan baris baru ke bingkai data setelah bingkai data telah diinisialisasi? Sejauh ini saya punya ini: df <- data.frame("hi", "bye") names(df) <- c("hello", "goodbye") #I am trying to add "hola" and "ciao" as a new row de <- data.frame("hola", "ciao") merge(df, de) # Adds to the …

129 r  dataframe 

Saya sudah mulai menggunakan Spark SQL dan DataFrames di Spark 1.4.0. Saya ingin mendefinisikan pemartisi khusus di DataFrames, di Scala, tetapi tidak melihat cara melakukan ini. Salah satu tabel data yang saya kerjakan berisi daftar transaksi, berdasarkan akun, silimar ke contoh berikut. Account Date Type Amount 1001 2014-04-01 Purchase 100.00 …

129 scala  apache-spark  dataframe  apache-spark-sql  partitioning 

Saya memiliki Spark DataFrame (menggunakan PySpark 1.5.1) dan ingin menambahkan kolom baru. Saya telah mencoba yang berikut ini tetapi tidak berhasil: type(randomed_hours) # => list # Create in Python and transform to RDD new_col = pd.DataFrame(randomed_hours, columns=['new_col']) spark_new_col = sqlContext.createDataFrame(new_col) my_df_spark.withColumn("hours", spark_new_col["new_col"]) Juga mendapat kesalahan menggunakan ini: my_df_spark.withColumn("hours", sc.parallelize(randomed_hours)) Jadi …

129 python  apache-spark  dataframe  pyspark  apache-spark-sql 

Saya memiliki daftar kerangka data Pandas yang ingin saya gabungkan menjadi satu kerangka data Pandas. Saya menggunakan Python 2.7.10 dan Pandas 0.16.2 Saya membuat daftar kerangka data dari: import pandas as pd dfs = [] sqlall = "select * from mytable" for chunk in pd.read_sql_query(sqlall , cnxn, chunksize=10000): dfs.append(chunk) Ini …

129 python  pandas  dataframe  concat 

Data saya dapat memiliki beberapa acara pada tanggal tertentu atau NO acara pada tanggal tertentu. Saya mengambil peristiwa ini, menghitung berdasarkan tanggal dan memplotnya. Namun, ketika saya memplotnya, kedua seri saya tidak selalu cocok. idx = pd.date_range(df['simpleDate'].min(), df['simpleDate'].max()) s = df.groupby(['simpleDate']).size() Dalam kode di atas idx menjadi kisaran katakanlah 30 …

128 python  date  plot  pandas  dataframe 

Apakah ada cara bawaan panda untuk menerapkan dua fungsi penggabungan yang berbeda f1, f2ke kolom yang sama df["returns"], tanpa harus memanggil agg()beberapa kali? Contoh kerangka data: import pandas as pd import datetime as dt pd.np.random.seed(0) df = pd.DataFrame({ "date" : [dt.date(2012, x, 1) for x in range(1, 11)], "returns" : …

128 python  pandas  dataframe  aggregate  pandas-groupby 

Misalkan saya memiliki variabel respons dan data yang berisi tiga kovariat (sebagai contoh mainan): y = c(1,4,6) d = data.frame(x1 = c(4,-1,3), x2 = c(3,9,8), x3 = c(4,-4,-2)) Saya ingin menyesuaikan regresi linier dengan data: fit = lm(y ~ d$x1 + d$x2 + d$y2) Adakah cara untuk menuliskan rumusnya, sehingga …

127 r  dataframe  glm  lm