Pertanyaan yang diberi tag «pandas»

Saya sangat bingung dengan metode pengindeksan yang berbeda menggunakan ilocdi panda. Katakanlah saya sedang mencoba mengubah 1-d Dataframe menjadi 2-d Dataframe. Pertama saya memiliki Dataframe 1-d berikut a_array = [1,2,3,4,5,6,7,8] a_df = pd.DataFrame(a_array).T Dan saya akan mengubahnya menjadi 2-d Dataframe dengan ukuran 2x4. Saya mulai dengan menetapkan 2-d Dataframe sebagai …

13 python  pandas  dataframe 

Saya membuat kamus kerangka data panda: d[k] = pd.DataFrame(data=data[i]) Jadi saya berasumsi itu d[k]adalah kerangka data panda yang benar. Kemudian for k in d.keys(): d[k].to_excel (file_name) Maka saya memiliki kesalahan: TypeError: got invalid input value of type <class 'xml.etree.ElementTree.Element'>, expected string or Element Saya menggunakan Python 3.7, panda 0.25.3. Pembaruan …

13 python  pandas  export-to-excel 

Saya memiliki DataFrame panda dalam bentuk: id start_time sequence_no value 0 71 2018-10-17 20:12:43+00:00 114428 3 1 71 2018-10-17 20:12:43+00:00 114429 3 2 71 2018-10-17 20:12:43+00:00 114431 79 3 71 2019-11-06 00:51:14+00:00 216009 100 4 71 2019-11-06 00:51:14+00:00 216011 150 5 71 2019-11-06 00:51:14+00:00 216013 180 6 92 2019-12-01 00:51:14+00:00 …

13 python  pandas  numpy  dataframe 

Pernyataan masalah Saya mencari cara yang efisien untuk menghasilkan produk kartesian biner penuh (tabel dengan semua kombinasi Benar dan Salah dengan sejumlah kolom), difilter oleh kondisi eksklusif tertentu. Sebagai contoh, untuk tiga kolom / bit n=3kita akan mendapatkan tabel lengkap df_combs = pd.DataFrame(itertools.product(*([[True, False]] * n))) 0 1 2 0 …

12 python  pandas  dataframe 

Saya baru-baru ini mulai mendapatkan banyak kesalahan pada sejumlah pysparkpekerjaan yang berjalan pada cluster ESDM. Para erro adalah java.lang.IllegalArgumentException at java.nio.ByteBuffer.allocate(ByteBuffer.java:334) at org.apache.arrow.vector.ipc.message.MessageSerializer.readMessage(MessageSerializer.java:543) at org.apache.arrow.vector.ipc.message.MessageChannelReader.readNext(MessageChannelReader.java:58) at org.apache.arrow.vector.ipc.ArrowStreamReader.readSchema(ArrowStreamReader.java:132) at org.apache.arrow.vector.ipc.ArrowReader.initialize(ArrowReader.java:181) at org.apache.arrow.vector.ipc.ArrowReader.ensureInitialized(ArrowReader.java:172) at org.apache.arrow.vector.ipc.ArrowReader.getVectorSchemaRoot(ArrowReader.java:65) at org.apache.spark.sql.execution.python.ArrowPythonRunner$$anon$1.read(ArrowPythonRunner.scala:162) at org.apache.spark.sql.execution.python.ArrowPythonRunner$$anon$1.read(ArrowPythonRunner.scala:122) at org.apache.spark.api.python.BasePythonRunner$ReaderIterator.hasNext(PythonRunner.scala:406) at org.apache.spark.InterruptibleIterator.hasNext(InterruptibleIterator.scala:37) at org.apache.spark.sql.execution.python.ArrowEvalPythonExec$$anon$2.<init>(ArrowEvalPythonExec.scala:98) at org.apache.spark.sql.execution.python.ArrowEvalPythonExec.evaluate(ArrowEvalPythonExec.scala:96) at org.apache.spark.sql.execution.python.EvalPythonExec$$anonfun$doExecute$1.apply(EvalPythonExec.scala:127)... Semua itu tampaknya …

12 pandas  apache-spark  pyspark  pyarrow 

Katakanlah saya memiliki kerangka data berikut (kolom bilangan bulat dan kolom dengan daftar bilangan bulat) ... ID Found_IDs 0 12345 [15443, 15533, 3433] 1 15533 [2234, 16608, 12002, 7654] 2 6789 [43322, 876544, 36789] Dan juga daftar ID yang terpisah ... bad_ids = [15533, 876544, 36789, 11111] Mengingat itu, dan …

11 python  python-3.x  pandas  dataframe 

Saya punya dataframe dengan setiap baris memiliki nilai daftar. id list_of_value 0 ['a','b','c'] 1 ['d','b','c'] 2 ['a','b','c'] 3 ['a','b','c'] saya harus menghitung skor dengan satu baris dan terhadap semua baris lainnya Untuk misalnya: Step 1: Take value of id 0: ['a','b','c'], Step 2: find the intersection between id 0 and …

11 python  pandas  numpy 

Saya memiliki bingkai data seperti ini: ORDER_NO 2401 2504 2600 2020020 2019-12-04 2019-12-10 2019-12-12 2020024 2019-12-25 NaN 2019-12-20 2020034 NaN NaN 2019-12-20 2020020 2019-12-12 2019-12-15 2019-12-18 Saya membuat XML dari bingkai data di atas. Saya ingin menghapus nilai nol yang terisi ke dalam XML. Kode saya harus menghapus nilai kolom …

11 python-3.x  pandas  loops  dataframe  itertools 

Saya memiliki DataFrame tersebut: df = pd.DataFrame(data={ 'col0': [11, 22,1, 5] 'col1': ['aa:a:aaa', 'a:a', 'a', 'a:aa:a:aaa'], 'col2': ["foo", "foo", "foobar", "bar"], 'col3': [True, False, True, False], 'col4': ['elo', 'foo', 'bar', 'dupa']}) Saya ingin mendapatkan panjang daftar setelah dipisah pada ":" di col1, maka saya ingin menimpa nilai jika panjang> 2 …

11 python  pandas  apply 

Saya mencoba untuk memecah kolom menggunakan regex, tetapi sepertinya tidak bisa mendapatkan pemisahan dengan benar. Saya mencoba untuk mengambil semua CAPS trailing dan memindahkannya ke kolom terpisah. Jadi saya mendapatkan semua CAPS yang 2-4 CAPS berturut-turut. Namun, itu hanya meninggalkan 'Name'kolom sementara 'Team'kolom kosong. Ini kode saya: import pandas as …

11 python  regex  pandas 

Saya punya file txt dengan data dalam format ini. 3 baris pertama ulangi berulang kali. name=1 grade=A class=B name=2 grade=D class=A Saya ingin menampilkan data dalam format tabel, misalnya: name | grade | class 1 | A | B 2 | D | A Saya berjuang untuk mengatur header dan …

11 python  pandas  dataframe 

Saya memiliki kerangka data panda seperti itu: parent child parent_level child_level A B 0 1 B C 1 2 B D 1 2 X Y 0 2 X D 0 2 Y Z 2 3 Ini mewakili pohon yang terlihat seperti ini A X / / \ B / \ …

11 python  pandas 

Saya bekerja dengan DataFrame memiliki struktur berikut: import pandas as pd df = pd.DataFrame({'group':[1,1,1,2,2,2,2,3,3,3], 'brand':['A','B','X','C','D','X','X','E','F','X']}) print(df) group brand 0 1 A 1 1 B 2 1 X 3 2 C 4 2 D 5 2 X 6 2 X 7 3 E 8 3 F 9 3 X Tujuan saya …

10 python  pandas  dataframe 

Saya punya data deret waktu. Menghasilkan data date_rng = pd.date_range('2019-01-01', freq='s', periods=400) df = pd.DataFrame(np.random.lognormal(.005, .5,size=(len(date_rng), 3)), columns=['data1', 'data2', 'data3'], index= date_rng) s = df['data1'] Saya ingin membuat garis zig-zag yang menghubungkan antara maxima lokal dan minimum lokal, yang memenuhi syarat bahwa pada sumbu y, |highest - lowest value|setiap garis …

10 python  pandas  time-series  technical-indicator 

Dalam set data saya, saya memiliki dua kolom kategori yang ingin saya hitung. Kedua kolom keduanya berisi negara, beberapa tumpang tindih (muncul di kedua kolom). Saya ingin memberikan nomor yang sama di kolom1 dan kolom2 untuk negara yang sama. Data saya terlihat seperti: import pandas as pd d = {'col1': …

10 python  python-3.x  pandas  scikit-learn  categorical-data