Câu hỏi được gắn thẻ «pandas»

Tôi có khung dữ liệu gấu trúc sau đây: df1 = pd.DataFrame({'date': [200101,200101,200101,200101,200102,200102,200102,200102],'blockcount': [1,1,2,2,1,1,2,2],'reactiontime': [350,400,200,250,100,300,450,400]}) Tôi đang cố gắng tạo một từ điển phân cấp, với các giá trị của từ điển được nhúng dưới dạng danh sách, trông giống như sau: {200101: {1:[350, 400], 2:[200, 250]}, 200102: {1:[100, 300], …

16 python  pandas 

Khi có một DataFrame như thế này: import pandas as pd import numpy as np df = pd.DataFrame({'today': [['a', 'b', 'c'], ['a', 'b'], ['b']], 'yesterday': [['a', 'b'], ['a'], ['a']]}) today yesterday 0 ['a', 'b', 'c'] ['a', 'b'] 1 ['a', 'b'] ['a'] 2 ['b'] ['a'] ... etc Nhưng với khoảng 100 …

16 python  pandas  numpy  dataframe 

Tôi đang làm việc với từng hàng khung dữ liệu gấu trúc, nhưng tôi vấp phải các vấn đề cưỡng chế trong khi lập chỉ mục và chèn các hàng. Gấu trúc dường như luôn muốn ép buộc từ một kiểu int / float hỗn hợp sang các kiểu float …

16 python  pandas  coercion 

from itertools import product import pandas as pd df = pd.DataFrame.from_records(product(range(10), range(10))) df = df.sample(90) df.columns = "c1 c2".split() df = df.sort_values(df.columns.tolist()).reset_index(drop=True) # c1 c2 # 0 0 0 # 1 0 1 # 2 0 2 # 3 0 3 # 4 0 4 # .. .. .. # …

15 python  pandas  numpy 

Đây là geodatframe đầu tiên của tôi: !pip install geopandas import pandas as pd import geopandas city1 = [{'City':"Buenos Aires","Country":"Argentina","Latitude":-34.58,"Longitude":-58.66}, {'City':"Brasilia","Country":"Brazil","Latitude":-15.78 ,"Longitude":-70.66}, {'City':"Santiago","Country":"Chile ","Latitude":-33.45 ,"Longitude":-70.66 }] city2 = [{'City':"Bogota","Country":"Colombia ","Latitude":4.60 ,"Longitude":-74.08}, {'City':"Caracas","Country":"Venezuela","Latitude":10.48 ,"Longitude":-66.86}] city1df = pd.DataFrame(city1) city2df = pd.DataFrame(city2) gcity1df = geopandas.GeoDataFrame( city1df, geometry=geopandas.points_from_xy(city1df.Longitude, city1df.Latitude)) gcity2df = geopandas.GeoDataFrame( city2df, geometry=geopandas.points_from_xy(city2df.Longitude, …

14 python  pandas  dataframe  geolocation  geopandas 

Tôi có một khung dữ liệu df, với hai cột: Script (có văn bản) và Loa Script Speaker aze Speaker 1 art Speaker 2 ghb Speaker 3 jka Speaker 1 tyc Speaker 1 avv Speaker 2 bhj Speaker 1 Và tôi có danh sách sau đây: L = ['a','b','c'] Với …

14 python  python-3.x  pandas  dataframe 

Tôi có một khung dữ liệu khổng lồ với nhiều cột, nhiều cột có kiểu datetime.datetime. Vấn đề là nhiều người cũng có các loại hỗn hợp, bao gồm các datetime.datetimegiá trị và giá trị ví dụ None(và có thể có các giá trị không hợp lệ khác): 0 2017-07-06 …

14 python  pandas 

Tôi rất bối rối với các phương pháp lập chỉ mục khác nhau bằng cách sử dụng iloctrong gấu trúc. Giả sử tôi đang cố gắng chuyển đổi Dataframe 1-d thành Dataframe 2-d. Đầu tiên tôi có Dataframe 1-d sau đây a_array = [1,2,3,4,5,6,7,8] a_df = pd.DataFrame(a_array).T Và tôi sẽ …

13 python  pandas  dataframe 

Tôi đã tạo một từ điển của dataframe gấu trúc: d[k] = pd.DataFrame(data=data[i]) Vì vậy, tôi cho rằng đó d[k]là một dataframe chính xác. Sau đó for k in d.keys(): d[k].to_excel (file_name) Sau đó, tôi có lỗi: TypeError: got invalid input value of type <class 'xml.etree.ElementTree.Element'>, expected string or Element …

13 python  pandas  export-to-excel 

Tôi có một DataFrame gấu trúc có dạng: id start_time sequence_no value 0 71 2018-10-17 20:12:43+00:00 114428 3 1 71 2018-10-17 20:12:43+00:00 114429 3 2 71 2018-10-17 20:12:43+00:00 114431 79 3 71 2019-11-06 00:51:14+00:00 216009 100 4 71 2019-11-06 00:51:14+00:00 216011 150 5 71 2019-11-06 00:51:14+00:00 216013 180 6 92 …

13 python  pandas  numpy  dataframe 

Báo cáo vấn đề Tôi đang tìm kiếm một cách hiệu quả để tạo ra các sản phẩm cartesian nhị phân đầy đủ (các bảng có tất cả kết hợp Đúng và Sai với một số cột nhất định), được lọc theo các điều kiện độc quyền nhất định. Ví …

12 python  pandas  dataframe 

Gần đây tôi đã bắt đầu nhận được một loạt lỗi về một số pysparkcông việc đang chạy trên các cụm EMR. Các erro là java.lang.IllegalArgumentException at java.nio.ByteBuffer.allocate(ByteBuffer.java:334) at org.apache.arrow.vector.ipc.message.MessageSerializer.readMessage(MessageSerializer.java:543) at org.apache.arrow.vector.ipc.message.MessageChannelReader.readNext(MessageChannelReader.java:58) at org.apache.arrow.vector.ipc.ArrowStreamReader.readSchema(ArrowStreamReader.java:132) at org.apache.arrow.vector.ipc.ArrowReader.initialize(ArrowReader.java:181) at org.apache.arrow.vector.ipc.ArrowReader.ensureInitialized(ArrowReader.java:172) at org.apache.arrow.vector.ipc.ArrowReader.getVectorSchemaRoot(ArrowReader.java:65) at org.apache.spark.sql.execution.python.ArrowPythonRunner$$anon$1.read(ArrowPythonRunner.scala:162) at org.apache.spark.sql.execution.python.ArrowPythonRunner$$anon$1.read(ArrowPythonRunner.scala:122) at org.apache.spark.api.python.BasePythonRunner$ReaderIterator.hasNext(PythonRunner.scala:406) at org.apache.spark.InterruptibleIterator.hasNext(InterruptibleIterator.scala:37) at org.apache.spark.sql.execution.python.ArrowEvalPythonExec$$anon$2.<init>(ArrowEvalPythonExec.scala:98) …

12 pandas  apache-spark  pyspark  pyarrow 

Giả sử tôi có khung dữ liệu sau (cột số nguyên và cột có danh sách số nguyên) ... ID Found_IDs 0 12345 [15443, 15533, 3433] 1 15533 [2234, 16608, 12002, 7654] 2 6789 [43322, 876544, 36789] Và cũng là một danh sách ID riêng biệt ... bad_ids = [15533, …

11 python  python-3.x  pandas  dataframe 

tôi có dataframe với mỗi hàng có giá trị danh sách. id list_of_value 0 ['a','b','c'] 1 ['d','b','c'] 2 ['a','b','c'] 3 ['a','b','c'] tôi phải tính điểm với một hàng và so với tất cả các hàng khác Ví dụ: Step 1: Take value of id 0: ['a','b','c'], Step 2: find the …

11 python  pandas  numpy 

Tôi có một khung dữ liệu như thế này: ORDER_NO 2401 2504 2600 2020020 2019-12-04 2019-12-10 2019-12-12 2020024 2019-12-25 NaN 2019-12-20 2020034 NaN NaN 2019-12-20 2020020 2019-12-12 2019-12-15 2019-12-18 Tôi đang tạo XML từ khung dữ liệu trên. Tôi muốn loại bỏ giá trị null được đưa vào XML. Mã …

11 python-3.x  pandas  loops  dataframe  itertools