Pandas Python là gì

Tại sao sử dụng Pandas?

Các nhà khoa học dữ liệu sử dụng Pandas trong Python vì những ưu điểm sau:

• Dễ dàng xử lý dữ liệu bị thiếu
• Nó sử dụng Series cho cấu trúc dữ liệu một chiều và DataFrame cho cấu trúc dữ liệu đa chiều
• Nó cung cấp một cách hiệu quả để phân chia dữ liệu
• Nó cung cấp một cách linh hoạt để hợp nhất, nối hoặc định hình lại dữ liệu
• Nó bao gồm một công cụ chuỗi thời gian mạnh mẽ để làm việc với

Tóm lại, Pandas là một thư viện hữu ích trong việc phân tích dữ liệu . Nó có thể được sử dụng để thực hiện thao tác và phân tích dữ liệu. Pandas cung cấp các cấu trúc dữ liệu mạnh mẽ và dễ sử dụng, cũng như các phương tiện để thực hiện nhanh các thao tác trên các cấu trúc này.

Làm thế nào để cài đặt Pandas ?

Bây giờ trong hướng dẫn Python Pandas này, chúng ta sẽ học cách cài đặt Pandas bằng Python.

Để cài đặt thư viện Pandas, vui lòng tham khảo hướng dẫn của chúng tôi Cách cài đặt TensorFlow . Pandas được cài đặt theo mặc định. Trong trường hợp từ xa, gấu trúc không được cài đặt-

Bạn có thể cài đặt Pandas bằng cách sử dụng:

• Anaconda: conda install -c anaconda pandas
• Trong Máy tính xách tay Jupyter:

import sys
!conda install --yes --prefix {sys.prefix} pandas

Data Frame được các nhà thống kê và các nhà thực hành dữ liệu khác biết đến.

Dưới đây là hình ảnh của khung dữ liệu gấu trúc:

Series là gì?

Chuỗi là một cấu trúc dữ liệu một chiều. Nó có thể có bất kỳ cấu trúc dữ liệu nào như số nguyên, số float và chuỗi. Nó hữu ích khi bạn muốn thực hiện tính toán hoặc trả về mảng một chiều. Theo định nghĩa, một chuỗi không được có nhiều cột. Đối với trường hợp thứ hai, vui lòng sử dụng cấu trúc khung dữ liệu.

Python Pandas Series có các thông số sau:

• Dữ liệu: có thể là danh sách, từ điển hoặc giá trị vô hướng

pd.Series([1., 2., 3.])

0    1.0
1    2.0
2    3.0
dtype: float64

Bạn có thể thêm chỉ mục với chỉ mục. Nó giúp đặt tên cho các hàng. Chiều dài phải bằng kích thước của cột

pd.Series ([1., 2., 3.], index = ['a', 'b', 'c'])

Dưới đây, bạn tạo một chuỗi Pandas với giá trị bị thiếu cho các hàng thứ ba. Lưu ý, các giá trị bị thiếu trong Python được ghi chú là “NaN.” Bạn có thể sử dụng numpy để tạo giá trị bị thiếu: np.nan một cách giả tạo

pd.Series ([1,2, np.nan])

Đầu ra

0 1,0 
1 2,0 
2 Loại NaN 
: float64

Tạo dữ liệu gấu trúc

Bây giờ trong hướng dẫn Pandas DataFrame này, chúng ta sẽ học cách tạo khung dữ liệu Python Pandas:

Bạn có thể chuyển đổi một mảng numpy thành khung dữ liệu gấu trúc bằng khung pd.Data (). Điều ngược lại cũng có thể xảy ra. Để chuyển đổi Khung dữ liệu gấu trúc thành một mảng, bạn có thể sử dụng np.array ()

## Numpy to pandas
import numpy as np
h = [[1,2],[3,4]] 
df_h = pd.DataFrame(h)
print('Data Frame:', df_h)

## Pandas to numpy
df_h_n = np.array(df_h)
print('Numpy array:', df_h_n)
Data Frame:    0  1
0  1  2
1  3  4
Numpy array: [[1 2]
 [3 4]]

Bạn cũng có thể sử dụng từ điển để tạo khung dữ liệu Pandas.

dic = {'Name': ["John", "Smith"], 'Age': [30, 40]}
pd.DataFrame(data=dic)

Dữ liệu phạm vi pandas

Gấu trúc có một API thuận tiện để tạo phạm vi ngày. Hãy cùng tìm hiểu với các ví dụ về Python Pandas:

pd.data_range(date,period,frequency):

• Tham số đầu tiên là ngày bắt đầu

• Tham số thứ hai là số khoảng thời gian (tùy chọn nếu ngày kết thúc được chỉ định)
• Tham số cuối cùng là tần suất: ngày: ‘D,’ tháng: ‘M’ và năm: ‘Y.’

## Create date
# Days
dates_d = pd.date_range('20300101', periods=6, freq='D')
print('Day:', dates_d)

output

Day: DatetimeIndex(['2030-01-01', '2030-01-02', '2030-01-03', '2030-01-04', '2030-01-05', '2030-01-06'], dtype='datetime64[ns]', freq='D')

# Months
dates_m = pd.date_range('20300101', periods=6, freq='M')
print('Month:', dates_m)

output

Month: DatetimeIndex(['2030-01-31', '2030-02-28', '2030-03-31', '2030-04-30','2030-05-31', '2030-06-30'], dtype='datetime64[ns]', freq='M')

Kiểm tra dữ liệu

Bạn có thể kiểm tra phần đầu hoặc phần đuôi của tập dữ liệu với head () hoặc tail () đứng trước tên của khung dữ liệu của gấu trúc như được hiển thị trong ví dụ Pandas bên dưới:

Bước 1) Tạo một chuỗi ngẫu nhiên với numpy. Dãy có 4 cột và 6 hàng

random = np.random.randn(6,4)

Bước 2) Sau đó, bạn tạo một khung dữ liệu bằng cách sử dụng gấu trúc.

Sử dụng date_m làm chỉ mục cho khung dữ liệu. Nó có nghĩa là mỗi hàng sẽ được đặt một “tên” hoặc một chỉ số, tương ứng với một ngày.

Cuối cùng, bạn đặt tên cho 4 cột với các cột đối số

# Create data with date
df = pd.DataFrame(random,
                  index=dates_m,
                  columns=list('ABCD'))

Bước 3) Sử dụng head function

df.head (3)

Bước 4) Sử dụng hàm  tail function

df.tail (3)

Bước 5) Một cách tuyệt vời để có được manh mối về dữ liệu là sử dụng description (). Nó cung cấp số lượng, giá trị trung bình, std, min, max và percentile của tập dữ liệu.

df.describe ()

Slice Data

Điểm cuối cùng của hướng dẫn Python Pandas này là về cách cắt khung dữ liệu gấu trúc.

Bạn có thể sử dụng tên cột để trích xuất dữ liệu trong một cột cụ thể như được hiển thị trong ví dụ về Pandas bên dưới:

## Slice
### Using name
df['A']

2030-01-31   -0.168655
2030-02-28    0.689585
2030-03-31    0.767534
2030-04-30    0.557299
2030-05-31   -1.547836
2030-06-30    0.511551
Freq: M, Name: A, dtype: float64

Để chọn nhiều cột, bạn cần sử dụng hai lần dấu ngoặc vuông, [[.., ..]]

Cặp dấu ngoặc thứ nhất có nghĩa là bạn muốn chọn các cột, cặp dấu ngoặc thứ hai cho biết bạn muốn trả về những cột nào.

df [['A', 'B']]. 				

Bạn có thể cắt các hàng bằng:

Đoạn mã dưới đây trả về ba hàng đầu tiên

### using a slice for row
df[0:3]

Hàm loc được sử dụng để chọn các cột theo tên. Như thường lệ, các giá trị trước dấu hôn đứng cho các hàng và sau khi tham chiếu đến cột. Bạn cần sử dụng dấu ngoặc để chọn nhiều hơn một cột.

## Multi col 
df.loc [:, ['A', 'B']]	

Có một phương pháp khác để chọn nhiều hàng và cột trong Pandas. Bạn có thể sử dụng iloc []. Phương pháp này sử dụng chỉ mục thay vì tên cột. Đoạn mã dưới đây trả về cùng một khung dữ liệu như trên

df.iloc [:,: 2]

Thả một cột

Bạn có thể thả các cột bằng cách sử dụng pd.drop ()

df.drop(columns=['A', 'C'])

Sự kết hợp

Bạn có thể nối hai DataFrame trong Pandas. Bạn có thể sử dụng pd.concat ()

Trước hết, bạn cần tạo hai DataFrames. Cho đến nay, rất tốt, bạn đã quen với việc tạo khung dữ liệu

import numpy as np
df1 = pd.DataFrame({'name': ['John', 'Smith','Paul'],
                     'Age': ['25', '30', '50']},
                    index=[0, 1, 2])
df2 = pd.DataFrame({'name': ['Adam', 'Smith' ],
                     'Age': ['26', '11']},
                    index=[3, 4])

Cuối cùng, bạn nối hai DataFrame

df_concat = pd.concat([df1,df2]) 
df_concat

Drop_duplicates

Nếu tập dữ liệu có thể chứa thông tin trùng lặp sử dụng, thì `drop_duplicates` sẽ dễ dàng loại trừ các hàng trùng lặp. Bạn có thể thấy rằng `df_concat` có một quan sát trùng lặp,` Smith` xuất hiện hai lần trong cột `tên. ‘

df_concat.drop_duplicates('name')

Sắp xếp các giá trị

Bạn có thể sắp xếp giá trị bằng giá trị sắp xếp

df_concat.sort_values('Age')

Đổi tên: thay đổi chỉ mục

Bạn có thể sử dụng đổi tên để đổi tên một cột trong Pandas. Giá trị đầu tiên là tên cột hiện tại và giá trị thứ hai là tên cột mới.

df_concat.rename(columns={"name": "Surname", "Age": "Age_ppl"})

Tóm lược

Dưới đây là tóm tắt về phương pháp hữu ích nhất cho khoa học dữ liệu với Gấu trúc