การสร้างฟีเจอร์

Feature Engineering with PySpark

John Hogue

Lead Data Scientist

ทำไมต้องสร้างฟีเจอร์ใหม่?

การสร้าง

การคูณ

การบวก

การลบ

การหาร

กราฟโมเดลเชิงเส้นของความยาว

กราฟโมเดลเชิงเส้นของความกว้าง

การคูณ

# Creating a new feature, area by multiplying
df = df.withColumn('TSQFT', (df['WIDTH'] * df['LENGTH']))

กราฟโมเดลเชิงเส้นของพื้นที่

# Sum two columns
df = df.withColumn('TSQFT', (df['SQFTBELOWGROUND'] + df['SQFTABOVEGROUND']))

# Divide two columns
df = df.withColumn('PRICEPERTSQFT', (df['LISTPRICE'] / df['TSQFT']))

# Difference two columns
df = df.withColumn('DAYSONMARKET', datediff('OFFMARKETDATE', 'LISTDATE'))

การสร้างฟีเจอร์อัตโนมัติ

ภาพแห่งอนาคต

Feature Engineering with PySpark