फ़ीचर जेनरेशन

PySpark के साथ Feature Engineering

John Hogue

Lead Data Scientist

नए फ़ीचर क्यों बनाएँ?

जेनरेशन

{{1}} का गुणा

{{2}} का योग

{{3}} का अंतर

{{4}} से भाग

PySpark के साथ Feature Engineering

नए फ़ीचर क्यों बनाएँ?

लंबाई लीनियर मॉडल प्लॉट

चौड़ाई लीनियर मॉडल प्लॉट

PySpark के साथ Feature Engineering

दो फ़ीचर जोड़ना

Multiplication

# Creating a new feature, area by multiplying
df = df.withColumn('TSQFT', (df['WIDTH'] * df['LENGTH']))

एरिया लीनियर मॉडल प्लॉट

PySpark के साथ Feature Engineering

दो फ़ीचर जोड़ने के अन्य तरीके

# Sum two columns
df = df.withColumn('TSQFT', (df['SQFTBELOWGROUND'] + df['SQFTABOVEGROUND']))
# Divide two columns
df = df.withColumn('PRICEPERTSQFT', (df['LISTPRICE'] / df['TSQFT']))
# Difference two columns
df = df.withColumn('DAYSONMARKET', datediff('OFFMARKETDATE', 'LISTDATE'))
PySpark के साथ Feature Engineering

सीमा क्या है?

फ़ीचर ऑटोमेशन

  • FeatureTools और TSFresh
  • फ़ीचर का विस्फोट
  • Higher Order और आगे?

फ्यूचरिस्टिक इमेज

PySpark के साथ Feature Engineering

आगे बढ़ें और जोड़ें!

PySpark के साथ Feature Engineering

Preparing Video For Download...