Kurskode

spmllib

Varighet

35 timer (vanligvis 5 dag inkludert pauser)

Krav

Knowledge of one of the following:

Java
Scala
Python
SparkR.

Oversikt

MLlib er Sparks maskinlæringsbibliotek. Målet er å gjøre praktisk maskinlæring skalerbar og enkel. Den består av vanlige læringsalgoritmer og verktøy, inkludert klassifisering, regresjon, klynger, samarbeidende filtrering, dimensjonalitetsreduksjon, samt primitiver på lavere nivå og optimaliseringsgrensesnitt på rørledningen.

Den deler seg i to pakker:

spark.mllib inneholder den originale API-en som er bygget på toppen av RDD-er.
spark.ml gir API på høyere nivå bygget oppå DataFrames for konstruksjon av ML-rørledninger.

Publikum

Dette kurset er rettet mot ingeniører og utviklere som søker å bruke et innebygd maskinbibliotek for Apache Spark

Machine Translated

Kursplan

spark.mllib: data types, algorithms, and utilities

Data types
Basic statistics
- summary statistics
- correlations
- stratified sampling
- hypothesis testing
- streaming significance testing
- random data generation
Classification and regression
- linear models (SVMs, logistic regression, linear regression)
- naive Bayes
- decision trees
- ensembles of trees (Random Forests and Gradient-Boosted Trees)
- isotonic regression
Collaborative filtering
- alternating least squares (ALS)
Clustering
- k-means
- Gaussian mixture
- power iteration clustering (PIC)
- latent Dirichlet allocation (LDA)
- bisecting k-means
- streaming k-means
Dimensionality reduction
- singular value decomposition (SVD)
- principal component analysis (PCA)
Feature extraction and transformation
Frequent pattern mining
- FP-growth
- association rules
- PrefixSpan
Evaluation metrics
PMML model export
Optimization (developer)
- stochastic gradient descent
- limited-memory BFGS (L-BFGS)

spark.ml: high-level APIs for ML pipelines

Overview: estimators, transformers and pipelines
Extracting, transforming and selecting features
Classification and regression
Clustering
Advanced topics

Testimonials

★★★★★

Dette er en av de beste praktiske oppgavene med programmeringskurs jeg noensinne har tatt.

Laura Kahn

Kurs:Artificial Intelligence - the most applied stuff - Data Analysis + Distributed AI + NLP

Machine Translated

Richard er veldig rolig og metodisk, med en analytisk innsikt - nøyaktig egenskapene som trengs for å presentere denne typen kurs

Kieran Mac Kenna

Kurs:Spark for Developers

Machine Translated

Vi vet at vi vet mye mer om hele miljøet

John Kidd

Kurs:Spark for Developers

Machine Translated

Treneren gjorde klassen interessant og underholdende som hjelper ganske mye med treninger hele dagen

Ryan Speelman

Kurs:Spark for Developers

Machine Translated

Ernesto gjorde en god jobb med å forklare konsepter på høyt nivå med å bruke Spark og det er forskjellige moduler.

Michael Nemerouf

Kurs:Spark for Developers

Machine Translated

Jeg likte metodikken som Jorge forventet

Experian Colombia S.A

Kurs:Spark for Developers

Machine Translated

Richard var veldig villig til å avvise når vi ønsket å stille semi-relaterte spørsmål om ting som ikke er på pensum. Forklaringene var klare, og han var foran med advarsler i alle råd han ga oss.

ARM Limited

Kurs:Spark for Developers

Machine Translated

VM jeg likte veldig godt Læreren var veldig kunnskapsrik med hensyn til temaet så vel som andre emner, han var veldig hyggelig og vennlig. Jeg likte anlegget i Dubai.

Safar Alqahtani - Elm Information Security

Kurs:Big Data Analytics in Health

Machine Translated

Small group (4 trainees) and we could progress together. Also the trainer could so help everybody.

ICE International Copyright Enterprise Germany GmbH

Kurs:Spark for Developers

Ajay var veldig vennlig, hjelpsom og kunnskapsrik om temaet han diskuterte.

Biniam Guulay - ICE International Copyright Enterprise Germany GmbH

Kurs:Spark for Developers

Machine Translated

Laboratoriet øvelser. Bruke teorien fra første dag i påfølgende dager.

Dell

Kurs:A Practical Introduction to Stream Processing

Machine Translated

Dette er en av de beste kvalitetstreningene jeg noensinne har tatt i løpet av min 13 år lange karriere. Fortsett den gode jobben!

Kurs:Artificial Intelligence - the most applied stuff - Data Analysis + Distributed AI + NLP

Machine Translated

Jeg synes at treneren hadde en utmerket stil med å kombinere humor og historier i det virkelige liv for å gjøre emnene for hånden veldig tilgjengelige. Jeg vil anbefale denne professoren på det sterkeste i fremtiden.

Kurs:Spark for Developers

Machine Translated

The trainer was passionate and well-known what he said I appreciate his help and answers all our questions and suggested cases.

Kurs:A Practical Introduction to Stream Processing