Strojové učení nad velkými daty

• Základy práce v Pythonu a v nástroji Google Colab
• Znalosti strojového učení na úrovni kurzu Úvod do strojového učení.

Studijní materiál společnosti Machine Learning College.

• Přehled konceptů a nástrojů ve zpracování velkých dat
  • Od malých k velkým datům a odhad jejich hodnoty
  • Řádkové a sloupcové databáze
  • HDFS (Hadoop Distributed File System)
  • Formáty dat – Parquet, ORC, Avro
  • Komprese – gzip, snappy, zstd
  • SQL databáze – BigQuery, Redshift, Clickhouse, Snowflake, Vertica
• Praktický příklad na srovnání malých a velkých dat
  • Úvod do Sparku
  • MapReduce
  • Spark Computing Engine a RDDs (Resilient Distributed Datasets)
  • DataFrames
  • Spark ekosystém
  • Nejčastější chyby
  • Kde pustit Spark
  • Alternativy – Apache Beam (Dataflow), Dask, lambdas
• Praktický příklad se Sparkem
• ML strategie pro velká data
  • Inkrementální učení
  • Dávkové učení pro neuronové sítě
  • Distribuované trénování
  • Federated learning
  • Alternativní strategie
    • Náhodné vzorkování
    • Podmodely
    • Větší výpočetní kapacity
• Frameworky
  • Scikit-learn a partial_fit
  • MLlib
  • Dask-ML
• Praktické příklady s frameworky
• Nejčastějsí chyby

Předchozí kurzy

Python I - úvod do programování [PYTHON_INTRO]

Úvod do strojového učení [MLC_INTRO]