Lyssna när som helst, var som helst

Kliv in i en oändlig värld av stories

  • 1,5 miljoner stories
  • Hundratals nya stories varje vecka
  • Få tillgång till exklusivt innehåll
  • Avsluta när du vill
Starta erbjudandet
Cover for Learning Spark SQL

Learning Spark SQL

Språk
Engelska
Format
Kategori

Fakta

Design, implement, and deliver successful streaming applications, machine learning pipelines and graph applications using Spark SQL API

About This Book

• Learn about the design and implementation of streaming applications, machine learning pipelines, deep learning, and large-scale graph processing applications using Spark SQL APIs and Scala.

• Learn data exploration, data munging, and how to process structured and semi-structured data using real-world datasets and gain hands-on exposure to the issues and challenges of working with noisy and "dirty" real-world data.

• Understand design considerations for scalability and performance in web-scale Spark application architectures.

Who This Book Is For

If you are a developer, engineer, or an architect and want to learn how to use Apache Spark in a web-scale project, then this is the book for you. It is assumed that you have prior knowledge of SQL querying. A basic programming knowledge with Scala, Java, R, or Python is all you need to get started with this book.

What You Will Learn

• Familiarize yourself with Spark SQL programming, including working with DataFrame/Dataset API and SQL

• Perform a series of hands-on exercises with different types of data sources, including CSV, JSON, Avro, MySQL, and MongoDB

• Perform data quality checks, data visualization, and basic statistical analysis tasks

• Perform data munging tasks on publically available datasets

• Learn how to use Spark SQL and Apache Kafka to build streaming applications

• Learn key performance-tuning tips and tricks in Spark SQL applications

• Learn key architectural components and patterns in large-scale Spark SQL applications

In Detail

In the past year, Apache Spark has been increasingly adopted for the development of distributed applications. Spark SQL APIs provide an optimized interface that helps developers build such applications quickly and easily. However, designing web-scale production applications using Spark SQL APIs can be a complex task. Hence, understanding the design and implementation best practices before you start your project will help you avoid these problems.

This book gives an insight into the engineering practices used to design and build real-world, Spark-based applications. The book's hands-on examples will give you the required confidence to work on any future projects you encounter in Spark SQL.

It starts by familiarizing you with data exploration and data munging tasks using Spark SQL and Scala. Extensive code examples will help you understand the methods used to implement typical use-cases for various types of applications. You will get a walkthrough of the key concepts and terms that are common to streaming, machine learning, and graph applications. You will also learn key performance-tuning details including Cost Based Optimization (Spark 2.2) in Spark SQL applications. Finally, you will move on to learning how such systems are architected and deployed for a successful delivery of your project.

Style and approach

This book is a hands-on guide to designing, building, and deploying Spark SQL-centric production applications at scale.

© 2017 Packt Publishing (E-bok): 9781785887352

Utgivningsdatum

E-bok: 7 september 2017

Böcker som liknar Learning Spark SQL

  1. Fotbollsagenterna: Kidnappningen av en hel idrott
    Fotbollsagenterna: Kidnappningen av en hel idrottAndréas Sundberg
    4.5
  2. Föda utan rädsla
    Föda utan rädslaSusanna Heli
    4.3
  3. Thailandssvenskarna
    ThailandssvenskarnaJoakim Medin
    3.7
  4. Omgiven av idioter: Jubileumsugåva
    Omgiven av idioter: JubileumsugåvaThomas Erikson
    4.3
  5. Makt : de 48 lagarna
    Makt : de 48 lagarnaRobert Greene
    4.2
  6. Ofred
    OfredÅsne Seierstad
    4.6
  7. Lev livet fullt ut : En väg till andligt uppvaknande
    Lev livet fullt ut : En väg till andligt uppvaknandeEckhart Tolle
    4.3
  8. Spring snabbare
    Spring snabbareAndreas Almgren
    4.5
  9. Vuxna barn till känslomässigt omogna föräldrar : så läker du efter en uppväxt med avvisande eller självupptagna föräldrar
    Vuxna barn till känslomässigt omogna föräldrar : så läker du efter en uppväxt med avvisande eller självupptagna föräldrarLindsay C. Gibson, Lindsay C Gibson
    4.6
  10. Utan press : om medkänsla, prestation och stress
    Utan press : om medkänsla, prestation och stressSofia Viotti
    4.3
  11. Avbegåvad : en essäberättelse om arv och miljö
    Avbegåvad : en essäberättelse om arv och miljöRoland Paulsen
    4.5
  12. Allt eller inget : berättelsen om revolutionen som höll på att knäcka svensk fotboll
    Allt eller inget : berättelsen om revolutionen som höll på att knäcka svensk fotbollOlof Lundh
    4.2
  13. Tänka, snabbt och långsamt
    Tänka, snabbt och långsamtDaniel Kahneman
    3.8
  14. Kramar och ramar : om barns drivkrafter och vägen till ett föräldraskap som funkar
    Kramar och ramar : om barns drivkrafter och vägen till ett föräldraskap som funkarPetra Krantz Lindgren
    4.4
  15. Barn som bråkar : Att hantera känslostarka barn i vardagen
    Barn som bråkar : Att hantera känslostarka barn i vardagenBo Hejlskov Elvén, Tina Wiman
    4.4
  16. Föda
    FödaAsabea Britton, Opokua Britton
    4.4
  17. Den barmhärtige mördaren : en berättelse om de sista statarna
    Den barmhärtige mördaren : en berättelse om de sista statarnaPatrik Svensson
    4.5
  18. Regime Change: Inside the Imperial Presidency of Donald Trump
    Regime Change: Inside the Imperial Presidency of Donald TrumpJonathan Swan, Maggie Haberman
    4.5
  19. Kriget om Södertälje : Nätverken, narkotikan, polisen, politiken
    Kriget om Södertälje : Nätverken, narkotikan, polisen, politikenTorbjörn Granström
    4.4
  20. Factfulness : tio knep som hjälper dig förstå världen
    Factfulness : tio knep som hjälper dig förstå världenHans Rosling, Ola Rosling, Anna Rosling Rönnlund
    4.4
  21. Rysslands hemliga krig mot Sverige
    Rysslands hemliga krig mot SverigePatrik Oksanen
    4.3
  22. Känslor som kraft eller hinder : en handbok i känsloreglering
    Känslor som kraft eller hinder : en handbok i känsloregleringElizabeth Malmquist, Hanna Sahlin
    4.4
  23. Mental uppgradering : att navigera i en tid av smart teknik och mänsklig dumhet
    Mental uppgradering : att navigera i en tid av smart teknik och mänsklig dumhetEmma Frans
    3.9
  24. L’amour toujours : Berättelsen om Tidö
    L’amour toujours : Berättelsen om TidöMaggie Strömberg, Torbjörn Nilsson
    4.4
  25. Den ryska generalstaben
    Den ryska generalstabenOscar Jonsson
    4

Därför kommer du älska Storytel

  • 1,5 miljoner stories

  • Rabatt på Storytel Books

  • Lyssna och läs offline

  • Exklusiva nyheter varje vecka

  • Kids Mode (barnsäker miljö)

Populäraste valet

Premium

Lyssna och läs ofta.

169 kr /månad

  • 1 konto

  • 100 timmar/månad

  • Rabatt på Storytel Books

  • Exklusivt innehåll

  • Avsluta när du vill

Starta erbjudandet

Unlimited

Lyssna och läs obegränsat.

249 kr /månad

  • 1 konto

  • Lyssna obegränsat

  • Rabatt på Storytel Books

  • Exklusivt innehåll

  • Avsluta när du vill

Starta erbjudandet

Family

Dela stories med hela familjen.

Från 239 kr /månad

  • 2-6 konton

  • 100 timmar/månad varje konto

  • Rabatt på Storytel Books

  • Exklusivt innehåll

  • Avsluta när du vill

Du + 1 familjemedlem

2 konton

239 kr /månad

Starta erbjudandet

Flex

Lyssna och läs ibland – spara dina olyssnade timmar.

99 kr /månad

  • 1 konto

  • 20 timmar/månad

  • Spara upp till 100 olyssnade timmar

  • Rabatt på Storytel Books

  • Exklusivt innehåll

  • Avsluta när du vill

Starta erbjudandet