להקשיב ולקרוא

היכנסו לעולם אינסופי של סיפורים

  • קראו והקשיבו כמה שאתם רוצים
  • למעלה ממיליון כותרים
  • ספרים בלעדיים + Storytel Originals
  • ניתן לבטל מתי שרוצים
להרשמה
Cover for Learning Spark SQL

Learning Spark SQL

שפה
אנגלית
פורמט
קטגוריה

עיון

Design, implement, and deliver successful streaming applications, machine learning pipelines and graph applications using Spark SQL API

About This Book

• Learn about the design and implementation of streaming applications, machine learning pipelines, deep learning, and large-scale graph processing applications using Spark SQL APIs and Scala.

• Learn data exploration, data munging, and how to process structured and semi-structured data using real-world datasets and gain hands-on exposure to the issues and challenges of working with noisy and "dirty" real-world data.

• Understand design considerations for scalability and performance in web-scale Spark application architectures.

Who This Book Is For

If you are a developer, engineer, or an architect and want to learn how to use Apache Spark in a web-scale project, then this is the book for you. It is assumed that you have prior knowledge of SQL querying. A basic programming knowledge with Scala, Java, R, or Python is all you need to get started with this book.

What You Will Learn

• Familiarize yourself with Spark SQL programming, including working with DataFrame/Dataset API and SQL

• Perform a series of hands-on exercises with different types of data sources, including CSV, JSON, Avro, MySQL, and MongoDB

• Perform data quality checks, data visualization, and basic statistical analysis tasks

• Perform data munging tasks on publically available datasets

• Learn how to use Spark SQL and Apache Kafka to build streaming applications

• Learn key performance-tuning tips and tricks in Spark SQL applications

• Learn key architectural components and patterns in large-scale Spark SQL applications

In Detail

In the past year, Apache Spark has been increasingly adopted for the development of distributed applications. Spark SQL APIs provide an optimized interface that helps developers build such applications quickly and easily. However, designing web-scale production applications using Spark SQL APIs can be a complex task. Hence, understanding the design and implementation best practices before you start your project will help you avoid these problems.

This book gives an insight into the engineering practices used to design and build real-world, Spark-based applications. The book's hands-on examples will give you the required confidence to work on any future projects you encounter in Spark SQL.

It starts by familiarizing you with data exploration and data munging tasks using Spark SQL and Scala. Extensive code examples will help you understand the methods used to implement typical use-cases for various types of applications. You will get a walkthrough of the key concepts and terms that are common to streaming, machine learning, and graph applications. You will also learn key performance-tuning details including Cost Based Optimization (Spark 2.2) in Spark SQL applications. Finally, you will move on to learning how such systems are architected and deployed for a successful delivery of your project.

Style and approach

This book is a hands-on guide to designing, building, and deploying Spark SQL-centric production applications at scale.

© 2017 Packt Publishing (ספר דיגיטלי): 9781785887352

תאריך פרסום

ספר דיגיטלי: 7 בספטמבר 2017

ספרים דומים ל־Learning Spark SQL

  1. אנשי הקשב
    אנשי הקשבד"ר שירלי הרשקו
    4.4
  2. The 48 Laws of Power
    The 48 Laws of PowerRobert Greene
    4.2
  3. הורים טובים
    הורים טוביםהילי כוכבי
    4.7
  4. קליפות הנפש
    קליפות הנפשמשה שרון
    4.9
  5. What Every BODY is Saying: An Ex-FBI Agent’s Guide to Speed-Reading People
    What Every BODY is Saying: An Ex-FBI Agent’s Guide to Speed-Reading PeopleJoe Navarro, Marvin Karlins
    4.3
  6. בסיס הידע - כיצד אנו יודעים את מה שאנו יודעים?: כרך ראשון מתוך סדרת הפרקים הנבחרים מהספר חשיבה צלולה
    בסיס הידע - כיצד אנו יודעים את מה שאנו יודעים?: כרך ראשון מתוך סדרת הפרקים הנבחרים מהספר חשיבה צלולהצור טאוב
  7. Mating in Captivity: Unlocking Erotic Intelligence
    Mating in Captivity: Unlocking Erotic IntelligenceEsther Perel
    5
  8. כראמל (6) תעלומה כפולה
    כראמל (6) תעלומה כפולהמאירה ברנע גולדברג
    4.7
  9. זוגיות קשובה
    זוגיות קשובהד"ר שירלי הרשקו
    4.3
  10. Suicidal Empathy: Dying to Be Kind
    Suicidal Empathy: Dying to Be KindGad Saad
    4
  11. Can’t Hurt Me - Summarized for Busy People: Master Your Mind and Defy the Odds: Based on the Book by David Goggins
    Can’t Hurt Me - Summarized for Busy People: Master Your Mind and Defy the Odds: Based on the Book by David GogginsDavid Goggins
    4.2
  12. The Untethered Soul: The Journey Beyond Yourself
    The Untethered Soul: The Journey Beyond YourselfMichael A. Singer
    4.6
  13. מלחמת זכות השיבה
    מלחמת זכות השיבהעינת וילף, עדי שורץ
    4.5
  14. תזונה קשובה
    תזונה קשובהד"ר שירלי הרשקו
    4.3
  15. Freud and Beyond: A History of Modern Psychoanalytic Thought
    Freud and Beyond: A History of Modern Psychoanalytic ThoughtStephen A. Mitchell, Margaret J. Black
  16. The Convoluted Universe, Book One
    The Convoluted Universe, Book OneDolores Cannon
    4.8
  17. הנאום האחרון של משה
    הנאום האחרון של משהמיכה גודמן
    4.6
  18. מלחמת 100 השנים הבאות
    מלחמת 100 השנים הבאותערן ניצן
    3.5
  19. סודותיו של מורה הנבוכים
    סודותיו של מורה הנבוכיםמיכה גודמן
    4.9
  20. ACT Made Simple: An Easy-to-Read Primer on Acceptance and Commitment Therapy
    ACT Made Simple: An Easy-to-Read Primer on Acceptance and Commitment TherapyRuss Harris
    4.8
  21. Autobiography of a Yogi
    Autobiography of a YogiParamhansa Yogananda
    4.6
  22. Мужчины с Марса, женщины с Венеры
    Мужчины с Марса, женщины с ВенерыДжон Грэй
  23. The Man Who Mistook His Wife for a Hat: A revealing exploration of the mysteries of the human mind
    The Man Who Mistook His Wife for a Hat: A revealing exploration of the mysteries of the human mindOliver Sacks
    4.2
  24. טארוט - הקריאה הפתוחה
    טארוט - הקריאה הפתוחהיואב בן-דב
  25. The Art of Living: Peace and Freedom in the Here and Now
    The Art of Living: Peace and Freedom in the Here and NowThich Nhat Hanh
    4.6

איזה מינוי מתאים לך?

  • מאות אלפי ספרים

  • מצב ילדים (תוכן שמתאים לקטנטנים)

  • הורדת ספרים לקריאה והאזנה בלי אינטרנט

  • אפשר לבטל בכל עת

הבחירה הכי פופולרית

Unlimited

האזנה וקריאה בלי הגבלה.

49.90 ש"ח /חודש

שנה ב-50% הנחה
  • חשבון אחד

  • גישה בלתי מוגבלת

  • האזנה וקריאה בלי הגבלה

  • קריאה והאזנה גם בלי אינטרנט

  • אפשר לבטל בכל עת

בחירה

Family

גלו ספרים לכל המשפחה. היכנסו יחד לתוך עולם של סיפורים.

החל מ 69.90 ש"ח /חודש

  • 2-3 חשבונות

  • גישה בלתי מוגבלת

  • האזנה וקריאה בלי הגבלה

  • אפשר לבטל בכל עת

אתה + בן משפחה אחד

2 חשבונות

69.90 ש"ח /חודש

נסה עכשיו