Розробка системи для збору та обробки даних з використанням Apache Spark
Loading...
Date
2023
Authors
Пінкевич, Віктор
Journal Title
Journal ISSN
Volume Title
Publisher
Abstract
Метою роботи є створення системи, яка буде отримувати дані від сторонніх сервісів Steam та Steam Spy через публічні веб API, проводити їх очистку, трансформацію та зберігати оброблені дані у реляційній базі даних. Через
взаємодію зі сторонніми публічними веб API буде досліджено особливості взаємодії із такими API. Використання фреймворку Apache Spark дозволить розглянути основні підходи до роботи із великою кількістю даних та дослідити можливу реалізацію цих підходів на прикладі обраного фреймворку.
Description
Keywords
Steam, Steam Spy, реляційна модель, бакалаврська робота