Будь ласка, використовуйте цей ідентифікатор, щоб цитувати або посилатися на цей матеріал:
https://dspace.wunu.edu.ua/handle/316497/54799| Назва: | Програмний модуль збору даних про довгострокову оренду житла з використанням фреймворків Scrapy та Playwright |
| Інші назви: | Software module for collecting long-term housing rental data using Scrapy and Playwright frameworks |
| Автори: | Малко, Владислав Володимирович |
| Ключові слова: | веб-скрапінг збір даних нерухомість автоматизація масштабованість web scraping data collection real estate automation scalability |
| Дата публікації: | 2025 |
| Видавництво: | Тернопіль, ЗУНУ |
| Бібліографічний опис: | Малко, В. В. Програмний модуль збору даних про довгострокову оренду житла з використанням фреймворків Scrapy та Playwright = Software module for collecting long-term housing rental data using Scrapy and Playwright frameworks : кваліфікаційна робота : спец. 122 – комп’ютерні науки освітньо-професійна програма – комп’ютерні науки / Владислав Володимирович Малко ; наук. керівник к.т.н., доц. П. Є. Биковий. Тернопіль : ЗУНУ, 2025. 69 с. |
| Короткий огляд (реферат): | Метою кваліфікаційної роботи є розробка та впровадження модулів котрі складають частину системи високочастотного збору даних про нерухомість з вебресурсів, що забезпечує високу продуктивність, точність та масштабованість. Об’єктом дослідження є процеси автоматизованого збору та обробки даних про нерухомість з веб-ресурсів. Предмет дослідження – модулі високочастотного збору даних про нерухомість з веб-ресурсів. Розроблені модулі демонструють високу продуктивність (обробка понад 100 000 сторінок на годину), точність вилучення даних (понад 98% для структурованих даних) та масштабованість (підтримка 17 країн та понад 10 000 доменів). Вони забезпечують універсальний ItemLoader, системи автоматичної пагінації, аналізу табличних структур та аналізу адрес, механізми роботи з динамічним контентом, захисту від блокувань, автоматизації життєвого циклу скраперів та високочастотного збору даних. Практичне значення полягає у створенні повноцінної екосистеми для автоматизованого збору даних про нерухомість, що може бути використана компаніями-агрегаторами, інвестиційними фондами, аналітичними агентствами та науково-дослідними установами. |
| URI (Уніфікований ідентифікатор ресурсу): | https://dspace.wunu.edu.ua/handle/316497/54799 |
| Розташовується у зібраннях: | 2024-2025 н. р. |
Файли цього матеріалу:
| Файл | Опис | Розмір | Формат | |
|---|---|---|---|---|
| Малко_КН-42.pdf | 2.75 MB | Adobe PDF | Переглянути/Відкрити |
Усі матеріали в архіві електронних ресурсів захищені авторським правом, всі права збережені.