Модуль 10. Методы сбора и обработки данных из сети Интернет

Основы клиент-серверного взаимодействия. Парсинг API
Парсинг HTML. BeautifulSoup, MongoDB
Системы управления базами данных MongoDB и SQLite в Python
Парсинг HTML. XPath
Scrapy
Scrapy. Парсинг фото и файлов
Selenium в Python
Работа с данными

Часов в программе

12,00 часов

лекции

7,00 часов

практика

7,00 часов

самостоятельная

2,00 часа

промежуточная аттестация

28,00 часов

всего

Материально-технические условия реализации программы:

Вид занятий: лекция
Требуемое ПО:
Любая современная операционная система и настроенная в зависимости от языка программирования среда разработки: любая привычная IDE, для Python — установленный интерпретатор с python.org и любая привычная IDE.

Вид занятий: Практическое занятие
Требуемое ПО:
Любая современная операционная система и настроенная в зависимости от языка программирования среда разработки: любая привычная IDE, для Python — установленный интерпретатор с python.org и любая привычная IDE.

Вид занятий: самостоятельная работа
Требуемое ПО:
Любая современная операционная система и настроенная в зависимости от языка программирования среда разработки: любая привычная IDE, для Python — установленный интерпретатор с python.org и любая привычная IDE.

Информационные ресуры

• Информационный ресурс Википедия [Электронный ресурс]. https://ru.wikipedia.org/wiki/Agile_Manifesto
• Информационный ресурс Хабр [Электронный ресурс]. https://habr.com/ru/post/275813/
• htmlbook [Электронный ресурс] http://htmlbook.ru/html/form.
• Redis [Электронный ресурс] https://redis.io/documentation.
• The Java™ Tutorials. [Электронный ресурс]//URL.: https://docs.oracle.com/javase/tutorial/essential/io/fileio.html

Учебно-методические материалы

Методы, формы и технологии

метод проблемного обучения
метод формирующего обучения

Методические разработки

методические рекомендации по выполнению промежуточной аттестации
методические рекомендации по основам работы HTML, CSS и JS;

Материалы курса

Использование инструментов Google Chrome DevTools
Использование инструментов Fiddler и Wireshark

Учебная литература

• Coulson L., Jephson.B. The The HTML and CSS Workshop.Packt Publish-ing.NY.2019.-700 c.
• Frain.B. Responsive Web Design with Html5 and Css3 - Second Edi-tion.CreateSpace Independent Publishing Platform. NY. 2017.- 138 c.
• Microsoft Power BI Dashboards Step by Step. Microsoft Press; 1st edition, 2018. - 304 с.
• Myers. М.A Smarter Way to Learn HTML & CSS.CreateSpace Independent Publishing Platform.NY.2015.-258 c.

Темы

Основы клиент-серверного взаимодействия. Парсинг API Системы управления базами данных MongoDB и SQLite в Python Парсинг HTML. XPath Scrapy. Парсинг фото и файлов Selenium в Python Работа с данными

Лекции
2,00ч

Практические занятия
1,00ч

Самостоятельная работа
1,00ч

Всего
4,00ч

Промежуточная аттестация 2,00 часа

Промежуточная аттестация проводится в форме отчета по результатам выполнения практического задания по дисциплинам и проверки преподавателем.