от партнера

Использование языка Python для доступа к веб-данным

Мичиганский университет

Об этом курсе

Недавно просмотрено: 1 924

Этот курс покажет, как можно использовать Интернет в качестве источника данных.  Мы рассмотрим скрейпинг, парсинг и чтение веб-данных, а также получение доступа к данным с помощью web API.  Мы будем работать с форматами данных HTML, XML и JSON на Python.  Этот курс будет охватывает главы 11–13 учебника «Python для всех» (Python for Everybody). Чтобы успешно пройти этот курс, вы должны быть знакомы с материалами, изложенными в главах 1–10 учебника и первых двух курсах по данной специализации.  Эти темы включают переменные и выражения, условные операторы (циклы, ветвление и исключения: try/except), функции, структуры данных Python (строки, списки, словари и кортежи), а также манипулирование файлами.  В этом курсе рассматривается Python 3.

Гибкие сроки

Назначьте сроки сдачи в соответствии со своим графиком.

Сертификат, ссылками на который можно делиться с другими людьми

Получите сертификат по завершении

100% онлайн

Начните сейчас и учитесь по собственному графику.

Прибл. 19 часов на выполнение

Русский

Чему вы научитесь

Использовать регулярные выражения для извлечения данных из строк
Понимать принципы работы протоколов, которые веб-браузеры используют для получения документов и веб-приложений
Получать данные с веб-сайтов и из API при помощи Python
Работать с данными XML (eXtensible Markup Language — расширяемый язык разметки)

Приобретаемые навыки

Xml
Application Programming Interfaces (API)
Regular Expression (REGEX)
Web

Гибкие сроки

Назначьте сроки сдачи в соответствии со своим графиком.

Сертификат, ссылками на который можно делиться с другими людьми

Получите сертификат по завершении

100% онлайн

Начните сейчас и учитесь по собственному графику.

Прибл. 19 часов на выполнение

Русский

Преподаватели

Charles Russell Severance

Clinical Professor

School of Information

3 638 559 учащихся

48 курсов

от партнера

Мичиганский университет

Программа курса: что вы изучите

Неделя

Неделя 1

3 ч. на завершение

Начало работы

В этом разделе вы установите Python и текстовый редактор. В предыдущих курсах специализации это было необязательно, но в этом классе это станет первым требованием перед началом обучения. С этого момента мы прекращаем использовать среду оценки Python на основе браузера, потому что такая среда (а именно Skulpt) не способна выполнять сложные программы, которые мы будем разрабатывать в ходе этого курса.

3 ч. на завершение

6 видео ((всего 21 мин.)), 5 материалов для самостоятельного изучения, 2 тестов

6 видео

Добро пожаловать на курс45

Добро пожаловать в Python — Гвидо ван Россум1мин

Windows 10: установка Python и написание программы8мин

Windows: снимки экрана2мин

Macintosh: использование Python и написание программы4мин

Macintosh: снимки экрана4мин

5 материалов для самостоятельного изучения

Учебник по Python10мин

Давайте познакомимся поближе!10мин

Добро пожаловать в Python 310мин

Примечания по выбору текстового редактора10мин

Примечание для учащихся: отправка заданий10мин

Неделя

Неделя 2

2 ч. на завершение

Регулярные выражения (глава 11)

Регулярные выражения (RegEx) — это специализированный язык, который позволяет быстро искать строки и извлекать данные из них. RegEx — это самостоятельный язык программирования. Изучать регулярные выражения на этом курсе не обязательно, но они представляют собой мощный инструмент и могут принести большую пользу.

2 ч. на завершение

4 видео ((всего 44 мин.)), 1 материал для самостоятельного изучения, 2 тестов

4 видео

11.1. Регулярные выражения10мин

11.2. Извлечение данных15мин

Бонус: Академические часы... в Гааге2мин

Бонусное интервью: Бьярне Строуструп — C++15мин

1 материал для самостоятельного изучения

Краткое руководство по регулярным выражениям Python10мин

1 практическое упражнение

Регулярные выражения30мин

Неделя

Неделя 3

3 ч. на завершение

Сети и сокеты (глава 12)

3 ч. на завершение

8 видео ((всего 68 мин.)), 1 материал для самостоятельного изучения, 2 тестов

8 видео

12.1. Сетевые технологии7мин

12.2. Протокол передачи гипертекста (HTTP)14мин

Пример с решением: сети и сокеты (глава 12)6мин

Использование консоли разработчика для изучения HTTP10мин

Бонус: Леонард Клейнрок — первые два пакета в ARPANET13мин

Бонусное видео: Роберт Кайо — соавтор Всемирной паутины9мин

Бонус: Академические часы... в Атланте, Джорджия (Бакхед)3мин

Минутка отдыха: доктор Чак читает новости на CNN4мин

1 материал для самостоятельного изучения

Если вы хотите узнать больше10мин

1 практическое упражнение

Сети и сокеты30мин

Неделя

Неделя 4

4 ч. на завершение

Программы для просмотра Интернета (глава 12)

4 ч. на завершение

8 видео ((всего 58 мин.)), 1 материал для самостоятельного изучения, 3 тестов

8 видео

12.3. Символы и строки Юникода17мин

12.4. Получение веб-страниц6мин

Пример с решением: использование Urllib (глава 12)3мин

12.5. Парсинг веб-страниц9мин

Пример с решением: BeautifulSoup (глава 12)9мин

Бонус: Академические часы... в Монреале4мин

Бонусное интервью: Тим Бернерс-Ли - изобретение Всемирной паутины1мин

Минутка отдыха: I Got My Mojo Working — Женева, Швейцария5мин

1 материал для самостоятельного изучения

Примечания относительно использования BeautifulSoup10мин

1 практическое упражнение

Считывание интернет-данных из Python30мин

Неделя

Неделя 5

3 ч. на завершение

Веб-службы и XML (глава 13)

3 ч. на завершение

8 видео ((всего 62 мин.))

8 видео

13.1. Данные в Интернете4мин

13.2. Расширяемый язык разметки (XML)8мин

13.3. XML-схема10мин

13.4. Парсинг XML10мин

Пример с решением: XML (глава 13)6мин

Интервью: Рой Филдинг — принципы работы архитектуры REST10мин

Бонус: Академические часы... в Бостоне2мин

Бонусное видео: Ян Хоррокс — RDF/OWL (продвинутый уровень)7мин

1 практическое упражнение

Расширяемый язык разметки30мин

Неделя

Неделя 6

5 ч. на завершение

JSON и архитектура REST (глава 13)

5 ч. на завершение

12 видео ((всего 95 мин.)), 3 материалов для самостоятельного изучения, 3 тестов

12 видео

13.5. JavaScript Object Notation (JSON)9мин

Пример с решением: JSON (глава 13)5мин

Интервью: Дуглас Крокфорд — знакомство с JSON7мин

13.6. Сервис-ориентированный подход2мин

Видео: сервис-ориентированные архитектуры5мин

13.7. Использование интерфейсов прикладного программирования8мин

Пример с решением: GeoJSON API (глава 13)7мин

13.8. Защита запросов API11мин

Пример с решением: API Twitter (глава 13)19мин

Бонус: Академические часы... в Мельбурне, Австралия1мин

Бонус: Академические часы... в Санта-Монике, Калифорния7мин

Бонус: встреча выпускников в Блетчли-парке9мин

3 материала для самостоятельного изучения

Оцените этот курс на Class-Central10мин

Опрос по окончании курса10мин

Продолжайте учиться с Michigan Online10мин

1 практическое упражнение

REST, JSON и API30мин

Часто задаваемые вопросы

Когда я получу доступ к лекциям и заданиям?
Доступ к лекциям и заданиям предоставляется в зависимости от типа регистрации. Если вы проходите курс в режиме слушателя, то получите бесплатный доступ к большинству материалов курса. Чтобы открыть оцениваемые задания и возможность получить сертификат, необходимо будет приобрести прохождение с сертификатом. Это можно сделать во время прохождения в режиме слушателя или после него. Если вы не видите варианта 'Режим слушателя'.
Курс может не предлагаться в режиме слушателя. Попробуйте бесплатную пробную версию или подайте заявку на финансовую помощь.
Курс предлагаться в режиме 'Полный курс, без сертификата'. В нем можно просматривать все материалы, выполнять обязательные задания и получить итоговую оценку. Приобрести дополнительно прохождение с сертификатом в таком случае нельзя.
Что я получу, оплатив сертификацию?
Оплатив сертификацию, вы получите доступ ко всем материалам курса, включая оцениваемые задания. После успешного прохождения курса на странице ваших достижений появится электронный сертификат. Оттуда его можно распечатать или прикрепить к профилю LinkedIn. Просто ознакомиться с содержанием курса можно бесплатно.
Можно ли получить финансовую помощь?
Да. В некоторых программах обучения вы можете подать заявку на получение финансовой помощи или стипендии, если не можете оплатить регистрационный взнос. Если для выбранной вами программы предлагается такая возможность, вы увидите ссылку для подачи заявки на странице описания.

Остались вопросы? Посетите Центр поддержки учащихся.

Использование языка Python для доступа к веб-данным

Использование языка Python для доступа к веб-данным

Об этом курсе

Чему вы научитесь

Приобретаемые навыки