Использование языка Python для доступа к веб-данным

Grow your skills with Coursera Plus for $239/year (usually $399). Save now.

Использование языка Python для доступа к веб-данным

Instructor: Charles Russell Severance

Included with

Learn more

6 modules

Gain insight into a topic and learn the fundamentals.

2 weeks to complete

at 10 hours a week

Flexible schedule

Learn at your own pace

6 modules

Gain insight into a topic and learn the fundamentals.

2 weeks to complete

at 10 hours a week

Flexible schedule

Learn at your own pace

What you'll learn

Использовать регулярные выражения для извлечения данных из строк
Понимать принципы работы протоколов, которые веб-браузеры используют для получения документов и веб-приложений
Получать данные с веб-сайтов и из API при помощи Python
Работать с данными XML (eXtensible Markup Language — расширяемый язык разметки)

Skills you'll gain

Tools you'll learn

Details to know

Shareable certificate

Add to your LinkedIn profile

Assessments

5 assignments

Taught in Russian

See how employees at top companies are mastering in-demand skills

Learn more about Coursera for Business

logos of Petrobras, TATA, Danone, Capgemini, P&G and L'Oreal

There are 6 modules in this course

Этот курс покажет, как можно использовать Интернет в качестве источника данных. Мы рассмотрим скрейпинг, парсинг и чтение веб-данных, а также получение доступа к данным с помощью web API. Мы будем работать с форматами данных HTML, XML и JSON на Python. Этот курс будет охватывает главы 11–13 учебника «Python для всех» (Python for Everybody). Чтобы успешно пройти этот курс, вы должны быть знакомы с материалами, изложенными в главах 1–10 учебника и первых двух курсах по данной специализации. Эти темы включают переменные и выражения, условные операторы (циклы, ветвление и исключения: try/except), функции, структуры данных Python (строки, списки, словари и кортежи), а также манипулирование файлами. В этом курсе рассматривается Python 3.

В этом разделе вы установите Python и текстовый редактор. В предыдущих курсах специализации это было необязательно, но в этом классе это станет первым требованием перед началом обучения. С этого момента мы прекращаем использовать среду оценки Python на основе браузера, потому что такая среда (а именно Skulpt) не способна выполнять сложные программы, которые мы будем разрабатывать в ходе этого курса.

What's included

6 videos5 readings2 app items

6 videos Total 21 minutes

Добро пожаловать на курс 1 minute
Добро пожаловать в Python — Гвидо ван Россум 1 minute
Windows 10: установка Python и написание программы 8 minutes
Windows: снимки экрана 2 minutes
Macintosh: использование Python и написание программы 4 minutes
Macintosh: снимки экрана 4 minutes

5 readings Total 50 minutes

Учебник по Python 10 minutes
Давайте познакомимся поближе! 10 minutes
Добро пожаловать в Python 3 10 minutes
Примечания по выбору текстового редактора 10 minutes
Примечание для учащихся: отправка заданий 10 minutes

2 app items Total 120 minutes

Независимая оценка: cнимки экрана установки и запуска Python 60 minutes
Проверка внешним инструментом компиляции 60 minutes

Регулярные выражения (RegEx) — это специализированный язык, который позволяет быстро искать строки и извлекать данные из них. RegEx — это самостоятельный язык программирования. Изучать регулярные выражения на этом курсе не обязательно, но они представляют собой мощный инструмент и могут принести большую пользу.

What's included

4 videos1 reading1 assignment1 app item

4 videos Total 44 minutes

11.1. Регулярные выражения 10 minutes
11.2. Извлечение данных 16 minutes
Бонус: Академические часы... в Гааге 2 minutes
Бонусное интервью: Бьярне Строуструп — C++ 15 minutes

1 reading Total 10 minutes

Краткое руководство по регулярным выражениям Python 10 minutes

1 assignment Total 30 minutes

Регулярные выражения 30 minutes

1 app item Total 60 minutes

Извлечение данных с помощью регулярных выражений 60 minutes

Из этого раздела вы узнаете о протоколах, которые веб-браузеры используют для получения документов, а также о веб-приложениях, которые используются для взаимодействия с интерфейсами прикладных программ (API).

What's included

8 videos1 reading1 assignment1 app item

8 videos Total 68 minutes

12.1. Сетевые технологии 8 minutes
12.2. Протокол передачи гипертекста (HTTP) 14 minutes
Пример с решением: сети и сокеты (глава 12) 6 minutes
Использование консоли разработчика для изучения HTTP 10 minutes
Бонус: Леонард Клейнрок — первые два пакета в ARPANET 13 minutes
Бонусное видео: Роберт Кайо — соавтор Всемирной паутины 10 minutes
Бонус: Академические часы... в Атланте, Джорджия (Бакхед) 3 minutes
Минутка отдыха: доктор Чак читает новости на CNN 4 minutes

1 reading Total 10 minutes

Если вы хотите узнать больше 10 minutes

1 assignment Total 30 minutes

Сети и сокеты 30 minutes

1 app item Total 60 minutes

Понимание запросно-ответного цикла 60 minutes

Из этого раздела вы узнаете, как использовать Python для извлечения данных с веб-сайтов и из API через Интернет.

What's included

8 videos1 reading1 assignment2 app items

8 videos Total 58 minutes

12.3. Символы и строки Юникода 17 minutes
12.4. Получение веб-страниц 7 minutes
Пример с решением: использование Urllib (глава 12) 4 minutes
12.5. Парсинг веб-страниц 9 minutes
Пример с решением: BeautifulSoup (глава 12) 9 minutes
Бонус: Академические часы... в Монреале 5 minutes
Бонусное интервью: Тим Бернерс-Ли - изобретение Всемирной паутины 1 minute
Минутка отдыха: I Got My Mojo Working — Женева, Швейцария 6 minutes

1 reading Total 10 minutes

Примечания относительно использования BeautifulSoup 10 minutes

1 assignment Total 30 minutes

Считывание интернет-данных из Python 30 minutes

2 app items Total 120 minutes

Скрейпинг HTML-данных с помощью BeautifulSoup 60 minutes
Задание: переход по ссылкам в HTML с помощью BeautifulSoup 60 minutes

Из этого раздела вы узнаете, как получать и парсить данные XML (eXtensible Markup Language — расширяемого языка разметки).

What's included

8 videos1 assignment1 app item

8 videos Total 62 minutes

13.1. Данные в Интернете 5 minutes
13.2. Расширяемый язык разметки (XML) 9 minutes
13.3. XML-схема 11 minutes
13.4. Парсинг XML 11 minutes
Пример с решением: XML (глава 13) 6 minutes
Интервью: Рой Филдинг — принципы работы архитектуры REST 11 minutes
Бонус: Академические часы... в Бостоне 2 minutes
Бонусное видео: Ян Хоррокс — RDF/OWL (продвинутый уровень) 8 minutes

1 assignment Total 30 minutes

Расширяемый язык разметки 30 minutes

1 app item Total 60 minutes

Извлечение данных из XML 60 minutes

В этом модуле мы работаем с интерфейсами прикладного программирования (API) и веб-службами, используя формат обмена данными JavaScript Object Notation (JSON).

What's included

12 videos3 readings1 assignment2 app items

12 videos Total 95 minutes

13.5. JavaScript Object Notation (JSON) 9 minutes
Пример с решением: JSON (глава 13) 6 minutes
Интервью: Дуглас Крокфорд — знакомство с JSON 7 minutes
13.6. Сервис-ориентированный подход 3 minutes
Видео: сервис-ориентированные архитектуры 5 minutes
13.7. Использование интерфейсов прикладного программирования 8 minutes
Пример с решением: GeoJSON API (глава 13) 8 minutes
13.8. Защита запросов API 11 minutes
Пример с решением: API Twitter (глава 13) 20 minutes
Бонус: Академические часы... в Мельбурне, Австралия 2 minutes
Бонус: Академические часы... в Санта-Монике, Калифорния 7 minutes
Бонус: встреча выпускников в Блетчли-парке 10 minutes

3 readings Total 30 minutes

Оцените этот курс на Class-Central 10 minutes
Опрос по окончании курса 10 minutes
Продолжайте учиться с Michigan Online 10 minutes

1 assignment Total 30 minutes

REST, JSON и API 30 minutes

2 app items Total 120 minutes

Извлечение данных из JSON 60 minutes
Использование API GeoJSON 60 minutes

Instructor

Charles Russell Severance

University of Michigan

60 Courses 4,838,700 learners

Offered by

University of Michigan

Explore more from Software Development

Red Hat
Python Programming with Red Hat
Course
University of Michigan
Using Python to Access Web Data
Course

Why people choose Coursera for their career

Felipe M.

Learner since 2018

"To be able to take courses at my own pace and rhythm has been an amazing experience. I can learn whenever it fits my schedule and mood."

Jennifer J.

Learner since 2020

"I directly applied the concepts and skills I learned from my courses to an exciting new project at work."

Larry W.

Learner since 2021

"When I need courses on topics that my university doesn't offer, Coursera is one of the best places to go."

Chaitanya A.

"Learning isn't just about being better at your job: it's so much more than that. Coursera allows me to learn without limits."

Open new doors with Coursera Plus

Unlimited access to 10,000+ world-class courses, hands-on projects, and job-ready certificate programs - all included in your subscription

Learn more

Advance your career with an online degree

Earn a degree from world-class universities - 100% online

Explore degrees

Join over 3,400 global companies that choose Coursera for Business

Upskill your employees to excel in the digital economy

Learn more

Frequently asked questions

To access the course materials, assignments and to earn a Certificate, you will need to purchase the Certificate experience when you enroll in a course. You can try a Free Trial instead, or apply for Financial Aid. The course may offer 'Full Course, No Certificate' instead. This option lets you see all course materials, submit required assessments, and get a final grade. This also means that you will not be able to purchase a Certificate experience.

When you purchase a Certificate you get access to all course materials, including graded assignments. Upon completing the course, your electronic Certificate will be added to your Accomplishments page - from there, you can print your Certificate or add it to your LinkedIn profile.

Yes. In select learning programs, you can apply for financial aid or a scholarship if you can’t afford the enrollment fee. If fin aid or scholarship is available for your learning program selection, you’ll find a link to apply on the description page.