Your cart is empty.
Keep shopping
本コースの紹介ビデオです。
seleniumを使ってWebスクレイピングをしたときの手順についておさらいをします。
seleniumを使ってWebスクレイピングをしたときの手順についてスライドで整理します。
Web APIの見方を学びます。(QiitaのWeb APIを具体的に見てみます)
Web APIの探し方のコツを学びます。(QiitaのWeb APIを具体的に見てみます)
Pythonタグが付けられた記事を探すAPIは?
その記事に付けられたタグを探すAPIは?
Web APIを使ってのスクレイピング手順を整理します。
requestsモジュールを使って、Web APIを呼び出してみます。
またその結果(Json形式)を、Json形式のオブジェクトにして扱いやすくします。
URIクエリを、URLから独立させてrequests.getする方法を学びます
Qiitaのアクセストークンを取得し、リクエストヘッダとしてrequest.getに指定する方法を学びます。
Web APIの使用例を学びます
エンジニアリングに関する知識を記録・共有するためのサービスであるQiita(キータ)のWebページを題材として、Python+Web APIでのWebスクレイピングプログラムの作り方を学びます。
Qiitaには、毎日数多くの記事が投稿されていますが、Pythonタグのついた記事には、どんな関連タグがついているのでしょうか?
まずは、過去10000記事のタグの種類と個数を数えるWebスクレイピングプログラムを作ってみましょう。
このプログラムの作り方を動画で見ることにより、いかに簡単にWebスクレイピングプログラムが作れてしまうかびっくりすることでしょう。