Python2年生 スクレイピングのしくみ 体験してわかる！会話でまなべる！

第1章　Pythonでデータをダウンロード
　LESSON 01　スクレイピングってなに？
　LESSON 02　Pythonをインストールしてみよう
　LESSON 03　requestsでアクセスしてみよう

第2章　HTMLを解析しよう
　LESSON 04　HTMLを解析してみよう
　LESSON 05　ニュースの最新記事一覧を取得してみよう
　LESSON 06　リンク一覧をファイルに書き出そう
　LESSON 07　画像を一括ダウンロードしよう

第3章　表データを読み書きしよう
　LESSON 08　pandasを使ってみよう
　LESSON 09　さまざまなデータの加工
　LESSON 10　グラフで表示してみよう
　LESSON 11　Excelファイルを読み書きしてみよう

第4章　オープンデータを分析してみよう
　LESSON 12　オープンデータってなに？
　LESSON 13　郵便局：郵便番号データ
　LESSON 14　e-Stat：政府統計の相互窓口
　LESSON 15　キッズすたっと：探そう統計データ
　LESSON 16　自治体のデータ：データシティ鯖江

第5章　Web APIでデータを収集しよう
　LESSON 17　Web APIってなに？
　LESSON 18　OpenWeatherMapってなに？
　LESSON 19　現在の天気を調べよう
　LESSON 20　現在から5日間（3時間ごと）の天気を調べよう

付属データはこちら

会員特典はこちら

お問い合わせ

内容についてのお問い合わせは、正誤表、追加情報をご確認後に、お送りいただくようお願いいたします。

正誤表、追加情報に掲載されていない書籍内容へのお問い合わせや
その他書籍に関するお問い合わせは、書籍のお問い合わせフォームからお送りください。

利用許諾に関するお問い合わせ

本書の書影（表紙画像）をご利用になりたい場合は書影許諾申請フォームから申請をお願いいたします。
書影（表紙画像）以外のご利用については、こちらからお問い合わせください。

• よくあるご質問

  ------------------------------
  Q：P.95　「2023年10月02日にリリースされたPython 3.12をインストールしたがimport japanize_matplotlibを使っているプログラムでエラーが出る」
  
  A：Python 3.12からこれまでPythonの標準ライブラリであった「distutilsライブラリ」が削除されてしまったため、import japanize_matplotlibを使っているプログラムで、
  
  ModuleNotFoundError: No module named 'distutils'
  
  というエラーが出ます。
  これはPythonの方針によるものなのですが、japanize_matplotlibライブラリではこのdistutilsを使用しているため動かなくなりました。
  通常は、このライブラリの作者が新しいPython 3.12に合わせてライブラリをアップグレードすれば問題は解決するのですが、japanize_matplotlibライブラリは、2020年から更新が止まっています。
  
  【解決方法1】日本語化を避ける
  
  japanize_matplotlibライブラリの使用を止めると日本語の文字化けは起こりますが動きます。
  
  1.インポートを削除する:
  import japanize_matplotlibの行を削除します。
  
  【解決方法2】distutilsの代わりにsetuptoolsの最新バージョンを使う
  
  Python 3.12でjapanize_matplotlibモジュールを使用するため、以下のようにすることで解決する場合があります。こちらでは以下の方法で動くようになりました。全ての環境で完全に解決する保証はありませんが、試す価値はあります。
  
  1.Setuptoolsをアップグレードする:
  以下のコマンドを実行して、setuptoolsを最新バージョンにアップグレードすると、distutils`が含まれなくなったPython 3.12で問題が起こりがちな場合に役立ちます。
  
  ------------------
  py -m pip install --upgrade setuptools
  ------------------
  
  2.Japanize_Matplotlibをインストールする:
  
  その後、japanize_matplotlibを再インストールしてください。setuptoolsのアップグレードによって、以前は依存関係の問題でインストールできなかったライブラリもインストールできるようになることがあります。
  
  ------------------
  py -m pip install japanize_matplotli
  ------------------
  
  ------------------------------
  Q：P.26　「2020年10月05日にリリースされたPython 3.9をインストールしたが外部ライブラリをインストールできない」
  A：Python 3.9が出たばかりで、多くの外部ライブラリがPython 3.9に対応していないことが原因です。
  　この場合、バージョンをPython 3.8にしてください。
  
  【Windowsの場合】
  Python 3.9をアンインストールして、3.8をインストールしてください。
  具体的には、以下の通りです。
  
  □手順1
  「スタート」メニューをクリックして、「設定」（歯車のアイコンをクリックします。
  「アプリ」をクリックして、「アプリと機能」から「Python 3.9」をクリックし、「アンインストール」ボタンをクリックして、アンインストールしてください。
  
  □手順2
  以下のPython.orgサイトにアクセスして、Python 3.8.6の「Windows x86-64 executable installer」をダウンロードして実行してください。Python 3.8.6がインストールされます。
  
  ・Python 3.8.6のダウンロードサイト
  https://www.python.org/downloads/windows/
  
  □手順3
  ライブラリのインストールは、以下のコマンドでインストールできます。
  
  ------------
  pip install ＜ライブラリ名＞
  ------------
  
  もしくは以下のコマンドでもインストール可能です。
  
  ------------
  py -m pip install ＜ライブラリ名＞
  ------------
  
  【macOSの場合】
  macOSの場合は、Pythonのアンインストールが少し手間がかかります。
  そこでPython 3.8とPython 3.9の2つをインストールした状態でPython 3.8を使う方法を紹介します。
  
  □手順1
  以下のPython.orgサイトにアクセスして、Python 3.8.6の「macOS 64-bit installer」ダウンロードして実行してください。Python 3.8.6がインストールされます。
  
  ・Python 3.8.6のダウンロードサイト
  https://www.python.org/downloads/mac-osx/
  
  □手順2
  Pythonを起動させる時は、Python 3.8のフォルダの中のIDLEを起動させます。
  
  □手順3
  ライブラリのインストールは、以下のコマンドで実行します。Python 3.8を指定してインストールできます。
  
  ------------
  python3.8 -m pip install ＜ライブラリ名＞
  ------------
  
  ------------------------------
  Q：P.56 chap2/chap2-7.pyでエラーがでる
  A：news.yahoo.co.jpのタグは、
  2020年12月までは「topicsList_main」という表記だったのですが、
  2021年1月に「sc-DNdyV lbRQVi」に変わりました。
  そのため、サンプルプログラムの、
  
  topic = soup.find(class_="topicsList_main”)
  
  では取得できないので、
  
  topic = soup.find(class_="sc-DNdyV lbRQVi”)
  
  と変更してもらえますと幸いです。
  ただし、このタグ名の表記に関しては、サーバー側が自由に変更できるものですので、
  今後も変更されることは十分考えられます。。
  もし今後も変更があり、うまく動かないときは、実際に調べていく必要があります。
  ご自身で調べる方法は、P.54から55で解説させていただいていますので、こちらをご覧ください。
  
  ------------------------------
  Q：P.92　「CSVファイルが文字化けする」
  A：書き出されたCSVファイルはUTF-8形式なので、Excelでそのまま開くと日本語が文字化けします。
  文字化けしないようにするには、Excelで新規ファイルを作り、CSVファイルを取り込みます。Excel 2019やExcel for Office 365の場合、Excelの「データ」タブをクリックして、リボンから「データの取得と変換」グループの「テキストファイルまたはCSVから」をクリックします。
  「データの取り込み」画面で取り込むCSVファイルを指定して、「インポート」をクリックします。
  取り込み方法を指定する画面が開くので、「元のファイル」で「65001：Unicode（UTF-8）」を選択して、「読み込み」をクリックしてください。