scraping_dsubjects

概要

某大学が提供する授業科目データ提示サイトからスクレイピングを行うためのプログラムです。
スクレイピング対象とするデータは以下です。

• 科目名
• 科目ID
• 科目成績

別リポジトリにあるDoSearchと接続するデータベースに記録するために、取得したデータはSQL文に組み込みテキストファイルに保存します。

使用技術

Seleniumを用いて自動検索およびスクレイピングを行いました。
取得した科目データはINSERT文に組み込み、テキストファイルとして保存しています。