【Python】スクレイピング結果を自動でCSV保存・メール送信する方法

Webサイトから情報を自動で取得し、その結果をCSVに保存してメールで共有できれば、レポート作成やデータ収集の効率が格段に向上します。Pythonを使えば、これらの処理をまとめて自動化することが可能です。

この記事では、スクレイピング → CSV保存 → メール送信までを一連の流れとして構築する方法を紹介します。

使用するライブラリ
ステップ1：スクレイピング処理
ステップ2：CSVに保存
ステップ3：メールで送信（添付あり）
応用：定期実行やエラー通知の追加
まとめ

使用するライブラリ

requests：Webページ取得
BeautifulSoup：HTMLパース
csv：CSV出力
smtplib, email：メール送信

pip install requests beautifulsoup4

ステップ1：スクレイピング処理

例として、架空のニュースサイトから記事タイトルとURLを取得する例です。

import requests
from bs4 import BeautifulSoup

url = "https://example.com/news"
response = requests.get(url)
soup = BeautifulSoup(response.text, "html.parser")

articles = []
for item in soup.select(".news-item"):
    title = item.select_one("h2").text.strip()
    link = item.select_one("a")["href"]
    articles.append([title, link])

ステップ2：CSVに保存

import csv

with open("scraped_news.csv", "w", newline="", encoding="utf-8") as f:
    writer = csv.writer(f)
    writer.writerow(["タイトル", "URL"])
    writer.writerows(articles)

ステップ3：メールで送信（添付あり）

import smtplib
from email.message import EmailMessage

EMAIL = "youraddress@example.com"
PASSWORD = "yourpassword"
TO = "recipient@example.com"

msg = EmailMessage()
msg["Subject"] = "最新ニュースのスクレイピング結果"
msg["From"] = EMAIL
msg["To"] = TO
msg.set_content("CSVファイルを添付します。")

# CSVを添付
with open("scraped_news.csv", "rb") as f:
    msg.add_attachment(f.read(), maintype="application", subtype="octet-stream", filename="scraped_news.csv")

# メール送信
with smtplib.SMTP_SSL("smtp.example.com", 465) as smtp:
    smtp.login(EMAIL, PASSWORD)
    smtp.send_message(msg)