Convertir le PDF des magasins disponibles de Go To EAT dans la préfecture de Kagoshima en CSV

Conversion de PDF en CSV de Magasins disponibles de la Chambre de commerce et d'industrie de Kagoshima

Les fichiers PDF sont séparés pour chaque zone, alors combinez-les en un seul

Grattage

import requests
from bs4 import BeautifulSoup

url = "http://www.kagoshima-cci.or.jp/?p=20375"

r = requests.get(url)
r.raise_for_status()

soup = BeautifulSoup(r.content, "html.parser")

result = []

for a in soup.select("#contents_layer > span > p > a"):

    s = a.get_text(strip=True).replace("Toute la zone", "").lstrip("〇")

    #District exclu
    if not s.endswith("district"):

        result.append({"area": s, "link": a.get("href")})

Data wrangling

import camelot
import pandas as pd

dfs = []

for data in result:

    tables = camelot.read_pdf(
        data["link"], pages="all", flavor="lattice", split_text=True, strip_text=" \n"
    )

    for table in tables:

        df_tmp = table.df.iloc[1:].set_axis(["Cinquante sons", "Nom du magasin", "emplacement"], axis=1)
        df_tmp["zone"] = data["area"]

        dfs.append(df_tmp)

df = pd.concat(dfs)

df.to_csv("kagoshima.csv", encoding="utf_8_sig")

Recommended Posts

Convertir le PDF des magasins disponibles de Go To EAT dans la préfecture de Kagoshima en CSV
Convertir le PDF des magasins membres Go To EAT de la préfecture d'Ishikawa en CSV
Convertir le PDF de la liste des magasins membres Go To EAT dans la préfecture de Niigata en CSV
Convertir le PDF de la liste des magasins membres Go To EAT dans la préfecture de Kumamoto en CSV
Convertir le PDF de la préfecture de Chiba Aller à la liste des magasins des membres EAT en CSV (commande)
Convertir le PDF de la liste des concessionnaires de la campagne Go To Eat Hokkaido en CSV
Scraping Go To EAT membres magasins dans la préfecture d'Osaka et conversion au format CSV
Convertir le PDF d'un nouveau cas d'épidémie corona dans la préfecture d'Aichi en CSV
Gratter la liste des magasins membres Go To EAT dans la préfecture de Fukuoka et la convertir en CSV
Gratter la liste des magasins membres Go To EAT dans la préfecture de Niigata et la convertir en CSV
Convertir Markdown en PDF en Python
Comment convertir csv en tsv dans la CLI
Convertir de PDF en CSV avec pdfplumber
Je souhaite convertir une table convertie en PDF en Python en CSV
L'histoire de la recherche d'un magasin BOT (AI LINE BOT) pour Go To EAT dans la préfecture de Chiba (1)
Convertir le PDF de la liste de produits contenant des surfactants efficaces pour le nouveau virus corona en CSV
Histoire de faire une recherche de magasin BOT (AI LINE BOT) pour Go To EAT dans la préfecture de Chiba (2) [Présentation]
Convertir des fichiers CSV UTF-8 pour les lire dans Excel
Conversion par lots de fichiers PSD du répertoire en PDF
[Python] Convertir le texte PDF en CSV pour chaque page (2/24 postscript)
Convertissez l'image au format .zip en PDF avec Python
Conversion par lots de tous les fichiers xlsx du dossier en fichiers CSV
Django a changé pour enregistrer beaucoup de données à la fois
Convertissez rapidement SDF en CSV
Extension Sphinx pour convertir arbitrairement du texte en pré-traitement de la génération de documents
Convertir des fichiers écrits en python, etc. en pdf avec la coloration syntaxique
Convertissez un grand nombre de fichiers PDF en fichiers texte à l'aide de pdfminer
Créez une fonction pour obtenir le contenu de la base de données dans Go