コードで語るマニフェスト：自治体オープンデータを技術で検証する

どうも〜おかむーです！今日はちょっとエンジニアっぽい話をしますよ〜

• 要点1：多くの地方自治体はオープンデータを公開しているが、機械可読性やAPI整備に課題あり
• 要点2：PDF / 人手で作られた表がボトルネック。CSV/JSON/GeoJSONへの標準化で利活用が一気に進む
• 要点3：政策目標（標準化・クラウド移行）と現場運用コストのギャップを技術で埋める提案あり

結論

自治体のオープンデータは既に宝の山だけど、フォーマットとAPI設計が足を引っ張っているんですよね。総務省やデジタル庁の方針（soumu.go.jp、digital.go.jp）に沿って標準化を進めれば、民間のイノベーションが加速するはず。要するに、まずは「機械がそのまま使える形」で出すこと、それが全てです。

レポート本文

現状観察と問題点

これ見てくださいよ、自治体のオープンデータってこういう状況です：

• 公開場所がバラバラ（自治体サイト、都道府県ポータル、デジタル庁事例ページ）
• フォーマットはPDFが多い。人が見るには良いけど機械処理には最悪
• CSVがあってもエンコーディング（Shift_JIS）、カラム命名の不統一、メタデータ欠落でそのまま使えない
• APIは整備されつつあるが、認証方式・レスポンス仕様が自治体ごとに違う

総務省のガイドライン（総務省：地方公共団体のオープンデータ推進）やデジタル庁の事例ページを見ても、政策はあるけど実装フェーズの差が大きい印象です。

技術的観点での評価

• 機械可読性：CSV/JSON/GeoJSONがベスト。PDFはテーブル抽出（tabula等）で労力が増える
• メタデータ：DCAT/Schema.orgベースで公開されていれば発見性が向上
• ライセンス：明確な二次利用許諾（CC0等）がないデータは使いにくい
• API：REST + OpenAPI仕様書があると統合が楽。GraphQLを置く自治体も増えてほしい

要するに、データの品質 = エンジニアの工数 × 収益性 なんですよね。品質低いと民間の再利用が停滞します。

コード例（実用的なワークフロー）

• CSVを直接読み込む（Python + pandas）

import pandas as pd
url = 'https://example.gov/data.csv'
df = pd.read_csv(url, encoding='utf-8')
print(df.head())

• PDFから表を抽出する（tabula-py）

import tabula
dfs = tabula.read_pdf('report.pdf', pages='all', multiple_tables=True)

• GeoJSONをGeoPandasで扱う

import geopandas as gpd
gdf = gpd.read_file('https://example.gov/data.geojson')

（コードはサンプルなので、実運用ではバリデーション・スキーマチェックを入れてください）

政策目標と実績のギャップ分析

デジタル庁の「自治体情報システムの標準化・共通化」方針では、ガバメントクラウド移行や標準化が謳われている（digital.go.jp）。ただ現場では

• レガシーシステムの移行コスト
• データカタログ整備の人的リソース不足
• 予算配分の偏り

があって、政策の数値目標（例：標準化完了率、クラウド移行率）と実際の進捗に差が生じている。要するに、計画だけでは動かないんですよね。

改善提案（技術的ソリューション）

データ公開パイプラインの自動化

- システム側でCSV/JSONを自動出力、S3等に配置しCDNで配信

APIとOpenAPIドキュメントの標準化

- 共通スキーマを定め、Swagger/OpenAPIで公開

メタデータとライセンスの明示（DCAT + CC0）

PDF廃止か最小化、どうしてもPDFある場合は構造化データを同梱

共通ライブラリの提供

- pandas/GeoPandas向けの自治体データ取り込みツールをOSSで提供

これにより、民間開発者が「API1本で統合」できる世界が来ます。米国の洪水リスクサイト（参照：sorabatakeの事例）みたいなサービスは、日本でも即座に立ち上がるはずです。

まとめ

• 現在はオープンデータの量は増えているが、機械可読性と標準化がボトルネック
• PDF→CSV/JSON/GeoJSONへの移行、OpenAPI化、メタデータ整備が鍵
• 技術的な自動化と共通ツールを投入すれば、コストを抑えつつ利活用が飛躍的に進む

おかむーから一言

テクノロジーで社会をアップデートするのは本気で面白い。まずは小さなCSVひとつが未来を作るんですよ、みんな一緒にやりましょう！