100万件以上のCSVファイルをExcelやGoogleスプレッドシートで重複データを抽出しようとしたところ、行数オーバーでファイルが開けない問題があったので、CSVファイルから直接重複データを抽出できるか調べました。

Pythonのようなスクリプト言語を使うと、大規模なCSVファイルを簡単に扱え、特に重複データを抽出するのに便利みたいです。

# 方法

1.Pythonの環境を準備する
Pythonをインス[…]

#[…]