JSONとテーブル / クリーンアップ
データ重複除去ツール：列を指定して重複行を削除
CSVデータやリストを貼り付け、指定した列または行全体を基準に重複行を削除します。大文字小文字や余分な空白を無視するか、最初または最後の行を残すかを選べます。どの値が何回重複したかも確認できます。
データ重複除去ツール：列を指定して重複行を削除: 各行について、選択した列の値からキーを作成し、指定どおりに整形します。同じキーを持つ行は、最初（または最後）の行だけを元の順序で残します。サンプルでは、メールアドレスを基準にして大文字小文字を無視すると、AnaとBenが残り、2件目のAnaと、メールアドレスがBenと重複するCyが削除されます。 サーバーへのファイルアップロードは一切なく、100%ブラウザ内でローカル実行します。
- カテゴリ
- 開発者ツール
- 実行回数
- ブラウザ内で
- コスト
- 無料 · 登録不要
- 提供状況
- すぐに使えます
完全にブラウザ内で実行します
結果
name,email Ana,ana@example.com Ben,ben@example.com
| 重複値 | 時刻 |
|---|---|
| ana@example.com | 2 |
| ben@example.com | 2 |
選択した列が一致する行を重複とみなし、列を選択していない場合は行全体を比較します。大文字と小文字、余分な空白を無視するため、「ANA 」と「ana」のような項目も検出できます。結果は元の順序を維持し、スプレッドシートに貼り付け直せます。コンマや改行を含む引用符付きのCSVフィールドにも対応しています。
類似した重複データの照合
大文字と小文字、スペースを無視すると、「ANA 」と「ana」を検出できますが、綴りの違いやニックネームの確認には人の目またはあいまい一致ツールが必要です。
単純なリスト
列のない単純なリストなら、重複行の削除のほうがすばやく処理できます。
使い方
- ヘッダー行の有無にかかわらず、CSVデータを貼り付けます。
- 比較する列にチェックを入れ、大文字小文字、空白、残す行を選択します。
- 重複を除去したCSVをコピーします。
プライバシーと制限事項
データはブラウザ内に留まり、アップロードされることはありません。
関連ツール
よくある質問
重複する行の削除は、重複する行の削除とどう違いますか？
列を認識できる点が違います。名前が異なっていてもメールアドレスが同じ2行を重複として扱えます。また、セル内の引用符付きカンマにも対応しています。
どの行を残せばよいですか？
最初の行は最も早い記録を残す場合に使います。行が日付順に並んでいる場合、最後の行は最新の更新内容を残す場合に使います。
大きなファイルにも対応していますか？
数万行であればブラウザ上で処理できます。数百万行の場合は、データベースやコマンドラインツールの利用をおすすめします。
無料ツール · ブラウザ内で · アカウント不要