データのクレンジングがされておらず、ファイル内に重複するレコードが存在するため、重複するレコードを削除したいです。
ファイルを読み込んだ際、値が重複するレコードの最初の値や最後の値のみを指定して出力するにはどうすればよいでしょうか。