Summary  
This chapter explains how to extract all unique entries from a data column and how to count the number of distinct values using dedicated methods.  

General domain of usage  
Data analysis

データフレーム内のデータはしばしば**重複**します。例えば、`countries`データフレームの`'continent'`列には同じ値が繰り返し登場します。特定のデータフレーム列から**異なる値の配列**を取得するメソッドがあります。

Watch this video for a walkthrough of how to find unique values and count distinct entries in DataFrame columns using Pandas. You'll see practical demonstrations of the `unique()` and `nunique()` methods, along with clear explanations and real-world examples to reinforce your understanding.

import pandas as pd 

country_data = {'country' : ['Thailand', 'Philippines', 'Monaco', 'Malta', 'Sweden', 'Paraguay', 'Latvia'],
          'continent' : ['Asia', 'Asia', 'Europe', 'Europe', 'Europe', 'South America', 'Europe'],
          'capital':['Bangkok', 'Manila', 'Monaco', 'Valletta', 'Stockholm', 'Asuncion', 'Riga']}
countries = pd.DataFrame(country_data)
print(countries)

次に、`unique()`メソッドを`'continent'`列と`'country'`列に適用します。

import pandas as pd

country_data = {'country' : ['Thailand', 'Philippines', 'Monaco', 'Malta', 'Sweden', 'Paraguay', 'Latvia'],
          'continent' : ['Asia', 'Asia', 'Europe', 'Europe', 'Europe', 'South America', 'Europe'],
          'capital':['Bangkok', 'Manila', 'Monaco', 'Valletta', 'Stockholm', 'Asuncion', 'Riga']}
countries = pd.DataFrame(country_data)
unique_countries = countries['country'].unique()
unique_continents = countries['continent'].unique()
print(unique_countries)
print(unique_continents)

すべてのユニークな値を取得するのではなく、**列内にいくつの異なる値**が存在するかだけを知りたい場合があります。そのような場合は、**`nunique()`** メソッドを使用できます。これは、列内のユニークなエントリの**数**を返します（値自体ではありません）。

import pandas as pd

country_data = {'country' : ['Thailand', 'Philippines', 'Monaco', 'Malta', 'Sweden', 'Paraguay', 'Latvia'],
          'continent' : ['Asia', 'Asia', 'Europe', 'Europe', 'Europe', 'South America', 'Europe'],
          'capital':['Bangkok', 'Manila', 'Monaco', 'Valletta', 'Stockholm', 'Asuncion', 'Riga']}
countries = pd.DataFrame(country_data)
print(countries['continent'].nunique())

import unittest
import importlib
import numpy as np


# Helper function for dynamic test names and assertions
def _dynamic_test(test_case, condition, success_message, failure_message):
    if condition:
        test_case._testMethodName = success_message
        test_case.assertTrue(True, success_message)
    else:
        test_case._testMethodName = failure_message
        test_case.fail(failure_message)


class TestUserCode(unittest.TestCase):

    def test_unique_years_is_declared(self):
        import user_code
        _dynamic_test(
            self,
            hasattr(user_code, 'unique_years'),
            "The `unique_years` variable is declared.",
            "Expected `unique_years` to be declared."
        )

    def test_unique_years_contains_correct_values(self):
        import user_code
        expected_value = sorted([2017, 2016, 2019])
        try:
            if isinstance(user_code.unique_years, np.ndarray):
                actual_value = sorted(user_code.unique_years)
                condition = actual_value == expected_value
                failure_message = f"Expected `unique_years` to contain `{expected_value}`, but got `{actual_value}`."
            else:
                condition = False
                failure_message = f"`unique_years` is not a `numpy.ndarray`."

        except AttributeError:
            condition = False
            failure_message = "The `unique_years` variable is not declared."

        _dynamic_test(
            self,
            condition,
            f"`unique_years` contains correct values.",
            failure_message
        )

    def test_unique_fueltype_is_declared(self):
        import user_code
        _dynamic_test(
            self,
            hasattr(user_code, 'unique_fueltype'),
            "The `unique_fueltype` variable is declared.",
            "Expected `unique_fueltype` to be declared."
        )

    def test_unique_fueltype_contains_correct_values(self):
        import user_code
        expected_value = sorted(["petrol", "diesel"])
        try:
            if isinstance(user_code.unique_fueltype, np.ndarray):
                actual_value = sorted(user_code.unique_fueltype)
                condition = actual_value == expected_value
                failure_message = f"Expected `unique_fueltype` to contain `{expected_value}`, but got `{actual_value}`."
            else:
                condition = False
                failure_message = f"`unique_fueltype` is not a `numpy.ndarray`."
        except AttributeError:
            condition = False
            failure_message = "The `unique_fueltype` variable is not declared."

        _dynamic_test(
            self,
            condition,
            f"`unique_fueltype` contains correct values.",
            failure_message
        )

    def test_count_unique_fueltypes_is_declared(self):
        import user_code
        _dynamic_test(
            self,
            hasattr(user_code, 'count_unique_fueltypes'),
            "The `count_unique_fueltypes` variable is declared.",
            "Expected `count_unique_fueltypes` to be declared."
        )

    def test_count_unique_fueltypes_is_correct(self):
        import user_code
        expected_value = 2
        try:
            actual_value = user_code.count_unique_fueltypes
            condition = actual_value == expected_value
            failure_message = f"Expected `count_unique_fueltypes` to be `{expected_value}`, but got `{actual_value}`."
        except AttributeError:
            condition = False
            failure_message = "The `count_unique_fueltypes` variable is not declared."

        _dynamic_test(
            self,
            condition,
            f"`count_unique_fueltypes` is correct.",
            failure_message
        )


if __name__ == '__main__':
    unittest.main()

test_main.py

Pandasは、データ分析のための非常にユーザーフレンドリーなライブラリです。また、DataFrameやSeriesのようなデータ構造を使用して大規模なデータセットを扱うように設計されています。これにより、データサイエンスにとって不可欠なツールとなっています。本ガイドでは、相関、最頻値、中央値、最大値および最小値の算出方法など、さまざまな統計関数について学びます。また、欠損値の処理や特定の値の操作、削除方法についても習得します。

pandasライブラリの基本を学びます。SeriesおよびDataFrameの作成と操作、その構造の探索、基本的なデータ操作の実践に自信を持つことができます。

CSVファイルおよびTXTファイルからデータを読み込み、管理する方法を習得します。pandasツールを使用してデータセットをインポートし、さらなる分析のために準備する実践的な経験を得られます。

データを効果的に探索、クリーンアップ、要約する方法を学びます。欠損値の処理方法、インサイトの抽出、pandasを用いた基本的な統計操作について理解します。

ユニーク値

解答