drm/amd/display: Fix out-of-bounds stream encoder index v3
authorSrinivasan Shanmugam <srinivasan.shanmugam@amd.com>
Fri, 6 Feb 2026 15:19:23 +0000 (20:49 +0530)
committerAlex Deucher <alexander.deucher@amd.com>
Thu, 12 Feb 2026 20:24:12 +0000 (15:24 -0500)
eng_id can be negative and that stream_enc_regs[]
can be indexed out of bounds.

eng_id is used directly as an index into stream_enc_regs[], which has
only 5 entries. When eng_id is 5 (ENGINE_ID_DIGF) or negative, this can
access memory past the end of the array.

Add a bounds check using ARRAY_SIZE() before using eng_id as an index.
The unsigned cast also rejects negative values.

This avoids out-of-bounds access.

Fixes the below smatch error:
dcn*_resource.c: stream_encoder_create() may index
stream_enc_regs[eng_id] out of bounds (size 5).

drivers/gpu/drm/amd/amdgpu/../display/dc/resource/dcn351/dcn351_resource.c
    1246 static struct stream_encoder *dcn35_stream_encoder_create(
    1247         enum engine_id eng_id,
    1248         struct dc_context *ctx)
    1249 {

    ...

    1255
    1256         /* Mapping of VPG, AFMT, DME register blocks to DIO block instance */
    1257         if (eng_id <= ENGINE_ID_DIGF) {

ENGINE_ID_DIGF is 5.  should <= be <?

Unrelated but, ugh, why is Smatch saying that "eng_id" can be negative?
end_id is type signed long, but there are checks in the caller which prevent it from being negative.

    1258                 vpg_inst = eng_id;
    1259                 afmt_inst = eng_id;
    1260         } else
    1261                 return NULL;
    1262

    ...

    1281
    1282         dcn35_dio_stream_encoder_construct(enc1, ctx, ctx->dc_bios,
    1283                                         eng_id, vpg, afmt,
--> 1284                                         &stream_enc_regs[eng_id],
                                                  ^^^^^^^^^^^^^^^^^^^^^^^ This stream_enc_regs[] array has 5 elements so we are one element beyond the end of the array.

    ...

    1287         return &enc1->base;
    1288 }

v2: use explicit bounds check as suggested by Roman/Dan; avoid unsigned int cast

v3: The compiler already knows how to compare the two values, so the
    cast (int) is not needed. (Roman)

Fixes: 2728e9c7c842 ("drm/amd/display: add DC changes for DCN351")
Reported-by: Dan Carpenter <dan.carpenter@linaro.org>
Cc: Harry Wentland <harry.wentland@amd.com>
Cc: Mario Limonciello <superm1@kernel.org>
Cc: Alex Hung <alex.hung@amd.com>
Cc: Aurabindo Pillai <aurabindo.pillai@amd.com>
Cc: ChiaHsuan Chung <chiahsuan.chung@amd.com>
Cc: Roman Li <roman.li@amd.com>
Signed-off-by: Srinivasan Shanmugam <srinivasan.shanmugam@amd.com>
Reviewed-by: Roman Li <roman.li@amd.com>
Signed-off-by: Alex Deucher <alexander.deucher@amd.com>
drivers/gpu/drm/amd/display/dc/resource/dcn315/dcn315_resource.c
drivers/gpu/drm/amd/display/dc/resource/dcn316/dcn316_resource.c
drivers/gpu/drm/amd/display/dc/resource/dcn32/dcn32_resource.c
drivers/gpu/drm/amd/display/dc/resource/dcn321/dcn321_resource.c
drivers/gpu/drm/amd/display/dc/resource/dcn35/dcn35_resource.c
drivers/gpu/drm/amd/display/dc/resource/dcn351/dcn351_resource.c

index a8283f2..3ae787a 100644 (file)
@@ -1230,12 +1230,12 @@ static struct stream_encoder *dcn315_stream_encoder_create(
        /*PHYB is wired off in HW, allow front end to remapping, otherwise needs more changes*/
 
        /* Mapping of VPG, AFMT, DME register blocks to DIO block instance */
-       if (eng_id <= ENGINE_ID_DIGF) {
-               vpg_inst = eng_id;
-               afmt_inst = eng_id;
-       } else
+       if (eng_id < 0 || eng_id >= ARRAY_SIZE(stream_enc_regs))
                return NULL;
 
+       vpg_inst = eng_id;
+       afmt_inst = eng_id;
+
        enc1 = kzalloc(sizeof(struct dcn10_stream_encoder), GFP_KERNEL);
        vpg = dcn31_vpg_create(ctx, vpg_inst);
        afmt = dcn31_afmt_create(ctx, afmt_inst);
index 4da0e93..4b86684 100644 (file)
@@ -1223,12 +1223,12 @@ static struct stream_encoder *dcn316_stream_encoder_create(
        int afmt_inst;
 
        /* Mapping of VPG, AFMT, DME register blocks to DIO block instance */
-       if (eng_id <= ENGINE_ID_DIGF) {
-               vpg_inst = eng_id;
-               afmt_inst = eng_id;
-       } else
+       if (eng_id < 0 || eng_id >= ARRAY_SIZE(stream_enc_regs))
                return NULL;
 
+       vpg_inst = eng_id;
+       afmt_inst = eng_id;
+
        enc1 = kzalloc(sizeof(struct dcn10_stream_encoder), GFP_KERNEL);
        vpg = dcn31_vpg_create(ctx, vpg_inst);
        afmt = dcn31_afmt_create(ctx, afmt_inst);
index d3b92c6..a550784 100644 (file)
@@ -1211,12 +1211,12 @@ static struct stream_encoder *dcn32_stream_encoder_create(
        int afmt_inst;
 
        /* Mapping of VPG, AFMT, DME register blocks to DIO block instance */
-       if (eng_id <= ENGINE_ID_DIGF) {
-               vpg_inst = eng_id;
-               afmt_inst = eng_id;
-       } else
+       if (eng_id < 0 || eng_id >= ARRAY_SIZE(stream_enc_regs))
                return NULL;
 
+       vpg_inst = eng_id;
+       afmt_inst = eng_id;
+
        enc1 = kzalloc(sizeof(struct dcn10_stream_encoder), GFP_KERNEL);
        vpg = dcn32_vpg_create(ctx, vpg_inst);
        afmt = dcn32_afmt_create(ctx, afmt_inst);
index d08691e..188c3f2 100644 (file)
@@ -1192,12 +1192,12 @@ static struct stream_encoder *dcn321_stream_encoder_create(
        int afmt_inst;
 
        /* Mapping of VPG, AFMT, DME register blocks to DIO block instance */
-       if (eng_id <= ENGINE_ID_DIGF) {
-               vpg_inst = eng_id;
-               afmt_inst = eng_id;
-       } else
+       if (eng_id < 0 || eng_id >= ARRAY_SIZE(stream_enc_regs))
                return NULL;
 
+       vpg_inst = eng_id;
+       afmt_inst = eng_id;
+
        enc1 = kzalloc(sizeof(struct dcn10_stream_encoder), GFP_KERNEL);
        vpg = dcn321_vpg_create(ctx, vpg_inst);
        afmt = dcn321_afmt_create(ctx, afmt_inst);
index 945da8c..5ea805f 100644 (file)
@@ -1274,12 +1274,12 @@ static struct stream_encoder *dcn35_stream_encoder_create(
        int afmt_inst;
 
        /* Mapping of VPG, AFMT, DME register blocks to DIO block instance */
-       if (eng_id <= ENGINE_ID_DIGF) {
-               vpg_inst = eng_id;
-               afmt_inst = eng_id;
-       } else
+       if (eng_id < 0 || eng_id >= ARRAY_SIZE(stream_enc_regs))
                return NULL;
 
+       vpg_inst = eng_id;
+       afmt_inst = eng_id;
+
        enc1 = kzalloc(sizeof(struct dcn10_stream_encoder), GFP_KERNEL);
        vpg = dcn31_vpg_create(ctx, vpg_inst);
        afmt = dcn31_afmt_create(ctx, afmt_inst);
index e660889..424b52e 100644 (file)
@@ -1254,12 +1254,12 @@ static struct stream_encoder *dcn35_stream_encoder_create(
        int afmt_inst;
 
        /* Mapping of VPG, AFMT, DME register blocks to DIO block instance */
-       if (eng_id <= ENGINE_ID_DIGF) {
-               vpg_inst = eng_id;
-               afmt_inst = eng_id;
-       } else
+       if (eng_id < 0 || eng_id >= ARRAY_SIZE(stream_enc_regs))
                return NULL;
 
+       vpg_inst = eng_id;
+       afmt_inst = eng_id;
+
        enc1 = kzalloc(sizeof(struct dcn10_stream_encoder), GFP_KERNEL);
        vpg = dcn31_vpg_create(ctx, vpg_inst);
        afmt = dcn31_afmt_create(ctx, afmt_inst);