Задатак 3

Током развоја великог језичког модела (LLM), тим имплементира „Диференцијалну приватност“ (DP) као етичко ограничење у дизајну како би спречио цурење личних података (PII). Овај процес укључује параметар буџета приватности ε.

Која од следећих тврдњи најбоље описује утицај овог ограничења на перформансе система?

  1. Корисност модела остаје константна, али се време обучавања експоненцијално повећава ради управљања слојевима приватности.
  2. Постоји инхерентна размена (trade-off) где повећање гаранције приватности (смањење ε) нужно доводи до смањења тачности модела и брзине конвергенције.
  3. Ограничење делује као регуларизациони термин, побољшавајући генерализацију спречавањем преучења (over-fitting) на специфичним подацима.
  4. Етичка ограничења попут диференцијалне приватности су искључиво архитектонске природе и не утичу на функцију губитка нити на коначне тежине модела.

[Укупно 3 поена]