36. Основные частные и интегральные критерии оценки АИПС.
|
выданные |
невыданные |
Релев. |
a |
b |
Нерелев. |
c |
d |
Частные: |
|
|
Полнота r=a/(a+c)= x/x0=|LИ ∩LC|/|LИ|
Точность p=a/(a+b)=x/n=|LИ ∩LC|/|LC|
Специфичность σ=d/(b+d)=1- (n-x)/(n0 – x0)=|L0\ (LИ ULC)| / |L0\LИ|
Общность p0- характеризует качество комплектования поискового массива ( доля релев. документов в информационном массиве): p0=(a+c)/(a+b+c+d)=n/n0=|LИ|/|L0|
Относительный объем выдачи: v=(a+b)/(a+b+c+d)=n/n0=|LC|/|L0|
Интегральные. (используются, когда невозможно сравнить <r1,p1> <r2,p2> где p1<p2, r1>r2)
Коэффициент линейной корреляции R выдачи и релевантности документов – это корреляционный момент случайных величин С – «быть выданным доком» и И – «быть релев. док-ом». Принимают значения 0,1.
M[C]=P(C=1)= |
+ |
|
M[И]= |
|
+ |
(мат. ожидания) |
|
||||||
+ + + |
+ + + |
|
|||||||||||
|
|
|
|
|
|
|
|
|
|||||
σ2с= |
+ |
(1 − |
|
+ |
) = |
|
(+)(+) |
σ2и= |
(+)(+) |
(дисперсии) |
|||
+ + + |
+ + + |
|
(+ + +)2 |
(+ + +)2 |
|||||||||
|
|
|
|
|
|
|
|
||||||
− covси=М[C*И]-M[C]*M[И]=√(+)(+)(+)(+)
R(0)=0, R(p0)=0, R(И)=+1, R(Д)=-1, R(1)>0, R(2)>0, R(3)<0. Обозначим |LИ ∩LC=L, |LИ|=LИ, |LC|=LC, |L0|=L0
0−И
R=
√И (0−И)(0−С)
Показатель полезной работы η
При непосредственном просмотре L0 трудозатраты: С`=n`=x/p0
При просмотре массива Lc имеющего точность р, затраты C``=n``=x/p Работа АИПС равна разности данных величин или высвобожденной информационной деятельности потребителя: Сис=n`-n``=x(1/p0 –
1/p)=0− 0 = − = ( + − 1)( 0 − 0)
0 +
η=CИС/(n0-x0)=r+σ-1
данная мера полезной работы изменяется от +1 до -1.