PALAVRAS - CHAVE RESUMO
Rosa Maria Araújo de Godoy Vasconcelos'"
~
I:
145
Biblioteca universitária. Avaliação de desempenho do Sistema de Bibliotecas. Crescimento percentual do desempenho da bibl ioteca/usuário.
I
:,~":~: ~ :1~n~l:
./.
Humanas e Educaçãoda UFPr. -..-...,
...
_-~ ...._--Avalia o desempenho eficaz do Sistema de Bibliotecas da Universidade Federal de Pernambuco. O crescimento percentual do desempenho da aquisição. da circulação, da biblioteca e do usuário foi medido, propor-cionando indicadores para tomada de deci-sões. Os resultados indicaram o cresci-mento percentual negativo -43,66% do desempenho da aquisição da Biblioteca Central e a média de -73,22% das Bibliote-cas Setoriais, e índices negativos para os demais serviços da BC e positivos para a média das BS nos últimos cinco anos.
AVALIAÇÃO DE DESEMPENHO
DO SISTEMA DE BIBLIOTECAS
~d. Bipliotecon., Recife. (11); 145-154 Dez. 198~
.. Professora do Departamento de Biblioteconomia da UniversIdade Federal de Pernambuco.
ABSTRACT
1
147 Cad-o Bibliotecon .• Recife (11); 145-154 Dez. 1989
As bibliotecas selecionadas para esta pesquIsa foram: a Biblioteca Central e três Bibliotecas Setoriais do Sistema Comum de Ensino e Pesquisa Básicos do
SBI
UFPE. Os dados obtidos poderão ser usados posterior-mente para o planejamento consciente e sistemático do desempenho das operações da biblioteca adequados às necessidades de informação dos usuários em geral.
O objetivo principal definido para as bibliotecas universitárias em estudo é a prestação de serviços de in-formação, necessários ao desempenho eficaz das ativida-des de ensino, de pesquisa e de extensão dos usuários reais e potenciais da universidade.
3. REVISAO DA LITERATURA
O objetivo deste estudo é avaliar a eficácia no de-sempenho do SB/UFPE. Os resultados referem-se às áreas de aquisição, circulação, procedimento da biblioteca e do usuário respectivamente.
2. OBJETIVO
A literatura sobre avaliação em ciência da informa-ção foi dominada pelos estudos de medidas de recupera-ção, abrangência rle base de dados, capacidade dos sistemas na entrega dos documentos e o uso dos produtos
e
informação, e a falta de estudos que avaliassem as ope-rações da biblioteca com referência ao planejamento.No final da década de 60, iniciaram-se os estudos sobre avaliação da eficácia dos serviços de biblioteca, com modelos e medidas d~ desempenho baseados em pesquisa operacional, engenharia de sistemas e áreas re-lacionaGlas. A característica da fase inicial desses es-tudos são as limitações do processo de avaliação.
A macroavaliação e a microavaliação deste objetivo. fornecerão indicadores para tomada de decisões.
Cad. Bibliotecon., Recife'(11); 145-154 Dez. 1989 KEY WORDS
University Iibrary. Evaluation of performan-ce of the Library Systems.
Percentage development of the library/user's performance.
EVALUAllON OF lHE PERFORMANCE OF lHE L1BRARV SYSlEMS
Evaluates the effective performance of the Library Systems of the Federal University of Pernam.buco. The percentage development of the user's performance and of the library acquisition, circulation and other procedu-res was measured in order to provi de indi-cators for decision making. The results showed the negative percentage develop-ment -43,66% of the performance acquisi-tion of the Central Library and the average of -73,22% of the Sectorial Libraries, and the negative indexes for the other library procedures of the BC and positive for the average of the BS during the last five years.
146
1. INTRODUÇAO
4. METODOLOGIA
. O
estudo foi realizado na Biblioteca Central (BC) destinada especificamente à graduação e em trêsBibliote-O crescimento percentual do desempenho da aqui-sição, da circulação. da biblioteca e do usuário na BC e 5. RESULTADOS DO DESEMPENHO DA BIBLIOTECA!
USUÁRIO
Na aplicação do quest!onário para o estudo do 'de-sempenho da biblioteca/usuário, obtivemos o percentual de 100% de respostas nas bibliotecas.
Dentre os objetivos definidos para as bibliotecas 75% indicaram satisfazer as necessidades de informação da comunidade e oper2ções da biblioteca, 50% servir de apoio às atividades de ensino, pesquisa e extensão e ma-ximização do uso, e 25% para a prestação de serviços. A indicação simultânea de três objetivos corresponde "a 75% e de dois a 25% respectivamente.
Cad. Bibliotecon., Recife (11); 145-154 Dez. 1989 149
II
I"
-~---~---
-~--~
,
A periodicidade predominante na elaboração de re-latório foi a anual, com uma representação de 100%. c
cas Setoriai's' (BS'
de
pós-graduação: ado Centro de Artes e Comunicação (CAC); a do Departamento de Antibióticos do Centro de Ciências Biológicas (DA/CCB) e a do Depar-tamento de Matemática, Estatística e Informática do Centro de Ciências Exatas e da Natureza (DMEI/CCEN-)do Sistema Comum de Ensino e Pesquisa Básicos (SCEPB) do SB/UFPE, e que colóborgm com a Universidade na con-secução de seus objetivos básicos de ensino, pesquisa eextensão.
A utilização da observação e de outro (especificado estathtico) como instrumentos de avaliação de serviços atingiram o índice de 75%. E para o questionário, o for-mulário e a entrevista a proporção constânte de 25%.
À aplicação simultânea de dois instrumentos uma repre-sentação de 75% e de três instrumentos de 25%, respec-tivamente.
Cad. Bibliotecon-., Recifec(11); 145·154 Dez. 1989
148
Para o cálculo do crescimento percentual de de-sempenho da biblioteca/usuário - 1983/87, coletamos dados referentes a este período inclusive 1982.
Durante o período de 11 a 15 de abril de 1988, num total de cinco dias, foram coletados dados sobre cada biblioteca integrante da amostra, pessoalmente pela au-toria dos bibliotecários.
Nesta pesquisa descritiva, o instrumento utilizado para a coleta de dados foi o questionário - Avaliação do Desempenho do SB/UFPE.
Neste estudo foi aplicado o método estatístico para comprovar através dos valores quantitativos as relações
Alguns entre os vários estudos realizados sobre ava-liação de desempenho dos serviços em biblioteca foram os desenvolvidos por BUCKlAND\ HAMBURG, et a12
, KANTOR3, lANCA8TER5 e DRRG
, que serviram de base para a elaboração deste estudo.
,
t-.. Q;),
"J Q;) O) 1"-i I I:>.:l P... kt ::::> ~ ~ ~ ~ N ~ ~ ~ ~ ~ t> ~ ..,.-.:o ~c
.~ ~ ..Q .~ P:l t:! '"t:!.
Q;) ~ Q;) ~O) :::t1"-i ~ "'l;..
I:>.:l oP... .~ ~'"
'o \l) ~~ t:!.~ ~ o \l) \l) ~O:::'.
dP~
~ (7\°
(7\<J
~
co .. ~~, NN coI
°
Ll"ICO·
·
·
1.O.C"'l ...-l·
·
..
·
·
·
·
..
·
tO 1.0 r-
·
·
·
li')
°
N~
Nr- N(7\ (7\N I (7\li')::>
·
°
°
'<:2' 1.0dP
f=j
1.0 (7\(7\ COll') lI')N lI')'<:J' MN°
<J r- li') (7\ li')
..
(7\..
li')...
1.0...
MU) li') 00
..
...-l (7\ ...-lM '<:2'lI') ~N M~
·
·°
• li')·
·°
·M·
..:r:
N N...-l ...-l I ...-l N...-l ...-l I (7\U
f.Ll
8
o
·
"""
N 00(7\ I.O...-l '<:J'...-l lI')...-l li')'-l
~
r- M'<:2' co 1.0 M r- oo 1/"11.0
°
oH (7\ (7\ 00 (7\
..
1.0...
o..
1.0..
Mf.Q
· ·
..
.(7\ .r- ·00 • 1.0·
H
"""
"""O' ...-ll/"l ...-lr-! MOO ...-l'<:J' Mf.Q I I I I ...-l
·
CO ce li') ...-l ce o N~
r-(7\ 1.0 r-r-l1.O ONr- 1.0 r- N(7\N 0(7\r-'<:J' 01.0N 00 lf'lr-· r-·
..
· .. ·
..
·
..
·
..
·
r- Mr-! Olf'l -:rN ...-l (7\ r- 00
r-~
"""
lf'lr-! -:rN ~r-! MN ~'<:J' ...-ldP I I N
<J
~
(7\ r-l N (7\ ~ o 1.0o
N Olf'l -:rM 1.0 lf'l OO'<:J' lf'l...-l -:rw:
~
ce ce M r-l~ lf'lN lf'l (7\ (7\ 00 oU.
·
· .. ·
...
·
..
·
..
·
...
·
j
r- Nlf'l r- 00 r- CO 0(7\ N CO ...-lÔ
o (7\lf'l lf'lM 1.0 r-! -:rM M...-l O)::> u N I
,
I,
NC)
~
r- (7\ r- o N o coH o r-l 1.0 r-lO -:r 1.0 (7\ 1.0 lf'l r- r-l
U
..:r:
co ~r- N~ lf'll' N r- r-lCO 1.08
· · .. ·
...
·
...
·
...
· .. ·
o
lf'l I.ON r- M Nlf'l Nlf'l 0 0 CO8 lf'l
-:r """ (7\ M ...-l...-l r- M COr-l o
N r-l I I r-l
,
lf'lg
r- M 1.0 r-l r- or-o 0'<:J' -:r (7\ Mr-l r-l N NM ...-l
HdP
"""
M r- r-M lf'lM r-'<:2' M'<:2' -:r~<J
· ·
..
·
...
·
...
·
..
·
...
·
~
-:r Nr--:r r-l-:rN r-l NM lf'lMr- r-lOCO ...-lNI
,
I N IoJ
..-l~
-M ,.Q Cdro
o
.c
r::
Q) Ol S Q) tfl Q) 'Oo
ro-
r-...-l ce-m'
==' M4J ce
r::
0\ Q) ...-lo
~ (lio
IIr::
Cdo
4Jo
r::
'O Q)r::
E ==' ..-l tT"o
Q) tfl tfl Q) ~o
U ..-l ~ I "t1' ==' rLI tfl ~~, ==' ::> rtj,
o
u
Q) f.Q +J I M r-f ~..:r:
0z
N M '<:J' LO 1.0 r- ltS ~H co co co co co co 4J ~
rLI
..:r:
(7\ (7\ (7\ (7\ (7\ (7\o
o~
~~~~~~8~,
---~-~._.
--'--'-'~---o
desempenho da consulta 595,71 % em 1983 e da aquisição -97,24% em 1984 mais elevados na BS/DMEI! CCEN, conforme a tabela 4.o
índice mais elevado na BS/DA/CCB positivo650% e negativo -80,43% ambos para o desempenho da catalogação em 1984 e 1987, de acordo com a tabela 3.
BS durante os últimos cinco anos estão apresentados con-forme as tabelas 1, 2, 3 e 4.
Na BS/CAC o crescimento percentual mais eleva-do positivo eleva-do desempenho eleva-do empréstimo 297,01 % em
1987 e negativo -90,10% da aquisição em 1985, conforme a tabela 2.
Calculamos a média do crescimento percentual do desempenho da BC e BS de 1983/87 e os valores resultan-tes da média das BS respectivamente, de acordo com a tabela 5.
Constatamos na BC o índice mais elevado positivo e negativo para a aquisição 273,42% e -80,41 % em 1986 e
1987 respectivamente, de acordo com a tabela 1.
Os resultados indicaram o crescimento percentual negativo -43,66% do desempenho da aquisição na BC e a média de -73,22% nas BS. E índices negativos para os demais serviços: circulação (consulta e empréstimo), catalogação e classificação na BC e positivos para a mé-dia das BS nos últimos cinco anos. O valor médio positivo de 12,52% refere-se à freqüência dos usuários na BS/CAC durante o mesmo período, conforme tabela 5.
150 Cad. Bibliotecon., Recife (11); 145-154 Dez. 1989 Para o desempenho da circulação 153,74%
(consul-ta 745,54% e empréstimo 81,29%) e para a aquisição
-76,59% na BS/DMEI/CCEN, constatamos os índices
- - - ---=====-=-- ----=--- - - ~
-"BBBI
r
aa ráJJO~H!.B/~86I - aadf1/JtI,~/S[J vp_ 1vnu~ 0'J.l~v1~H :~;uoa
OS8'EL
9T~'~ 660'~v80'E,
SSS'99
6E9'68
9TEoE
Il:qOJ,6v'8 -
SE
'6v-
v9
/
E9-
10 ' L67.
Ea /Zl-
SE/9~61" 9EZ
06v'TI
SST
vOT
66v'9
SS8'6
vSE'9T
6VZ
L86t
~9'
LV-
E9 '
I'~- ~E'9El'6S-
TI'L~-89'EE-
98
/
19-9SS',T
90E
98~LE9'T
90Eol1
Ev6'ZT
vL
9861
6V'EE~
9fT /ZS-
lfT
/
TL-
as', -
OS /lS
10/ 9E
01'06-TL6'E~
90v
69~SOo'v
ZTS'ST
LTs"i5L
V6't
S861
Sv
/
19-
ES/~LaS
/
88
Ea'6E-
La ' Lr
08 '
Sr
19'E(1
881"
L
vsa
lv6
TIT'
V
6E~'OT05E'111
096°1
v861
So/~V
aL'EE
OS'vE
~9'L906
/
19
vE'E9
LL' OVo
Sv9'8T
S6V
66v
,E8'9
Ev9 '61
SLfT'9~6E8
E861
97.1"El
OLE'
1LE
9LO'v
EE!"Z1
60~'9T96S
Z861
'lI~~aOllid 'dI~ 'fXJNJJ<lJ • JS3Hd1'3 V.IrrIlSNO:J r:IV.IDL %'11
%9 OThl!f1SD
%
'iJv:EJ:DI'ltlIS:
%V
01Óv:rn::m;)
O~IsIDj~ONV
_
(L8/E861)
ou~opunóas
ol~~nsn/~~a~ollqlq
~poquadwasap op
1~n~ua~~ad o~uawl~Sa~;)-
addn/;)V~/sg-
Z
v~agvJ,T~
3 - BS/DA/CCB/UFPE - Crescimento percentual 'do desempenho
da
biblioteca/usuário segundo ano (1983/87)
ClICULAÇÃO 6
%BIBLIOTECA 6%
uSUÁRIo
6%
ANO
AOJISIçfí>
FREQ'~CIA
t:.
% tIm'ALCONSULTA
ll1PREsr ,CATALCX;, CIASSIF,
1982
-40
7,012
5,519
1,493
20
29
2.763
1983
40
7,580
4,604
2,976
6
27
2.085
0,00
8,10
-16,58
99,33
- 70,00
-6,90
-24,54
1984
67
1.810
1.020
790
45
67
, , °67,50
-76,12
-77,85
-73,45
650,00 148,15
-,
35
2,407
1,521
886'
23
35
° , ,i I:
1985
~7,
76
32,98
49,12
12,15
- 48,89 -47,76
f
. I
1986
44
3.475
2.387
1.088
46
44
,,,
"
44,37
56,94
22,80
100,00
25,71
I
25,71
j
I
19
3,144
2,165
979
9
16
, ".
i
19.87
~ I
~6,82
-9,53
- 9,30
-la ,02
- 80,43 -63,64
,....1
Total
205
18.416
11.697
6,719
129
189
2.085
% (C C) ;;;; f"
::J
n
~. ~
:I:
~
III
::J
Q. III III '"
C (I)
"TI m
Jl c.
• c o
III
of)
~'
Fonte: Relatório Anual da BS/DA/écB/UFPE
-
1982/87
'BBBI
'3d
'8JJ~8~~B/ZBBI
-
3ddn/N3JJ/I3Wa/S8
vp 1vnuV
o1~g+v1ag:8+UOj
t'SO'91
t'S6'1
010'Z
t'Et"ZZ
l1B'Zl
St'Z' SE
6t'S'Bl
'[E?:l0.r.LB'6r
LS'6r
60'~6E'Z
6t"(
LS'ZOl
·
..
B61
a61
16E'S
ZI6'Z
Eoca
9t'6
La61
ZL'(9
6('1(
S('~ZLO'9l'
LZ'l(
1('99
·
.
'.
S6E
S6E
6L1'S
t't'B' Z
(zo'a
L9~9961
l'S'ZS-
91'Or
Sto'
O-
01'S(-
Z6't'1-
SZ
'Sto-·
..
SI?:
la
S91'V
Lv6'1
?:11"9
Bt'Z
S961
(9't'E-
(9't'E-
(0'61
lE'Zl'
9L'LZ
l'Z'L6-·
..
(Sv
(S~ ~al'~OOO'E
toBt'L
ESv
to961
Z9'lv
SS'l'TI
L6'lS
lO'
Zto
lL ' S6S
l'O/ZOl
lL ' E
t'SO'91
E69
E69
SIS'E
Borz
EZ9'S
SEv'91
(a61
9t:f" 11
EZE
9SV
SLv'Z
EOE
aLL'z
Lva'Sl
za61
VIJ~2 ·..rrSS\fD •fXTN.LV:J •JS3.}fdW3 ~'InSNOJ 'IV.LO.L %íJ
%íJ Olli'insn ' %íJ v;;):lli)I'IEIH %íJ ~'i'l1'reli) O~ISId)\l ON\!
(La/Ea61)
ou~opunoas
ol~~nsn/~~a~o11qlq~p
oquadurasap op
l~n~ua:::>~ad o~uaur""Ç~sa~J-
gdm/N:DJ/I8WC1!SH - t vr:rggV.LFonte: ReZatório AnuaZ da BC, BS/CAC, BS/DA/CCB e BS/DMEI/CCEN/UFPE,
1982/87.
Reoife, PE,
Z988.x
BIBLIOI'EX::A AOJI SIç1b
ClIO.JLAÇÃO 6%
BIBLIOI'ECA 6
%USUm06%
(1983/87)
6%
'1'O'I7UJ
CONSULTA
EMPREsr •CAT.ZUD3•
CLASSIF.FPEç{1eNCIA
EC
1982
4.407
255.807 207.829
47.978
4.974
2 •
.5
76
275.086
-1983/87
2.483
101.724
58.209
43.514
2.661
1.. 866
-43,66
-60,23 -71,99
-9,30
-46,50
-27,56
BS/CX
1982
596
16.209
12.133
4.076
371
370
13.126
X1983/87
663
17.928
13.311
4.617
420
443
14.770
11,24
10,61
9,71
13,27
13,21
19,73
12,52
BS/DA!CCB
1982
40
7.012
5.519
1.493
20
29
2.763
X1983/87
41
3.6a3
2.339
1.344
26
38
2,50
-47,4 8 -57,62
-9,98
30,00
31,03
~IM:I;tX::Er
1982
15.847
2.778
303
2.475
456
323
11.336
X1983/87
3.710
7.049
2.562
4.487
402
391
-~6,5~
153,~4 745,~4 ~1,29-11,84
2Ô'OS
XBS1983/87
- 3,2
10, 4
1, 3
9,89
0,12
2 , 78
TABELA 5 - BC, BS/C AC, BS/DA/CCB, BS/DMEI!CCEN/UFPE - Crescimento
percentual do desempenho da biblioteca/usuário segundo
ano (1983/87)
6. ANÁLISE DO DESEMPENHO DA BIBLlOTECA/ USUÁRIO
médiíil do crescimento percentual em relação às BS, de acordo com a tabela 5 a seguir apresentada.
Os índices do crescimento percentual do desempe-nho de 1983 em relação à 1987 decresceram na SC e nas BS quanto à aquisição, circulação e procedimento da bi-blioteca em geral.
i,,~I!
,
I151 Cad. Bibliotecon., Recife (11); 145-154 Dez. 1989
Na análise dos I'esultado~ obtidos, verificamos que o acompanhamento e a avaliação de desempenho dos ser-viços destas bibliotecas, são efetuados através de téc-nicas convencionais para levantamento dos dados, apre-sentados em relatórios anuais.
Este controle baseia-se nas estatísticas tradicionais de bi,blioteca. Portanto, não se faz um estudo sistemático de acompanhamento, avaliação e controle do desempenho da bibl!oteca/usuário. Esta tendência tradicional de avalia-ção, na qual os dados são analisados isoladamente, difi-culta a tomada de decisões.
Constatamos a não existência de dados referentes à freqüência dos usuários na BC de 1984/86, e na BS/ DA/CCB e na BS/DMEI/CCEN de 1984/87 (ver capítulo 5, tabelas 1, 3 e 4), o que confirma a análise acima e im-possibilita a identificação, análise e controle do cresci-mento percentual dos serviços das bibliotecas em relação aos seus usuários.
7. CONCLUSÃO
A avaliação do SB/UFPE forneceu indicadores para tomada de decisões referente ao desempenho biblioteca/ usuário.
A :freqüência dos usuários; na BG
e
BS1CAC de 1983em relação à 19B7 decresceu acompanhando o desempe-nho negativo dos serviços.
153
Cad. Bibliotecon .• Recife (11); 145-154 Dez. 1989
11 c."~ • • •_ _ .•c.~~ • • • • _ • • . . • • • • _• • • • _ • • • _ _ • •~• • • _ _ ' c _ _ • • •_ _• • • • _ _ • • . _ ._ _ • _ _ . . . .
b) Pesquisa sobre a relevância do acervo, caracterização dos recursos humanos e perfil do usuário afim de medir seus efeitos na biblioteca;
As propostas estão relacionadas a seguir:
A capacidade do sistema na transmissão do conhe-dmento indicando constantes percentuais decrescentes de 1983 cm relação à 1987 reflete a :ncvitável mudançg na política da biblioteca e uma '-edefinição de seus objetivos claramente para que este seja mais adequado às neces-sidades de informação dos usuários reais e potenciais.
"l
d) Acompanhamento controle e avaliação sistemática de desempenho do SB/UFPE, considerando os objetivos organizacionais e individuais da instituição/comunida-de universitária.
c) Implementação de uma mudança na polítlca da biblio-teca e em seguida a avaliação do resultado;
a) Uma seqüência de estudos de avaliação para a otimi-zação do próprio processo;
A proporção n§o eqüitativa dos índices de cresci-mento percentual do desempenho das bibliotecas/usuá-rios durante os últimos cinco anos representa a necessida-de necessida-de um planejamento mais eficaz.
O desempenho do sistema avaliado conforme os ré-sultados obtidos e a metodoloç;ia adotada, corresponde aos objetivos desse estudo. A quantificação do cresci-mento percentual do desempenho da aquisição. da circula-ção, da biblioteca e do usuário, apresentada no capítulo 5. e a identificação, análise e descrição dos fatores que influem nas medid2,s de desempenho, apresentadas no capítulo 6. comprova que o objetivo foi alcançado.
Cad. Bibliotecon.. Recife (11); 145-154 Dez. 1989
A aquisição, o crescimento percentual mais eleva-do foi da Be (1986) 273,42% e o mais baixo o da BS/ DMEI/CCEN (1984) -97,24%. Entretanto. a mesma BS acima indicada obteve o maior índice de circulação
102,04% principalmente na consulta 595,71 % em 1983.
enquanto que para o empréstimo o índice elevado foi o da BS/CAC (1987) 297.01 %. Quanto aos índices mais bai-xos para a circulação obtivemos o crescimento percentual
"-76.12% (consulta -77,85% e empréstimos -73,45% na BS/DA/CCB (1984).
Para o procedimento da biblioteca os percentuais de crescimento mais elevados foram para o desempenho BS/DA/CCB (1984) 650% para a catalogação e 148,15%
para a classificação. Enqu::lnto que, para a mesma BS
(1987), obtivemos -80,43% para a catalogação e
~63,64% para a classificação, significando os
percen-tuais mais baixos de desempenho destes serviços.
Constatamos na BS/CAC (1985) a freqüência do usuarlO 233,49% e -61,45% em 1984, representando os índi.ces mais elevados de crescimento e decréscimo dos percentuais de desempenho respectivamente.
O valor médio (1983/87) indicado para a XBS à
aquisição -73,22%, e para a XBC: à circulação -60,23%
principalmente para a consulta -71,99%. à catalogação
-46.50% e à classificação -27,56%, representaram os pontos mais fracos de desempenho do SB/UFPE nos últi-mos cinco anos.
8. REFER~NCIAS BIBLIOGRÁFICAS
1. BUCKLAND, M. K. Book availability and the Iibrary user. New Vork, Pergamon Press, 1975.
I
,IV
,I..
Cad. Bibliotecon .• Recife (11); 145-154 Dez. 1989
4. LAKATOS, E. M. & MARCONI, M. A. Fundamentos de metodologia científica. São Paulo, Atlas, 1985.
2. HAMBURG, M. et ai. Library planning and decision making systems. Cambridge, Mass., The M. I. T. Press, 1974.
5.
LANCASTER, F. W. The measurement and evaluation of Iibrary services. Washington, D. C" Informa-tion Resou rce Press, 1974.3. KANTOR, P. B. The library as an information utility in the university context: evolution and measure-ment of service. JASIS, Washington, 27(2): 100-12, Mar./Apr., 1976
6. ORR, R. H. Measuring the goodness of library servi-ces: a general framework for considering quanti-tative measures. Journal of Documentation, London, 29(3): 315-32, Sept., 1973.
7. SCHICK, F.
L.
La nonnalización internacional de las estadísticas de bibliotecas . Boletín de la UNES-CO para las bibliotecas, París, 25(1): 2-12, enero/ feb., 1971.8. SWANSON, R. W. Performing evaluation studie~ in information science. JASIS, Washington, 26(3): 140-56, May/June, 1975.