39 Jaiiojsl 01

SOFTWARE LIVRE PARA IMPLEMENTAO DE REPOSITRIOS DIGITAIS E
PROVEDORES DE SERVIOS: EXPERINCIA DA EMBRAPA INFORMTICA

AGROPECURIA
Isaque Vacari
(1)
, Marcos Cezar Visoli
(2)
, Fernando Csar Lima Leite
(3)
, Sabrina de de Castro Leite e!aut "ontes
(#)
,
Massa$u%i Franco &%a'ac(i
())
, Victor "aulo Marques Sim*o
(+)
, Lu,s -duardo .onzales
(/)
e Maria .oretti
.ur!el "ra0edes
(1)
(1)
-mbra2a In3orm4tica 5!ro2ecu4ria6 -mail7 isaque8cn2tia6embra2a6br,
(2)
-mbra2a In3orm4tica 5!ro2ecu4ria6 -mail7
9isoli8cn2tia6embra2a6br,
(3)
:ni9ersidade de ;ras,lia6 -mail7 3ernandod3c8!mail6com,
(#)
-mbra2a In3orma<*o
=ecnol>!ica6 -mail7 sabrina62ontes8sct6embra2a6br,
())
-mbra2a In3orma<*o =ecnol>!ica6 -mail7
massa$u%i6o%a'ac(i8sct6embra2a6br,
(+)
-mbra2a Meio 5mbiente6 -mail7 9ictor8cn2ma6embra2a6br,
(/)
-mbra2a
In3orm4tica 5!ro2ecu4ria6 -mail7 eduardo8cn2tia6embra2a6br,
(1)
-mbra2a In3orm4tica 5!ro2ecu4ria6 -mail7
!oretti8cn2tia6embra2a6br
RESUMO
& trabal(o a2resenta a e02eri?ncia tcnica da -mbra2a In3orm4tica 5!ro2ecu4ria
(C@"=I5), institui<*o de 2esquisa em tecnolo!ia da in3orma<*o 2ara a!ricultura, no conte0to de
software li9re 2ara im2lementa<*o de re2osit>rios di!itais e 2ro9edores de ser9i<os6 Mais
es2eci3icamente, ser*o relatados os estudos e as solu<Aes de software li9re escol(idas 2ara 9iabilizar
a inser<*o da -mbra2a no modelo alternati9o de comunica<*o cient,3ica denominado 5cesso 5berto
(Open Access Initiative) B1C, que 9isa 2romo9er o acesso li9re e irrestrito D 2rodu<*o cient,3ica
desen9ol9ida 2elos 2esquisadores e institui<Aes, e que tem na im2lanta<*o de re2osit>rios di!itais,
seEam eles institucionais ou tem4ticos, uma de suas estrat!ias 2rinci2ais6
39JAIIO - JSL 2010 - ISSN: 1850-2857 - Pgina 2345
PALAVRAS-CHAVES
5cesso abertoF So3t'are li9reF Gecu2era<*o de in3orma<*oF Inde0a<*o te0tualF S2aceF H&5IF SolrF
-m2resa ;rasileira de "esquisa 5!ro2ecu4riaF -mbra2aF Comunica<*o cient,3icaF .est*o da
in3orma<*o cient,3icaF Ge2osit>rio institucionalF Ge2osit>rio di!italF "ro9edor de ser9i<os6
1 INTRODUO
@o conte0to de or!aniza<*o, tratamento e dissemina<*o da in3orma<*o na Internet, o
Sistema -mbra2a de ;ibliotecas (S-;), em coo2era<*o com o 2roEeto 5cesso 5berto D In3orma<*o
Cient,3ica na -mbra2a (liderado 2ela -mbra2a In3orma<*o =ecnol>!ica) e a -mbra2a In3orm4tica
5!ro2ecu4ria, de3iniram como obEeti9o a constru<*o dos re2osit>rios di!itais7 In3oteca (In3orma<*o
=ecnol>!ica em 5!ricultura) e 5lice (5cesso Li9re D In3orma<*o Cient,3ica da -mbra2a) e do
2ro9edor de ser9i<os7 Sabiia (Sistema 5berto e Inte!rado de In3orma<*o em 5!ricultura), com o
2ro2>sito de 3a9orecer a trans3er?ncia de tecnolo!ias 2roduzidas 2ela -mbra2a, o aumento da
9isibilidade da 2rodu<*o cient,3ica dos 2esquisadores, e da 2r>2ria institui<*o, 2or meio da
ma0imiza<*o do acesso D sua 2r>2ria 2rodu<*o intelectual, e 2or consequ?ncia, a am2lia<*o dos
resultados de 2esquisa realizados na -mbra2a, como tambm, acessar 3ontes de in3orma<Aes
e0ternas de interesse da -mbra2a6 & 2resente trabal(o relata a constru<*o dos re2osit>rios di!itais
In3oteca e 5lice com o software li9re S2ace B2C e o desen9ol9imento do 2ro9edor de ser9i<os
Sabiia com os softwares li9res H&5I (Java Open Archives Initiative) B3C e Solr Enterprise Search
Server B#C6 ConcluiIse com relatos dos resultados obtidos com as 3erramentas de software li9re
escol(idas, bem como, as 2rinci2ais lin(as que se ir*o 2rosse!uir no desen9ol9imento dos
re2osit>rios di!itais e do 2ro9edor de ser9i<os6
2 SOFTWARE LIVRE PARA CRIAO DE REPOSITRIOS DIGITAIS: DSPACE
52>s a decis*o da cria<*o de re2osit>rios di!itais 2ara comunicar, di9ul!ar e socializar o
con(ecimento 2roduzido 2ela Jrea de "esquisa e esen9ol9imento ("K) da -mbra2a, o C@"=I5
realizou um le9antamento de alternati9as li9res ent*o e0istentes 2ara constru<*o de re2osit>rios
di!itais6 Como resultado do le9antamento 3oi escol(ido o software li9re S2ace 2ara constru<*o da
2rimeira 9ers*o de re2osit>rio di!ital 2ara a -mbra2a6 5 escol(a da 3erramenta S2ace deuIse 2ela
maior e02eri?ncia da -mbra2a In3orm4tica em atuar com sistemas desen9ol9idos com a lin!ua!em
de 2ro!rama<*o Ha9a B)C, o sistema !erenciador de banco de dados "ost!reSLL B+C e a 3erramenta
de inde0a<*o te0tual Lucene B/C, bem como o uso do 2adr*o de metadados ublin Core B1C 2ara
descre9er os recursos di!itais, o 2rocesso descentralizado de submiss*o de no9os documentos, a
3acilidade de customiza<*o da inter3ace, a ca2acidade de armazenamento de 94rios 3ormatos di!itais
(te0to, 2d3, som, 9,deo etc) e e0em2los de re2osit>rios di!itais im2lementados com a 3erramenta
S2ace no ;rasil, como7 ;iblioteca i!ital do Senado Federal, Ge2osit>rio i!ital da :ni9ersidade
do Gio .rande do Sul, Instituto 5ntMnio Carlos Hobim etc6
& S2ace uma alternati9a tecnol>!ica !ratuita criada 2elo Massachusetts Institute of
Technology (MI=) BNC em 2arceria com a Hewlett Packard (O" Labs) B1PC, 2ara constru<*o de
re2osit>rios di!itais dedicados ao !erenciamento da 2rodu<*o intelectual de uma institui<*o
contem2lando a reuni*o, armazenamento, or!aniza<*o, 2reser9a<*o, recu2era<*o e, sobretudo, a
am2la dissemina<*o da in3orma<*o cient,3ica6 & sistema 3oi dis2onibilizado !ratuitamente em
@o9embro de 2PP2 sob a licen<a S! open source license B11C de acordo com o 2adr*o OASIS
reference "odel B12C e tem sido lar!amente utilizado no MI=, em di9ersas uni9ersidades dos
-stados :nidos, -uro2a e institui<Aes da 5mrica do Sul6
3 IMPLEMENTAO DOS REPOSITRIOS DIGITAIS INFOTECA E ALICE
5 im2lementa<*o dos re2osit>rios di!itais In3oteca e 5lice com o S2ace iniciouIse em
5bril de 2PP16 & 2lano de im2lanta<*o constituiIse em ) eta2as 2rinci2ais7
31 I!"#$%$&'() *(!+,-./$&'() #/$0.&'( 1 *."#(2,3$&'(
ecidiuIse usar a 9ers*o 16)61 do S2ace com o modelo de inter3ace HS":I 2ara constru<*o
dos re2osit>rios di!itais6 & 2rocesso de instala<*o e con3i!ura<*o do sistema S2ace se!uiu as
instru<Aes do manual de Instala<*o e Con3i!ura<*o do S2ace B13C, nessa eta2a de3iniuIse os
requisitos de hardware (ca2acidade de armazenamento em disco, mem>ria, 2rocessador etc) e
software (sistema o2eracional, ser9idor de a2lica<Aes we#, sistema !erenciador de banco de dados,
sistema de #ackup etc) necess4rios 2ara o 3uncionamento do sistema6 52>s a instala<*o e
con3i!ura<*o do sistema S2ace, e realizada uma an4lise mais detal(ada de todas as suas
3uncionalidades 2or um !ru2o restrito de bibliotec4rios, iniciaramIse as tare3as de e9olu<*o do
software, entre as mel(orias destacamIse7 a tradu<*o e0istente 2ara o 2ortu!u?s do ;rasil, o aEuste e
a 2ersonaliza<*o da inter3ace !r43ica, a altera<*o do esquema 2adr*o de metadados ublin Core, a
im2lementa<*o de thu"#nails, a im2lementa<*o da busca no te0to com2leto, a im2lementa<*o e a
tradu<*o do add$on de estat,stica da :ni9ersidade do Min(o B1#C 2ara o 2ortu!u?s do ;rasil, a
im2lementa<*o da na9e!a<*o no 3ormato de 4r9ore (i2erb>lica B1)C e a corre<*o de #ugs e0istentes
na 9ers*o 16)61 do S2ace6 -ssa 3ase ocorreu entre 5bril de 2PP1 e 5!osto de 2PPN6
32 C$//1-$21!#( $.#(24#,*( 01 0(*.21!#(" 0,-,#$,"
"ara 9iabilizar a dis2onibiliza<*o da 2rodu<*o tcnicoIcient,3ica di!ital da -mbra2a em um
Qnico ambiente institucional com o S2ace, a -mbra2a In3orm4tica, criou um software es2ec,3ico
(baseado no m>dulo de im2orta<*o e e02orta<*o de documentos do S2ace) 2ara coletar e
armazenar no S2ace toda literatura es2al(ada nos s,tios we# de suas #3 unidades de 2esquisa6 -ssa
a<*o 2ermitiu o res!ate e o carre!amento autom4tico de a2ro0imadamente 116)PP 2ublica<Aes no
S2ace6 -ssa 3ase ocorreu de Setembro de 2PP1 D &utubro de 2PP16
33 A51/#./$ $( 675%,*( 18#1/!(
5 ati9idade de carre!amento autom4tico de documentos di!itais 3a9oreceu o lan<amento da
2rimeira 9ers*o do re2osit>rio di!ital6 -m outubro de 2PP1, com o nome de Ge2osit>rio i!ital
-mbra2a, a em2resa dis2onibilizou todos os trabal(os tcnicoIcient,3icos, em 3ormato di!ital,
!erados 2ela 4rea de "esquisa, esen9ol9imento K Ino9a<*o na Internet, abran!endo li9ros,
3ol(etos, ca2,tulos de li9ros, trabal(os a2resentados em e9entos, alm dos arti!os das re9istas
"esquisa 5!ro2ecu4ria ;rasileira e Cadernos de Ci?ncia K =ecnolo!ia6 e imediato, o Ge2osit>rio
i!ital -mbra2a trou0e os se!uintes bene3,cios7
5rmazenamento, 2reser9a<*o e dis2onibiliza<*o da 2rodu<*o intelectual da -mbra2a em um
Qnico local, dis2ensando a manuten<*o de ser9idores e sistemas locais di3erentes em cada
unidade da -mbra2aF
Maior !arantia de acesso e dis2onibilidade do sistema e dos recursos di!itais 2ara a
sociedade, uma 9ez que a in3raestrutura de acesso D Internet da -mbra2a In3orm4tica temIse
mostrado mais e3iciente em rela<*o Ds demais unidades da em2resa6
39 C(!"#,#.,&'( 01 U!,0$01" 6,%(#( 6$/$ $%,21!#$&'( 0( R16(",#:/,( D,-,#$% E25/$6$
5 quarta eta2a do 2rocesso, constituiIse da de3ini<*o de unidades de 2esquisa 2iloto, com o
obEeti9o de alimentar o Ge2osit>rio i!ital -mbra2a com no9os documentos e 9eri3icar sua
inte!ra<*o com o sistema de administra<*o de bibliotecas e0istente, denominado 5in3o B1+C6 Com
base em critrios de localiza<*o !eo!r43ica e ca2acidade de acesso D Internet, rele9Rncia e
quantidade de documentos tcnicoIcient,3icos 2roduzidos e dis2onibilidade imediata em atuar como
unidade 2iloto 3oram selecionadas e con9idadas quatro centros de 2esquisa (-mbra2a Florestas,
-mbra2a In3orm4tica, -mbra2a Meio 5mbiente e -mbra2a Semi4rido) e duas unidades centrais
(-mbra2a In3orma<*o =ecnol>!ica e -mbra2a Sede) 2ara 2artici2ar do 2roEeto 2iloto6
"ara cada unidade da -mbra2a criouIse uma comunidade no Ge2osit>rio i!ital -mbra2a, e
cada comunidade recebeu uma cole<*o denominada Mem>ria =cnica, com e0ce<*o da -mbra2a
In3orma<*o =ecnol>!ica que de3iniu suas cole<Aes6 @essa eta2a de3iniuIse as 2ol,ticas de
alimenta<*o (alimenta<*o realizada 2elo bibliotec4rio, ou seEa, os bibliotec4rios assumem o 2a2el de
mediadores do de2>sito de documentos no re2osit>rio di!ital Eunto aos autores) e acesso ao
Ge2osit>rio i!ital -mbra2a, o workflow e os atributos m,nimos (t,tulo, autor, 2ala9raIc(a9e e ano
de 2ublica<*o) 2ara submiss*o de documentos6
52esar de boa 2arte dos documentos terem sido carre!ados em lote, como se 2ode constatar
na Fi!ura 1, notaIse o aumento 3requente de no9os documentos submetidos diretamente no
re2osit>rio di!ital6
F,-./$ 1: D(*.21!#(" 6(/ #,6( 01 ".52,""'(
3; S1-21!#$&'( 0( R16(",#:/,( D,-,#$% E25/$6$ 6$/$ 675%,*(" $6/(6/,$0(") */,$&'( 0("
/16(",#:/,(" 0,-,#$," I!+(#1*$ 1 A%,*1
5 im2lementa<*o do Ge2osit>rio i!ital -mbra2a res2ondeu satis3atoriamente ao anseio
institucional de or!anizar toda 2rodu<*o tcnicoIcient,3ica da em2resa em Qnico ambiente,
dis2ensando a dis2onibiliza<*o dos arqui9os eletrMnicos nas 24!inas das unidades de 2esquisa6 @o
entanto, 9eri3icouIse que alm da in3orma<*o cient,3ica, que 2roduzida 2or 2esquisadores e
destinada D outros 2esquisadores, a -mbra2a 2roduz intensamente in3orma<*o tecnol>!ica, que
2roduzida 2or 2esquisadores e destinada ao di9ersos se!mentos da 2rodu<*o rural com estrutura
di3erenciada e lin!ua!em a2ro2riada (n*o cient,3ica) 2ara trans3er?ncia de tecnolo!ia6
5 2artir dessa constata<*o decidiuIse se!mentar o Ge2osit>rio i!ital -mbra2a em dois
no9os re2osit>rios di!itais 2ara 2Qblicos distintos6 5 In3oteca (In3orma<*o =ecnol>!ica em
5!ricultura), destinada a 2rodutores rurais, tcnicos a!r,colas e 2ro3issionais da 4rea, abran!endo
in3orma<Aes sobre tecnolo!ias 2roduzidas a 2artir da 2esquisa cient,3ica realizada na institui<*o
como 9,deos, 4udios, cartil(as, folders e di9ersas 2ublica<Aes das lin(as editoriais de trans3er?ncia
de tecnolo!ia6 - o re2osit>rio institucional 5lice (5cesso Li9re D In3orma<*o Cient,3ica da
-mbra2a), em 3ase de constru<*o, destinado a comunidade e a comunica<*o cient,3ica, contendo
arti!os em 2eri>dico, 2ublica<Aes em e9entos, teses e disserta<Aes, ca2,tulos de li9ros e li9ros6
2008 2009 2010
0
2000
4000
6000
8000
10000
12000
14000
3
556 642
11739
4780
0
Submisso direta
no sistema
Carregamento em
lote
Ano
T
o
t
a
l

d
e

d
o
c
u
m
e
n
t
o
s
5 In3oteca est4 dis2on,9el no endere<o (tt27SS'''6embra2a6brSin3oteca desde setembro de
2PPN, enquanto o re2osit>rio institucional 5lice encontraIse em 3ase de de3ini<*o e im2lementa<*o
do designer !r43ico (lo!omarca, cores e inter3ace) e sua abertura 2ara o 2Qblico e0terno est4
2re9ista 2ara o se!undo semestre de 2P1P6
9 SOFTWARE LIVRE PARA CRIAO DE PROVEDORES DE SERVIOS
& modelo de acesso aberto da -mbra2a B1/C lida tanto com a in3orma<*o que resulta de suas
ati9idades de "K quanto com as necessidades de in3orma<*o de seus 2esquisadores 2ara e0ecutar
tais ati9idades6 &u seEa, alm de 2ermitir a !est*o e o aumento da 9isibilidade de sua in3orma<*o
cient,3ica 2or meio do re2osit>rio institucional 5lice, o modelo aberto da -mbra2a sistematiza
tambm o acesso D in3orma<*o cient,3ica e0terna 2ro9eniente de 4reas de interesse da institui<*o6
Com 9istas a 2ermitir o acesso r42ido e 3acilitado aos di3erentes 2ro9edores de dados de
acesso aberto e0ternos, est4 em andamento a constru<*o de um 2ro9edor de ser9i<os com2at,9el
com o 2rotocolo de comunica<*o &5II"MO (Protocol for Metadata Harvesting) B11C6 & 2rotocolo
&5II"MO 3oi criado com o obEeti9o de desen9ol9er e 2romo9er 2adrAes de intero2erabilidade entre
re2osit>rios di!itais com 9istas D 3acilitar a recu2era<*o e a dissemina<*o e3iciente de conteQdos
2roduzidos 2elas comunidades cient,3icas6 & 2ro9edor de ser9i<os sistematiza o 3lu0o e canaliza
toda a 2rodu<*o cient,3ica em 4reas de interesse institucional dis2on,9eis em ambiente de acesso
aberto6 :m e0ame 2reliminar identi3icou um total de 2+1 2ro9edores de dados em 4reas de interesse
da -mbra2a6 entre eles, )2 2eri>dicos nacionais, /# 2eri>dicos estran!eiros, 2/ re2osit>rios
institucionais e tem4ticos, # re2osit>rios de con3er?ncias, e 1P# 2eri>dicos nacionais e estran!eiros
dis2on,9eis no Sci-L&6 5tra9s de uma Qnica inter3ace de busca, es2eraIse que os usu4rios internos
e e0ternos realizem 2esquisas em todos os 2eri>dicos e re2osit>rios institucionais e tem4ticos,
2re9iamente selecionados, e coletados de acordo com as 2ol,ticas estabelecidas6 5 de3ini<*o e a
escol(a das solu<Aes de software li9re 2ara im2lementa<*o do 2ro9edor de ser9i<os 3oram
resultados de uma an4lise que contem2lou as se!uintes eta2as7
91 I01!#,+,*$&'( 01 softwares %,</1" 18,"#1!#1" 6$/$ ,26%121!#$&'( 0( 2:0.%( 01 *(%1#$ 01
0$0("
@essa eta2a 3oram identi3icadas seis alternati9as li9res7
"T" Metadata Oar9ester ((tt27SS2%26s3u6ca)F
M& &5I ((tt27SS'''6modoai6or!)F
&5I Oar9ester ((tt27SS'ebser9ices6itcs6umic(6eduSmedia'i%iSdl0s1#Sinde062(2S&5IUOar9esterS)F
&5I 5rc ((tt27SSoaiarc6source3or!e6net)F
H&5I Oar9ester ((tt27SS'''6dlese6or!SddsSser9icesSEoaiUso3t'are6Es2)F
&5I Oa9ester &CLC ((tt27SS'''6oclc6or!Sresearc(Sso3t'areSoaiS(ar9ester26(tm)6
5 identi3ica<*o de softwares li9res e0istentes 2ara im2lementa<*o do m>dulo de coleta de
dados ocorreu 2or meio de 2esquisas no s,tio we# SourceFor!e B1NC6 -m se!uida, realizouIse a
instala<*o e con3i!ura<*o de cada uma das 3erramentas identi3icadas6 -ssa eta2a ocorreu entre os
meses de maio e Eun(o de 2PPN6
92 A!4%,"1 6/1%,2,!$/ 0(" "(+#=$/1 %,</1" "1%1*,(!$0("
@essa eta2a 3oram analisadas as seis solu<Aes de software li9re identi3icadas na eta2a
anterior mediante os critrios7 i) 3requ?ncia de atualiza<*o e dis2onibiliza<*o de no9as 9ersAesF ii)
mecanismo de coleta de dados (inter3ace we# ou lin(a de comando)F iii) inter3ace we# 2ara
administra<*o de 2ro9edores dados e i9) documenta<*o e su2orte a2ro2riado 2ara instala<*o e
con3i!ura<*o do software6 ;aseado nos critrios acima, 3oram selecionados tr?s softwares 2ara
testes mais so3isticados, a2resentados na tabela 16
C$/$*#1/>"#,*$" OAI A/* ?OAI H$/<1"#1/ P@P AP.5%,*B @!(=%10-1
P/(C1*#D
S>#,( web (tt27SSoaiarc6source3or!e6net (tt27SS'''6dlese6or!SddsSser
9icesSEoaiUso3t'are6Es2
(tt27SS2%26s3u6ca
Download (tt27SSsource3or!e6netS2roEect
sSoaiarc
(tt27SSsource3or!e6netS2roEect
Ss(o'3iles62(2V
!rou2UidW1N132)K2ac%a!eU
idW2+N11N
(tt27SS2%26s3u6caS(ar9esterUd
o'nload
D12(!"#/$&'( (tt27SS'''6rcaa262t (tt27SS'''6dlese6or!Slibrar$S
inde06Es2
(tt27SS(ar9esters6s3u6caSdemo
Sinde062(2Sbro'se
P$#/(*,!$0(/ ASponsorD &ld ominion :ni9ersit$6 i!ital Librar$ 3or -art(
S$stem -ducation (L-S-)6
:ni9ersit$ o3 ;ritis(
Columbia6
L,*1!&$ .@:S."L6 .@:6 .@:6
E%#,2$ <1/"'( ALast
releaseD
16P (1)I&utI2PP+) 36P61# (P2IFe9I2PPN) 2636P (11IFe9I2PPN)
S.6(/#1 AF1$#./1") B.-")
F:/.2 1#*D
B.-":
(tt27SSsource3or!e6netStrac%er
SV
atidW#N/)))K!rou2UidW+1)
32K3uncWbro'se
D(*.21!#$&'(:
(tt27SS'''6dlese6or!SoaiSdoc
sS(ar9ester6Es2
B.-":
(tt27SS2%26s3u6caSbu!zilla
F:/.2:
(tt27SS2%26s3u6caSsu22ortS3oru
mSinde062(2
L,!-.$-12 01
P/(-/$2$&'(
Ha9a6 Ha9a6 "O"6
F(/2$#( 01
$/2$31!$21!#( 0("
0$0(" *(%1#$0("
;anco de dados M$SLL6 5rqui9os XML, um arqui9o
XML 2ara cada re!istro6
;anco de dados "ost!reSLL6
S,"#12$ 01 *(%1#$ Lin(a de comando eSou
inter3ace we# HS"6
Lin(a de comando eSou
inter3ace we# HS"6
Lin(a de comando eSou
Inter3ace we# "O"6
S,"#12$ 01 5."*$ Inter3ace we# HS"6 Inter3ace we# HS"6 Inter3ace we# "O"6
T$51%$ 1: S(+#=$/1" L,</1" 6$/$ *(%1#$ 01 0$0(" OAI-PMH
93 I!"#$%$&'( 1 C(!+,-./$&'( 0(" "(+#=$/1" "1%1*,(!$0("
& 2rocesso de instala<*o e con3i!ura<*o de cada uma das 3erramentas selecionadas, na eta2a
anterior, se!uiu o manual de instala<*o e con3i!ura<*o dis2onibilizado Eunto com o software6
99 T1"#1" 01 61/+(/2$!*1 01 *(%1#$ 01 0$0("
5 eta2a de testes de 2er3ormance de coleta de dados subsidiou a escol(a do software li9re
mais adequado 2ara a constru<*o do 2ro9edor de ser9i<os6 "ara constru<*o dos testes de
2er3ormance, a equi2e do "roEeto 5cesso 5berto D In3orma<*o Cient,3ica na -mbra2a selecionou
dez 2ro9edores de dados (com a2ro0imadamente 1+6PPP re!istros) de interesse da -mbra2a, com o
obEeti9o de simular um ambiente robusto de coleta de dados6 5lm dos testes de 2er3ormance,
3oram in9esti!ados, de 3orma mais a2ro3undada, os recursos o3erecidos 2or cada um dos softwares%
5 tabela 2 ilustra o resultado dos testes de 2er3ormance realizados6
OAI A/* ?OAI H$/<1"#1/ P@P H$/<1"#1/
C(%1#$ 01 0$0("
Inter3ace de administra<*o
2ara coleta de dados
Sim, mas a coleta de dados
realizada 2or lin(a de
comando 2or meio do script
F$/<1"#1/"F6
Sim6 Sim, com a 2ossibilidade de
e3etuar a coleta de dados 2or
meio da inter3ace we# ou
atra9s de lin(a de comando
utilizando o script
F$/<1"#1/6F66
Formato de metadados
su2ortados 2ara coleta
Somente oaiUdc6 & software su2orta o
3ormato de metadados
de3inido 2elo 2ro9edor de
dados, !eralmente oaiUdc6
& software su2orta o
3ormato de metadados
de3inido 2elo 2ro9edor de
dados, !eralmente oaiUdc6
Metadados coletados =odos, mas somente os
atributos 2rinci2ais s*o
a2resentados7 title, creator,
su#&ect etc6
=odos6 =odos6
Formato de armazenamento
dos dados coletados
;anco de dados relacional
M$SLL6
5rqui9os no 3ormato XML6 ;anco de dados relacional
M$SLL ou "ost!reSLL6
Ge!istro de log dos dados
coletados
@a inter3ace de
administra<*o de coleta de
dados a2resentado a
in3orma<*o 'ast Harvester
Ti"e, e durante a e0ecu<*o
do script F$/<1"#1/"F s*o
a2resentadas mensa!ens de
e0ecu<*o do 2ro!rama6
5lm de a2resentar o log de
coleta de dados mais recente
2oss,9el consultar os logs
de coleta de dados
anteriores6
Somente durante a e0ecu<*o
do script F$/<1"#1/6F66
Coleta de dados 2or
comunidadeScole<*o
Sim6 Sim6 Sim6
Coleta de dados de dois ou
mais re2osit>rios di!itais
simultaneamente
@*o6 Sim, 2or meio do recurso
Scheduler 2resente na
inter3ace de administra<*o
Sim, atra9s da e0ecu<*o
em 2aralelo do script
F$/<1"#1/6F66
OAI A/* ?OAI H$/<1"#1/ P@P H$/<1"#1/
de coleta de dados6
Gecoleta de dados de
re2osit>rios di!itais
coletados anteriormente
Sim, 2or lin(a de comando
2or meio do script
F$/<1"#1/"F6
Sim, 2or meio da inter3ace
de administra<*o de coleta
de dados6
Sim6
Coleta de dados 2or lin(a de
comando
Sim, 2or meio do script
F$/<1"#1/"F6
F$/<1"#1/6
Sim, atra9s do script
F$/<1"#1/6F66
;loqueio de acesso ao
m>dulo de coleta de dados
Sim, 2or meio do arqui9o de
administra<*o de usu4rios
do ser9idor we# 52ac(e
=omcat6
Sim, 2or meio do arqui9o de
administra<*o de usu4rios
do ser9idor we# 52ac(e
=omcat6
Sim, 2or meio de usu4rio e
sen(a de3inidos durante a
instala<*o da 3erramenta6
5ti9a<*o e desati9a<*o de
re2osit>rios di!itais
Sim6 Sim, 2odeIse o2tar 2ela
e0clus*o de3initi9a, ou
ent*o, 2ela desati9a<*o do
re2osit>rio di!ital6
Sim, mas o re2osit>rio
di!ital desati9ado e0clu,do
de3initi9amente do sistema
de coleta de dados6
R1*./"(" 01 5."*$
Mecanismo de inde0a<*o e
busca
M$SLL F:LL =-X=6 Lucene6 Yend Searc( Lucene6
Inter3ace we# 2ara busca Sim, 2or meio de uma
inter3ace we# HS"6
Sim, 2or meio de uma
inter3ace we# HS"6
Sim, 2or meio de uma
inter3ace "O"6
;usca 2or re2osit>rio
di!italScole<*o
Sim6 @*o6 Sim6
;usca 2or cam2o Sim, somente 2elos cam2os
autor, t,tulo e a#stract6
@*o6 Sim6
Su2orte 2ara busca com
o2eradores booleanos
Sim, su2orta os se!uintes
o2eradores booleanos7
5@, &G, Z e I6
5@, &G, Z e I6
5@, &G, Z e I6
5!ru2amento do resultado
da busca (facets)
Sim, o3erece a!ru2amento
do resultado da busca 2or
re2osit>rio coletado, ano e
assunto6
@*o6 @*o6
&2<Aes de ordena<*o do
resultado da busca
Sim, o3erece as o2<Aes de
ordena<*o do resultado da
busca 2or7 rele9Rncia, data e
assunto6
@*o6 @*o6
&2<Aes de 3iltro 2ara o
resultado da busca
Sim, o3erece as se!uintes
o2<Aes 2ara 3iltro de busca7
re2osit>rio, cole<*o, assunto
e data6
@*o6 Sim6
@a9e!a<*o (#rowse) 2or
re2osit>rio di!ital
Sim6 @*o6 Sim6
&utras 3ormas de na9e!a<*o @*o6 @*o6 @*o6
Visualiza<*o do re!istro
ori!inal
Sim6 Sim6 Sim6
Highlight sobre o resultado
da busca
Sim6 Sim6 @*o6
Geinde0a<*o da base de
dados 2ara busca
6$/"1"F6
de dados6
de dados6
R1*./"(" $0,*,(!$,"
-stat,stica de acesso 2or
documento (consulta e
@*o6 @*o6 @*o6
OAI A/* ?OAI H$/<1"#1/ P@P H$/<1"#1/
download)
=radu<*o 2ara o "ortu!u?s
do ;rasil
@*o, mas 2oss,9el realizar
a tradu<*o da inter3ace 2ara
o "ortu!u?s do ;rasil
alterando o arqui9o
A/*R1"(./*1B.!0%16
"ossui tradu<*o 2ara os
idiomas7 In!l?s, -s2an(ol e
Franc?s6
alterando o c>di!o 3onte das
inter3aces de busca6
alterando o arqui9o
%(*$%182%6 "ossui tradu<*o
2ara o In!l?s6
B.-"
@*o identi3icado6 @*o identi3icado6 Coleta 2arcial de re!istros
em determinados
re2osit>rios6 -rro7 =(e
metadata inde0 could not be
u2date6 =(e 3ollo'in!
error(s) occurred6
T1"#1 01 61/+(/2$!*1 01
*(%1#$ 01 0$0(" A18126%("D
5nimal "($siolo!$ and
Li9estoc% S$stems 5rc(i9e
A39G /1-,"#/("D
11SP+S2PPN [ 3#P re!istros
coletados em 3Ns [ Mdia7
H)I1 re!istros coletados 2or
se!undo6
11SP+S2PPN [ 3#P re!istros
coletados em #+s [ Mdia7
I)3J re!istros coletados 2or
se!undo6
1/SP+S2PPN [ 3#P re!istros
coletados em 223s [
Mdia71);2 re!istros
coletados 2or se!undo6
I;SS Ge2ositor$ AIHI
/1-,"#/("D
11SP+S2PPN [ /1/ re!istros
coletados em 12Ps [ Mdia7
K);; re!istros coletados 2or
se!undo6
11SP+S2PPN [ /1/ re!istros
coletados em )Ns [ Mdia7
13)33 re!istros coletados
2or se!undo6
1/SP+S2PPN [ 1 re!istro
coletado em /s, e0ibindo
erro \In9alid C(aracter]
@ature "recedin!s A11II
/1-,"#/("D
11SP+S2PPN [ 1621P re!istros
coletados em 1)s [ Mdia7
HG)KK re!istros coletados
2or se!undo6
11SP+S2PPN [ 162PN
re!istros coletados em 1/s [
Mdia7 I1)11 re!istros
1+SP+S2PPN [ 162P# re!istros
coletados em )NNs [ Mdia7
2)G1 re!istros coletados 2or
se!undo6
@^ISGL "ublications
A2K3G /1-,"#/("D
11SP+S2PPN [ 26+#P re!istros
coletados em +PPs [ Mdia7
9)9 re!istros coletados 2or
se!undo6
11SP+S2PPN [ 26+#P
re!istros coletados em )11s
[ Mdia7 9);9 re!istros
1/SP+S2PPN [ 1632P re!istros
coletados em 162N/ s [
Mdia7 1)G2 re!istros
&r!anic -2rints AJ1IG
/1-,"#/("D
11SP+S2PPN [ N6221 re!istros
coletados em 16#+1s [
Mdia7 K)31 re!istros
11SP+S2PPN [ N6221
re!istros coletados em
161P+s [ Mdia7 ;)1G
re!istros coletados 2or
se!undo6
1/SP+S2PPN [ N62P1 re!istros
coletados em +6/N+s [
Mdia71)3; re!istros
S-G"-@= Ima!e K Video
atabase A11IJ /1-,"#/("D
11SP+S2PPN [ 161/N re!istros
coletados em 1+s [ Mdia7
13)IG re!istros coletados
2or se!undo6
11SP+S2PPN [ 161/N
re!istros coletados em 113s
[ Mdia7 1G)93 re!istros
1+SP+S2PPN I 161/N re!istros
coletados em 2N#s [ Mdia7
9)G1 re!istros coletados 2or
se!undo6
:@I=5: I e2artamento de
Ci?ncias 5!r4rias A1G3
/1-,"#/("D
11SP+S2PPN [ 1P3 re!istros
coletados em 1)s [ Mdia7
K)HK re!istros coletados 2or
se!undo6
coletados em 2Ps [ Mdia7
;)1; re!istros coletados 2or
se!undo6
coletados em 13#s [ Mdia7
G)II re!istros coletados 2or
se!undo6
T$51%$ 2: R1".%#$0( 0(" #1"#1" 01 61/+(/2$!*1 01 *(%1#$ 01 0$0("
9; A<$%,$&'( 0(" softwares %,</1" 01 *(%1#$ 01 0$0("
5s tr?s solu<Aes li9res analisadas e testadas a2resentaram recursos so3isticados de coleta de
dados, como7 coleta de dados 2or inter3ace we# ou lin(a de comando, a!endamento de coleta de
dados, armazenamento dos dados coletados em banco de dados relacionais ou arqui9os etc6 @o
entanto, recursos mais so3isticados de busca 2resentes na inter3ace, como7 busca 2or cam2o,
a!ru2amento do resultado da busca, ordena<*o do resultado da busca, 3iltro de busca, cesta de itens,
tradu<*o 2ara o 2ortu!u?s do ;rasil 2recisa9am ser mel(orados ou im2lementados6
e9ido a maior e02eri?ncia da -mbra2a In3orm4tica em atuar com sistemas desen9ol9idos
em Ha9a e os >timos resultados obtidos com o 2rocesso de coleta de dados, o2touIse 2elo uso do
software li9re H&5I 2ara coleta de dados e 2elo desen9ol9imento da inter3ace de busca do sistema6
; IMPLEMENTAO DO PROVEDOR DE SERVIOS SABIIA
Com a de3ini<*o do H&5I como solu<*o tecnol>!ica de coleta de dados no 3ormato &5II
"MO, os es3or<os se!uintes 2ara constru<*o do 2ro9edor de ser9i<os S5;II5 (Sistema 5berto e
Inte!rado de In3orma<*o em 5!ricultura) concentraramIse na escol(a do mecanismo de inde0a<*o e
busca te0tual, na de3ini<*o e im2lementa<*o do 2roEeto !r43ico de inter3ace6
;1 E"*(%F$ 0( 21*$!,"2( 01 ,!018$&'( 1 5."*$ #18#.$%
& mecanismo de inde0a<*o e busca te0tual Lucene tem sido lar!amente utilizado em
2roEetos open source em todo mundo6 -ntretanto, 2ara o 2roEeto Sabiia, obEeti9ouIse encontrar
solu<Aes li9res ca2azes de estender e mel(orar os recursos ori!inais da 3erramenta Lucene, como7
inte!ra<*o com bases de dados relacionais, recursos mais so3isticados de inde0a<*o e busca, e maior
inte!ra<*o com a arquitetura Ha9a -- (Java Platfor"( Enterprise Edition) B2PC6 & resultado dessa
in9esti!a<*o le9ou a escol(a do software li9re Solr6
& Solr um mecanismo de inde0a<*o e busca te0tual de c>di!o aberto baseado na biblioteca
Lucene o3erecendo recursos so3isticados de inde0a<*o e busca te0tual, como7 busca com o2eradores
booleanos, busca 2or cam2o, highlighting sobre o resultado da busca, 2a!ina<*o do resultado da
busca, facets sobre o resultado da busca, caching de busca, inte!ra<*o com banco de dados
relacionais, re2lica<*o de bases de dados, inter3ace de administra<*o we# etc6
& Solr dis2onibilizado na 3oma de uma a2lica<*o we#, o sistema cliente 2ode ser
constru,do com as lin!ua!ens de 2ro!rama<*o7 Gub$, "O", Ha9a, "$t(on, 6@-=, C_ e "erl6
;2 A/L.,#1#./$ 01 software 0( 6/(<10(/ 01 "1/<,&(" S$5,,$
5lm dos softwares li9res H&5I e Solr, o sistema utiliza a arquitetura Ha9a -- (Java Server
Pages e Servlets) 2ara im2lementa<*o da inter3ace we# de busca e o ser9idor de a2lica<Aes 52ac(e
=omcat B21C, con3orme ilustra a 3i!ura 27
F,-./$ 2: A/L.,#1#./$ 0( 6/(<10(/ 01 "1/<,&(" S$5,,$
;3 A51/#./$ $( 675%,*( 18#1/!(
Com a2ro0imadamente 1P16PPP documentos coletados em 3P 2ro9edores de dados, o
sistema 3oi dis2onibilizado com acesso restrito D -mbra2a 2ara a9alia<*o6 5tualmente, o 2ro9edor
de ser9i<os Sabiia encontraIse em 3ase de constru<*o e im2lementa<*o do 2roEeto !r43ico de
inter3ace, bem como, im2lementa<*o de no9os re2osit>rios de interesse da -mbra2a identi3icados
2elo 2roEeto 5cesso 5berto D In3orma<*o Cient,3ica na -mbra2a6 5ssim, como o re2osit>rio
institucional 5lice, es2eraIse que o 2ro9edor de ser9i<os Sabiia seEa dis2onibilizado 2ara o 2Qblico
e0terno no se!undo semestre de 2P1P6
RI PE RI PE RI PE
JOAI: Coleta de dados
Solr: Mecanismo de
indexao e busca
Java EE (Java Server Pages
e Servlets) e Tomcat:
Interface web de busca
... ...
Repositrios e
Peridicos de interesse
da Embrapa
K RESULTADOS ALCANADOS
& uso de software li9re temIse consolidado e e02andido em di9ersas 4reas do con(ecimento,
como7 !eotecnolo!ias, matem4tica com2utacional, banco de dados, en!en(aria de software etc6 &
2resente trabal(o relatou a e02eri?ncia da -mbra2a In3orm4tica no uso de tecnolo!ias li9res 2ara a
4rea de !est*o da in3orma<*o tcnicoIcient,3ica, mais es2eci3icamente 2ara o mo9imento 5cesso
5berto6 5 tecnolo!ia li9re S2ace mostrouIse am2lamente adequada 2ara constru<*o dos
re2osit>rios In3oteca e 5lice, ambos destinados D dissemina<*o da in3orma<*o 2roduzida 2ela 4rea
de "K da -mbra2a6 -nquanto a combina<*o, das 3erramentas li9res H&5I e Solr, 3a9oreceram a
cria<*o do 2ro9edor de ser9i<os Sabiia, caracterizado como elemento res2ons49el 2ela inte!ra<*o
de todos os 3ornecedores de dados (re2osit>rios institucionais, 2eri>dicos cient,3icos, bibliotecas
di!itais, e outros), tanto internos quanto e0ternos de interesse da -mbra2a6
"or 3im, o uso de software li9re temIse consolidado nas ati9idades de 2esquisa,
desen9ol9imento e ino9a<*o da -mbra2a 3rente aos no9os cen4rios e desa3ios 2ro2ostos6
I REFERNCIAS
B1C &5I6 O61! A/*F,<1" I!,#,$#,<1 is2on,9el em7 `(tt27SS'''6o2enarc(i9es6or!a 5cesso em7 11
de maio de 2P1P6
B2C =O- S"5C- F&:@5=I&@6 DS6$*1 is2on,9el em7 `(tt27SS'''6ds2ace6or!a6 5cesso em7
1P de maio de 2P1P6
B3C I.I=5L LI;G5Gb F&G -5G=O SbS=-M -:C5=I&@6 COAI is2on,9el em7
`(tt27SS'''6dlese6or!SddsSser9icesSEoaiUso3t'are6Es2a6 5cesso em7 11 de maio de 2P1P6
B#C =O- 5"5CO- S&F=^5G- F&:@5=I&@6 A6$*F1 S(%/ is2on,9el em7
`(tt27SSlucene6a2ac(e6or!Ssolra6 5cesso em7 11 de maio de 2P1P6
B)C &G5CL- S:@ -V-L&"-G @-=^&GT6 ?$<$ T1*F!(%(-M is2on,9el em7
`(tt27SSEa9a6sun6coma6 5cesso em7 1P de maio de 2P1P6
B+C =O- "&S=.G-SLL .L&;5L -V-L&"M-@= .G&:"6 P("#-/1SNL is2on,9el em7
`(tt27SS'''62ost!resql6or!a6 5cesso em7 1P de maio de 2P1P6
B/C =O- 5"5CO- S&F=^5G- F&:@5=I&@6 L.*1!1 is2on,9el em7
`(tt27SSlucene6a2ac(e6or!a6 5cesso em7 1P de maio de 2P1P6
B1C :;LI@ C&G- M-=55=5 I@I=I5=IV-6 D.5%,! C(/1 is2on,9el em7
`(tt27SS'''6dublincore6or!SdocumentsSusa!e!uidea6 5cesso em7 11 de maio de 2P1P6
BNC M5SS5CO:S-==S I@S=I=:=- &F =-CO@&L&.b6 MIT is2on,9el em7
`(tt27SS(tt27SS'eb6mit6eduSa6 5cesso em7 11 de maio de 2P1P6
B1PC O-^L-== "5CT5G -V-L&"M-@= C&M"5@b, HP L$5" is2on,9el em7
`(tt27SS(tt27SS'''6(2l6(26coma6 5cesso em7 11 de maio de 2P1P6
B11C ;-GT-L-b S=5@5G IS=GI;:=I&@ LIC-@S-6 BSD (61! "(./*1 %,*1!"1 is2on,9el
em7 `(tt27SS'''6o2ensource6or!SlicensesSbsdIlicense62(2a6 5cesso em7 1P de maio de 2P1P6
B12C =O- C&@S:L=5=IV- C&MMI==-- F&G S"5C- 5=5 SbS=-MS6 R1+1/1!*1 M(01% -
R1+1/1!*1 M(01% +(/ $! O61! A/*F,<$% I!+(/2$#,(! SM"#12 - OAIS is2on,9el em7
`(tt27SS2ublic6ccsds6or!S2ublicationsSGe3Model6as20a6 5cesso em7 11 de maio de 2P1P6
B13C =O- S"5C- F&:@5=I&@6 DS6$*1 1;1 M$!.$% is2on,9el em7
`(tt27SS'''6ds2ace6or!S1U)U1ocumentationa6 5cesso em7 11 de maio de 2P1P6
B1#C I@S=I=:=I&@5L G-"&SI=&Gb &F :@IV-GSI5- &F MI@O&6 S#$#,"#,*" A00O!
B1)C 5.G&LIVG- I G-- - S&F=^5G- LIVG- "5G5 5.G&"-C:JGI56 Oi2er@a9e!ador I
@a9e!ador Oi2erb>lico6 is2on,9el em7
`(tt27SS(tt27SSre2ositorio6a!roli9re6!o96brS2roEectsS(i2erna9e!adora6 5cesso em7 11 de maio de
2P1P6
B1+C -M;G5"5 I@F&GMJ=IC5 5.G&"-C:JGI56 A,!+( is2on,9el em7
`(tt27SS'''6ain3o6cn2tia6embra2a6bra6 5cesso em7 11 de maio de 2P1P6
B1/C L-I=-, F-G@5@& CcS5G LIM5 and ;-G=I@, "5=GdCI5 G&CO5 ;-LL& and
V5C5GI, IS5L:- and SIMe&, VIC=&G "5:L& M5GL:-S and VIS&LI, M5GC&S CcY5G6
I26%121!#$&'( 01 1"#/$#O-,$" 01 $*1""( $51/#( 12 .2$ ,!"#,#.,&'( 01 61"L.,"$ 01 -/$!01
6(/#1 !$ 4/1$ 01 $-/,*.%#./$: $ 1861/,P!*,$ 0$ E25/$6$, 2PPN 6 In XV Geuni>n de la
5sociaci>n Interamericana de ;ibliotecarios, ocumentalistas $ -s2ecialistas en In3ormaci>n
5!r,cola, Lima, "eru6
B11C &"-@ 5GCOIV-S I@I=I5=IV-6 TF1 O61! A/*F,<1" I!,#,$#,<1 P/(#(*(% +(/ M1#$0$#$
H$/<1"#,!- 2PP16 is2on,9el
em7 `(tt27SS'''6o2enarc(i9es6or!S&5ISo2enarc(i9es2rotocol6(tmla6 5cesso em7 11 de maio
de 2P1P6
B1NC S&:GC-F&G.-6@-=6 SourceFor!e6 is2on,9el em7 `(tt27SSsource3or!e6neta6 5cesso em7 1#
de maio de 2P1P6
B2PC &G5CL- S:@ -V-L&"-G @-=^&GT6 ?$<$ EE is2on,9el em7
`(tt27SSEa9a6sun6comSEa9aeea6 5cesso em7 11 de maio de 2P1P6
B21C =O- 5"5CO- S&F=^5G- F&:@5=I&@6 A6$*F1 T(2*$# is2on,9el em7
`(tt27SStomcat6a2ac(e6or!a6 5cesso em7 1P de maio de 2P1P6

39 Jaiiojsl 01

Загружено:

Сведения о документе

Оригинальное название

Авторское право

Доступные форматы

Поделиться этим документом

Поделиться или встроить документ

Параметры публикации

Этот документ был вам полезен?

Это неприемлемый материал?

Авторское право:

Доступные форматы

39 Jaiiojsl 01

Загружено:

Авторское право:

Доступные форматы

SOFTWARE LIVRE PARA IMPLEMENTAO DE REPOSITRIOS DIGITAIS E

PROVEDORES DE SERVIOS: EXPERINCIA DA EMBRAPA INFORMTICA

Вам также может понравиться