Annotation of OSA_system2/OSAS_browser.py, revision 1.22
1.1 dwinter 1: """ Classes for displaying, browsing and organizing the archive
2: """
3:
4:
5: import OSAS_helpers
6: from AccessControl import ClassSecurityInfo
7: from Products.PageTemplates.PageTemplateFile import PageTemplateFile
8: from OFS.Folder import Folder
9: from OFS.SimpleItem import SimpleItem
10: from Globals import InitializeClass,package_home
1.22 ! dwinter 11:
! 12: import logging
! 13:
! 14: #ersetzt logging
! 15: def logger(txt,method,txt2):
! 16: """logging"""
! 17: logging.info(txt+ txt2)
! 18:
! 19:
1.15 dwinter 20: import base64
1.14 dwinter 21: import bz2
1.1 dwinter 22: import os
23: import os.path
24: import stat
1.21 dwinter 25: import Ft.Xml.XPath
1.2 dwinter 26: import xml.dom.minidom
1.3 dwinter 27: from types import *
1.8 dwinter 28: import xmlrpclib
1.10 dwinter 29: from OSAS_helpers import *
1.8 dwinter 30:
1.15 dwinter 31: def decodeRPC(string):
32: return bz2.decompress(base64.decodestring(string))
33:
1.1 dwinter 34:
35: class OSAS_storeOnline(SimpleItem):
36: """Webfrontend für das Storagesystem
37: liefert Browserumgebung
38: """
39: meta_type="OSAS_StoreOnline__neu"
40:
41: security=ClassSecurityInfo()
42:
43: _v_fileSystem={} #chache fuer filesystem
1.10 dwinter 44: _v_metaFiles={} #chache fuer indexMeta
1.15 dwinter 45:
46: def getParentType(self,path):
47: """getFileType des parentordners"""
48:
49: realPath=os.path.split(path)[0]
50:
51: objects=self.readObjectsFromPath(realPath)
52:
1.16 dwinter 53: try:
54: return objects[os.path.join(realPath,".")][0]
55: except:
56: return ""
57: def getHandlersOfPath(self):
58: """handler des actullen path"""
59: path=self.REQUEST['path']
60: objects=self.readObjectsFromPath(path)
61:
62: typeObject=objects.get(os.path.join(path,"."),None)
63: if not typeObject:
64: return("",[],"")
65: type=typeObject[0]
66:
67: handler=self.giveHandlers(path,type)
68:
69:
70: return (os.path.split(path)[1],handler,objects[os.path.join(path,".")][1],type)
71:
72:
1.10 dwinter 73: def getMetaFile(self,path):
74: """get index.meta and translate it to HTML"""
75: """Lies Metafile ein
76: @param path: Pfad des index.met
77: @return: index.meta file
78: """
79: html=[]
80: server=xmlrpclib.Server(self.serverUrl)
81:
82:
83: f=server.getFile(path+"/index.meta")
84:
85: if not f:
86:
87: return self.getMetaInfoFromIndexMeta(path)
88: #return "NO_METADATA"
89: else:
1.21 dwinter 90:
1.10 dwinter 91: dom = xml.dom.minidom.parseString(f)
92:
93: try:
94: name=getText(dom.getElementsByTagName("name")[0].childNodes)
95: except:
96: name="NOT_DEFINED!!!"
97: try:
98: creator=getText(dom.getElementsByTagName("creator")[0].childNodes)
99: except:
100: creator="NOT_DEFINED!!!"
101:
102: try:
103: creation_date=getText(dom.getElementsByTagName("archive-creation-date")[0].childNodes)
104: except:
105: creation_date="NOT_DEFINED!!!"
106:
107: try:
108: description=getText(dom.getElementsByTagName("description")[0].childNodes)
109: except:
110: description="NOT_DEFINED!!!"
111:
112: try:
113: type=getText(dom.getElementsByTagName("content-type")[0].childNodes)
114: except:
115: type=""
116: if type=="scanned document":
117: html="<h3>Document: "+name+"</h3>"
118: elif type=="folder":
119: html="<h3>Folder: "+name+"</h3>"
120: else:
121: html="<h3>Document: "+name+"</h3>"
122:
123: html=html+"<p><i>created by: "+creator+" at: "+creation_date+"</i></p>"
124: html=html+"<h4>Description</h4><p>"+description+"</p>"
125: try:
126: bib = dom.getElementsByTagName("meta")[0].getElementsByTagName("bib")[0]
127: if bib.attributes.has_key('type'):
128: html=html+"<h4>Info ("+bib.attributes['type'].value+")</h4>"
129: else:
130: html=html+"<h4>Info</h4>"
131: html=html+getBib(bib.childNodes)
132:
133: except:
134: """none"""
1.8 dwinter 135:
1.10 dwinter 136: # html=html.encode('utf-8','replace')+getBib(bib.childNodes).encode('utf-8','replace')
137:
138: return html
139:
140:
141: def getMetaInfoFromIndexMeta(self,path):
142: """metadaten zu path als html aus dem index.meta file zu path (meta tag im file bzw. dir container)
143: @param path: Pfad auf das Object relativ zum rootFolderName
144: @return: metadata als html
145: """
1.16 dwinter 146:
1.10 dwinter 147: xmlInfos=self.findEntryInIndexMeta(path)
1.16 dwinter 148:
1.10 dwinter 149: if xmlInfos:
150: return OSAS_helpers.getMetaInfoFromXML(path,xmlInfos)
151: else:
152: return ""
1.8 dwinter 153:
1.10 dwinter 154: def findEntryInIndexMeta(self,path):
155: """Finde im naechstgelegenden index.meta relativ zu path den entprechenden Eintrag fuer diesen Pfad.
156: @param path: Pfad auf das Object relativ zum rootFolderName
157: @return: den Teil von Index.meta der Informationen zu path enthaelt, None wenn error.
158: """
159:
160: server=xmlrpclib.Server(self.serverUrl)
161: indexMeta=server.findIndexMeta(path) # suche index.meta
1.16 dwinter 162:
1.10 dwinter 163: if not indexMeta:
164: return None
165:
166: realPath=os.path.split(indexMeta)[0]
167: path=os.path.normpath(path)
168:
169: try:
1.21 dwinter 170: dom = NonvalidatingReader.parseString(server.getFile(indexMeta),"http://www.mpiwg-berlin.mpg.de/")
171:
1.10 dwinter 172: except:
1.22 ! dwinter 173: logger("OSAS_browser (findEntryInIndexMeta)",logging.ERROR,"Cannot parse: %s"%indexMeta)
1.15 dwinter 174: return None
175:
176: path=path.replace(realPath,'')
177: (searchPath,name)=os.path.split(path)
178: if (len(searchPath)>0) and (searchPath[0]=="/"):
179: if len(searchPath)<=1:
180: searchPath=""
181: else:
182: searchPath=searchPath[1:]
1.10 dwinter 183: #ist path ein directory?
1.15 dwinter 184: xpath="/resource/dir[name='%s' and path='%s']"%(name,searchPath)
1.21 dwinter 185: dirs=Ft.Xml.XPath.Evaluate(xpath,contextNode=dom)
1.15 dwinter 186:
1.10 dwinter 187:
1.15 dwinter 188: if len(dirs)>0:
189: return dirs[0].toxml
1.10 dwinter 190:
1.15 dwinter 191: #ist path ein file?
192: xpath="/resource/file[name='%s' and path='%s']"%(name,searchPath)
1.10 dwinter 193:
194:
1.21 dwinter 195: dirs=Ft.Xml.XPath.Evaluate(xpath,contextNode=dom)
1.15 dwinter 196: if len(dirs)>0:
197: return dirs[0].toxml()
1.10 dwinter 198:
199: return None
200:
201:
202: def getSubDirsFromIndexMeta(self,path):
203:
204: """Gebe alle path untergeordenten Objekte aus
205: @param path: optional, default ist "", Pfad auf das Object relativ zum rootFolderName
206: @return: Directory [pfad auf das Objekt]->(fileType,''), fileType ist hierbei OSAS_dir_archive falls Object ein directory und OSAS_file_archive falls das Object ein File ist,der zweite Eintrag des Tupels ist zur Zeit immer '', spaeter wird hier die Beschreibung gemaess Metadaten stehen, wie bei readObjectsFromPath.
207: @todo: Rueckgabe einer Beschreibung gemaess Metadaten
208: """
209: ret={}
1.17 dwinter 210: startPath=path
1.10 dwinter 211: server=xmlrpclib.Server(self.serverUrl)
212: indexMeta,stats=server.findIndexMetaWithStats(path)#findex index.meta zu path.
1.16 dwinter 213:
1.10 dwinter 214: if not indexMeta:
215: return ret
216:
217: realPath=os.path.split(indexMeta)[0]
218: path=path.replace(realPath,"")
219: if path and (path[0]==os.sep): #falls am Anfang os.sep steht lösche dieses.
220: path=path[1:]
221:
222:
223:
1.17 dwinter 224: #teste ob schon im cache zur Zeit kein chache wenn index.meta file nicht im selben ordner wie path.
225:
1.20 casties 226: #if self._v_metaFiles.has_key(startPath) and (self._v_metaFiles[realPath][0]==stats[stat.ST_MTIME]) and (path==""):
227: #
228: # return self._v_metaFiles[startPath][1]
1.10 dwinter 229:
230: try:
231: dom=xml.dom.minidom.parseString(server.getFile(indexMeta))
232: except:
1.22 ! dwinter 233: logger("OSAS_browser (getSubDirsFromIndexMeta)",logging.ERROR,"Cannot parse: %s"%indexMeta)
1.10 dwinter 234: return ret
235:
236: dirs=[]
237: dirs=dom.getElementsByTagName('dir')+dom.getElementsByTagName('file')
238:
239: for dir in dirs:
240: pathes=dir.getElementsByTagName('path')
241: if pathes:
242: pathX=OSAS_helpers.getText(pathes[0].childNodes)
243: else:
244: pathX=""
245: names=dir.getElementsByTagName('name')
246: if names:
247: name=OSAS_helpers.getText(names[0].childNodes)
248: else:
249: name=""
250:
251: #print "PP",pathX,path
252: if pathX==path:
253: if dir.tagName=="dir":
254: fileType="OSAS_dir_archive"
255: else:
256: fileType="OSAS_file_archive"
257:
258: object=os.path.join(realPath,pathX,name)
259: ret[object.encode('utf-8')]=(fileType,'')
260:
1.17 dwinter 261: self._v_metaFiles[startPath]=(stats[stat.ST_MTIME],ret) # speicher im chache
1.10 dwinter 262:
263: return ret
264:
265:
1.1 dwinter 266:
1.8 dwinter 267: def __init__(self,id,serverUrl):
1.7 dwinter 268: """initialize a new instance
269: @param id: Zope id"""
1.1 dwinter 270: self.id = id
1.8 dwinter 271: self.serverUrl = serverUrl
1.1 dwinter 272:
273:
274: security.declareProtected('View','index_html')
275: def index_html(self):
1.2 dwinter 276: """main view either standard template zpt/storeOnline_index_html.zpt or storeOnline_index.html in tree"""
1.1 dwinter 277: if hasattr(self,'storeOnline_index.html'):
278: return getattr(self,'storeOnline_index.html')()
279: else:
280: pt=PageTemplateFile(os.path.join(package_home(globals()),'zpt','storeOnline_index_html.zpt')).__of__(self)
281: return pt()
282:
283:
1.2 dwinter 284: def findIndexMeta(self,path=""):
1.7 dwinter 285: """finde Rueckwaerts im Baum von Pfad ausgehend, dass erste index.meta file
286: @keyword path: default ist "", Pfad auf das Object relativ zum rootFolderName
1.2 dwinter 287: @return: None falls kein index.meta existiert sonst Pfad auf das index.meta
288: """
289: realPath=os.path.normpath(os.path.join(self.rootFolderName,path))
290: #suche index.meta
1.8 dwinter 291: server=xmlrpclib.Server(self.serverUrl)
292: return server.findIndexMeta(realPath)
1.7 dwinter 293:
1.2 dwinter 294:
1.8 dwinter 295:
1.7 dwinter 296: def readObjectsFromPath(self,path="",metaDataId=None):
1.1 dwinter 297: """Liest files aus dem path und speichert im cache _v_filesystem.
298:
1.7 dwinter 299: @keyword path : path relativ zum root folder des Storagesystems
300: @keyword metaDataId: Optional, id des OSAS_Metadata Object, dass benutzt werden soll, generisch wird das erste Object, dass in parent gefunden wird angezeigt.
1.2 dwinter 301: @return: directory der Form [pfad zum Objekt] -> (fileType,metadatum als String)
1.1 dwinter 302: """
1.8 dwinter 303: server=xmlrpclib.Server(self.serverUrl)
1.1 dwinter 304: realPath=os.path.normpath(os.path.join(self.rootFolderName,path))
1.7 dwinter 305:
306: if metaDataId:
307: metaData=getattr(self,metaDataId)
308: if not (getattr(metaData,'meta_type','')=='OSAS_Metadata__neu'):
1.22 ! dwinter 309: logger('OSAS_browser (readObjectsFromPath)',logging.ERROR,"%s is not OSAS_Metadata")
1.7 dwinter 310: metaData=None
311: else:
312: metaDatas=self.ZopeFind(self.aq_parent,obj_metatypes=['OSAS_Metadata__neu'],search_sub=1)
313: if metaDatas:
314: metaData=metaDatas[0][1]
315: else:
1.22 ! dwinter 316: logger('OSAS_browser (readObjectsFromPath)',logging.INFO,"There is no OSAS_Metadata Object")
1.7 dwinter 317: metaData=None
318:
319: #print "md",metaData
1.1 dwinter 320: if realPath.find(self.rootFolderName) <0: #versuch auf Pfad unterhalb des Rootfolder zuzugreifen
321: return {}
322:
323:
1.8 dwinter 324:
325:
326: stats=server.getStat(realPath)
327:
328: if not stats:
1.2 dwinter 329: return None
330:
1.3 dwinter 331: #teste ob schon im cache
1.20 casties 332: #if self._v_fileSystem.has_key(realPath) and (self._v_fileSystem[realPath][0]==stats[stat.ST_MTIME]):
333: #
334: # return self._v_fileSystem[realPath][1]
1.15 dwinter 335:
336: indexMetas=server.getAllIndexMetasOfSubDirs(realPath)
1.13 dwinter 337: dir=indexMetas.keys()
1.11 dwinter 338:
1.1 dwinter 339: ret={}
340: for filename in dir:
1.16 dwinter 341:
1.1 dwinter 342: object=os.path.join(realPath,filename)
1.13 dwinter 343: fileType=indexMetas[filename][0]
1.15 dwinter 344:
1.1 dwinter 345: if fileType:
1.15 dwinter 346: if (fileType=='OSAS_dir') and indexMetas.has_key(".") and indexMetas["."][1]:
1.16 dwinter 347:
1.15 dwinter 348: if(OSAS_helpers.isImageFolder(object,decodeRPC(indexMetas["."][1]))):
1.13 dwinter 349: fileType='OSAS_imageFolder'
1.15 dwinter 350: elif(OSAS_helpers.isVideoFolder(object,decodeRPC(indexMetas["."][1]))):
351: fileType='OSAS_videoFolder'
352: if metaData and indexMetas[filename][1]:
1.16 dwinter 353:
1.15 dwinter 354: ret[object]=(fileType,metaData.getDisplayFieldsAsStr(decodeRPC(indexMetas[filename][1])))
1.7 dwinter 355: else:
1.15 dwinter 356: metaDataStr=self.findEntryInIndexMeta(object)
1.16 dwinter 357:
1.15 dwinter 358: if metaDataStr:
359: display=metaData.getDisplayFieldsAsStr(metaDataStr)
360:
1.21 dwinter 361: dom = NonvalidatingReader.parseString(metaDataStr,"http://www.mpiwg-berlin.mpg.de/")
362: if len(Ft.Xml.XPath.Evaluate("/file/meta/video-file",contextNode=dom))>0:
1.15 dwinter 363: fileType='OSAS_videoFile'
364:
365: else:
366: display=""
1.16 dwinter 367:
1.15 dwinter 368:
369: ret[object]=(fileType,display)
1.1 dwinter 370:
371: self._v_fileSystem[realPath]=(stats[stat.ST_MTIME],ret) # speicher im chache
372:
373: return ret
374:
375: def giveHandlers(self,path,type):
1.7 dwinter 376: """teste ob fuer diesen Typ, handler definiert sind und gibt einen entsprechenden Link zurueck, der das Object mit diesem Handler ausfuehrt. Die Handler mussen im parent ordner des browser oder einem Subordner davon liegen.
1.2 dwinter 377: @param path: Pfad auf das Objekt
378: @param type: Typ des Objektes
379: @return: (string) html-Fragment, link der das Objekt mit diesem Handler anzeigt.
380: """
1.1 dwinter 381: ret=[]
382:
1.4 dwinter 383: for handler in self.ZopeFind(self.aq_parent,obj_metatypes=['OSAS_HandlerObject__neu'],search_sub=1):
1.15 dwinter 384:
1.4 dwinter 385: if type in handler[1].objectTypes:
1.19 dwinter 386: try:
1.6 dwinter 387: path=path.replace(getattr(handler[1],'ignorePath',''),'')
388: except:
1.19 dwinter 389: pass
1.4 dwinter 390: url=handler[1].prefix%path
391: text=handler[1].title
1.1 dwinter 392: string="""<a target="_blank" href="%s">%s</a>"""%(url,text)
393: ret.append(string)
394: return ret
395:
396:
397: def generateTree(self,path=""):
1.2 dwinter 398: """erzeuge liest die Objekte aus die im Pfad gespeichert sind
1.7 dwinter 399:
400: @keyword path: optional mit default='', Pfad relativ zu rootFolderName
1.2 dwinter 401: @return: List von Tripeln, (link_html,array of handlers,metainformationen) hierbei ist
1.7 dwinter 402: - (string) link_html ein html-Fragement, falls das Objekt vom Typ OSAS_dir ist, ist dies ein Link auf dieses Verzeichnis, sonst der Dateiname
403: - (string) handler sind die Ergebnisse von giveHandlers fuer dieses Objekt
404: - (string) metainformationen die Metainformationen zum Objekt als Ergebnis von readObjectsFromPath
1.2 dwinter 405: """
1.17 dwinter 406:
407: objects=self.getSubDirsFromIndexMeta(path)
408:
1.18 dwinter 409:
1.17 dwinter 410:
411: im=self.readObjectsFromPath(path)
412: if not im:
413: im={}
1.9 dwinter 414:
1.10 dwinter 415:
1.17 dwinter 416:
417:
1.2 dwinter 418: for key in im.keys():
1.17 dwinter 419: #relle pfade hinzufuegen, virtueller wird ueberschrieben
420:
421: objects[key]=im[key]
1.2 dwinter 422:
1.17 dwinter 423:
1.2 dwinter 424:
1.1 dwinter 425: def sortLow(x,y):
426: return cmp(x.lower(),y.lower())
427:
428: ret=[]
429:
430: objectSorted=objects.keys()
431: objectSorted.sort(sortLow)
432: for object in objectSorted:
1.15 dwinter 433:
1.1 dwinter 434: handler=self.giveHandlers(object,objects[object][0])
1.16 dwinter 435: if not(os.path.split(object)[1]=="."):
436: if objects[object][0] in OSASDirObjects:
437:
438: string="""<a href="?path=%s">%s</a>"""%(object,os.path.split(object)[1])
439:
440: ret.append((string,handler,objects[object][1]))
441: elif objects[object][0]=="OSAS_dir_archive":
442: string="""<a href="?path=%s">%s (A)</a>"""%(object,os.path.split(object)[1])
443:
444: ret.append((string,handler,objects[object][1]))
445: else:
446:
447: ret.append((os.path.split(object)[1],handler,objects[object][1]))
1.1 dwinter 448:
449:
450: return ret
451:
452:
453: def path_to_link(self,pathTmp=""):
1.7 dwinter 454: """generates navigation bar for viewfiles
455: @keyword pathTmp: optional, generisch="", pfad der erstellt werden soll
1.18 dwinter 456: @return: html Fragment, pathTmp zerlegt, dass jeder Teil von Pfad unterhalb von rootFolderName direkt angesprungen werden kann.
1.7 dwinter 457: """
1.1 dwinter 458:
459: path=os.path.normpath(os.path.join(self.rootFolderName,pathTmp))
460:
461: URL=self.absolute_url()
462: string=""
463:
464: tmppath=os.path.dirname(path)
465: i=0
466: pathes=[[path, os.path.basename(path)]]
467:
468: while not (len(tmppath)==1):
469:
470: i=i+1
471: if i>20: break
472:
473: pathes.append([tmppath, os.path.basename(tmppath)])
474: tmppath=os.path.dirname(tmppath)
475:
476: while i>=0:
477: if pathes[i][0].find(self.rootFolderName) <0: #versuch auf Pfad unterhalb des Rootfolder zuzugreifen
478: string=string+"<a>"+pathes[i][1]+"</a>/"
479: else:
480: string=string+"<a href="+URL+"?path="+pathes[i][0]+">"+pathes[i][1]+"</a>/"
481:
482: i=i-1
483: return string
484:
485:
486: InitializeClass(OSAS_storeOnline)
1.19 dwinter 487:
1.1 dwinter 488: def manage_addOSAS_storeOnlineForm(self):
1.7 dwinter 489: """interface for adding the OSAS_storeOnline"""
1.1 dwinter 490: pt=PageTemplateFile(os.path.join(package_home(globals()),'zpt','addStoreOnline.zpt')).__of__(self)
491: return pt()
492:
493: def manage_addOSAS_storeOnline(self,id,RESPONSE=None):
1.7 dwinter 494: """add the OSAS_storeOnline
495: @param id: id
496: """
1.1 dwinter 497: newObj=OSAS_storeOnline(id)
498: self._setObject(id,newObj)
499: if RESPONSE is not None:
500: RESPONSE.redirect('manage_main')
501:
FreeBSD-CVSweb <freebsd-cvsweb@FreeBSD.org>
![[BACK]](/cvs/cvsweb/icons/back.gif){kind=icon}
Return to OSAS_browser.py CVS log ![[TXT]](/cvs/cvsweb/icons/text.gif){kind=icon}
![[DIR]](/cvs/cvsweb/icons/dir.gif){kind=icon}
Up to [Repository] / OSA_system2