Annotation of OSA_system2/OSAS_browser.py, revision 1.21
1.1 dwinter 1: """ Classes for displaying, browsing and organizing the archive
2: """
3:
4:
5: import OSAS_helpers
6: from AccessControl import ClassSecurityInfo
7: from Products.PageTemplates.PageTemplateFile import PageTemplateFile
8: from OFS.Folder import Folder
9: from OFS.SimpleItem import SimpleItem
10: from Globals import InitializeClass,package_home
11: import zLOG
1.15 dwinter 12: import base64
1.14 dwinter 13: import bz2
1.1 dwinter 14: import os
15: import os.path
16: import stat
1.21 ! dwinter 17: import Ft.Xml.XPath
1.2 dwinter 18: import xml.dom.minidom
1.3 dwinter 19: from types import *
1.8 dwinter 20: import xmlrpclib
1.10 dwinter 21: from OSAS_helpers import *
1.8 dwinter 22:
1.15 dwinter 23: def decodeRPC(string):
24: return bz2.decompress(base64.decodestring(string))
25:
1.1 dwinter 26:
27: class OSAS_storeOnline(SimpleItem):
28: """Webfrontend für das Storagesystem
29: liefert Browserumgebung
30: """
31: meta_type="OSAS_StoreOnline__neu"
32:
33: security=ClassSecurityInfo()
34:
35: _v_fileSystem={} #chache fuer filesystem
1.10 dwinter 36: _v_metaFiles={} #chache fuer indexMeta
1.15 dwinter 37:
38: def getParentType(self,path):
39: """getFileType des parentordners"""
40:
41: realPath=os.path.split(path)[0]
42:
43: objects=self.readObjectsFromPath(realPath)
44:
1.16 dwinter 45: try:
46: return objects[os.path.join(realPath,".")][0]
47: except:
48: return ""
49: def getHandlersOfPath(self):
50: """handler des actullen path"""
51: path=self.REQUEST['path']
52: objects=self.readObjectsFromPath(path)
53:
54: typeObject=objects.get(os.path.join(path,"."),None)
55: if not typeObject:
56: return("",[],"")
57: type=typeObject[0]
58:
59: handler=self.giveHandlers(path,type)
60:
61:
62: return (os.path.split(path)[1],handler,objects[os.path.join(path,".")][1],type)
63:
64:
1.10 dwinter 65: def getMetaFile(self,path):
66: """get index.meta and translate it to HTML"""
67: """Lies Metafile ein
68: @param path: Pfad des index.met
69: @return: index.meta file
70: """
71: html=[]
72: server=xmlrpclib.Server(self.serverUrl)
73:
74:
75: f=server.getFile(path+"/index.meta")
76:
77: if not f:
78:
79: return self.getMetaInfoFromIndexMeta(path)
80: #return "NO_METADATA"
81: else:
1.21 ! dwinter 82:
1.10 dwinter 83: dom = xml.dom.minidom.parseString(f)
84:
85: try:
86: name=getText(dom.getElementsByTagName("name")[0].childNodes)
87: except:
88: name="NOT_DEFINED!!!"
89: try:
90: creator=getText(dom.getElementsByTagName("creator")[0].childNodes)
91: except:
92: creator="NOT_DEFINED!!!"
93:
94: try:
95: creation_date=getText(dom.getElementsByTagName("archive-creation-date")[0].childNodes)
96: except:
97: creation_date="NOT_DEFINED!!!"
98:
99: try:
100: description=getText(dom.getElementsByTagName("description")[0].childNodes)
101: except:
102: description="NOT_DEFINED!!!"
103:
104: try:
105: type=getText(dom.getElementsByTagName("content-type")[0].childNodes)
106: except:
107: type=""
108: if type=="scanned document":
109: html="<h3>Document: "+name+"</h3>"
110: elif type=="folder":
111: html="<h3>Folder: "+name+"</h3>"
112: else:
113: html="<h3>Document: "+name+"</h3>"
114:
115: html=html+"<p><i>created by: "+creator+" at: "+creation_date+"</i></p>"
116: html=html+"<h4>Description</h4><p>"+description+"</p>"
117: try:
118: bib = dom.getElementsByTagName("meta")[0].getElementsByTagName("bib")[0]
119: if bib.attributes.has_key('type'):
120: html=html+"<h4>Info ("+bib.attributes['type'].value+")</h4>"
121: else:
122: html=html+"<h4>Info</h4>"
123: html=html+getBib(bib.childNodes)
124:
125: except:
126: """none"""
1.8 dwinter 127:
1.10 dwinter 128: # html=html.encode('utf-8','replace')+getBib(bib.childNodes).encode('utf-8','replace')
129:
130: return html
131:
132:
133: def getMetaInfoFromIndexMeta(self,path):
134: """metadaten zu path als html aus dem index.meta file zu path (meta tag im file bzw. dir container)
135: @param path: Pfad auf das Object relativ zum rootFolderName
136: @return: metadata als html
137: """
1.16 dwinter 138:
1.10 dwinter 139: xmlInfos=self.findEntryInIndexMeta(path)
1.16 dwinter 140:
1.10 dwinter 141: if xmlInfos:
142: return OSAS_helpers.getMetaInfoFromXML(path,xmlInfos)
143: else:
144: return ""
1.8 dwinter 145:
1.10 dwinter 146: def findEntryInIndexMeta(self,path):
147: """Finde im naechstgelegenden index.meta relativ zu path den entprechenden Eintrag fuer diesen Pfad.
148: @param path: Pfad auf das Object relativ zum rootFolderName
149: @return: den Teil von Index.meta der Informationen zu path enthaelt, None wenn error.
150: """
151:
152: server=xmlrpclib.Server(self.serverUrl)
153: indexMeta=server.findIndexMeta(path) # suche index.meta
1.16 dwinter 154:
1.10 dwinter 155: if not indexMeta:
156: return None
157:
158: realPath=os.path.split(indexMeta)[0]
159: path=os.path.normpath(path)
160:
161: try:
1.21 ! dwinter 162: dom = NonvalidatingReader.parseString(server.getFile(indexMeta),"http://www.mpiwg-berlin.mpg.de/")
! 163:
1.10 dwinter 164: except:
165: zLOG.LOG("OSAS_browser (findEntryInIndexMeta)",zLOG.ERROR,"Cannot parse: %s"%indexMeta)
1.15 dwinter 166: return None
167:
168: path=path.replace(realPath,'')
169: (searchPath,name)=os.path.split(path)
170: if (len(searchPath)>0) and (searchPath[0]=="/"):
171: if len(searchPath)<=1:
172: searchPath=""
173: else:
174: searchPath=searchPath[1:]
1.10 dwinter 175: #ist path ein directory?
1.15 dwinter 176: xpath="/resource/dir[name='%s' and path='%s']"%(name,searchPath)
1.21 ! dwinter 177: dirs=Ft.Xml.XPath.Evaluate(xpath,contextNode=dom)
1.15 dwinter 178:
1.10 dwinter 179:
1.15 dwinter 180: if len(dirs)>0:
181: return dirs[0].toxml
1.10 dwinter 182:
1.15 dwinter 183: #ist path ein file?
184: xpath="/resource/file[name='%s' and path='%s']"%(name,searchPath)
1.10 dwinter 185:
186:
1.21 ! dwinter 187: dirs=Ft.Xml.XPath.Evaluate(xpath,contextNode=dom)
1.15 dwinter 188: if len(dirs)>0:
189: return dirs[0].toxml()
1.10 dwinter 190:
191: return None
192:
193:
194: def getSubDirsFromIndexMeta(self,path):
195:
196: """Gebe alle path untergeordenten Objekte aus
197: @param path: optional, default ist "", Pfad auf das Object relativ zum rootFolderName
198: @return: Directory [pfad auf das Objekt]->(fileType,''), fileType ist hierbei OSAS_dir_archive falls Object ein directory und OSAS_file_archive falls das Object ein File ist,der zweite Eintrag des Tupels ist zur Zeit immer '', spaeter wird hier die Beschreibung gemaess Metadaten stehen, wie bei readObjectsFromPath.
199: @todo: Rueckgabe einer Beschreibung gemaess Metadaten
200: """
201: ret={}
1.17 dwinter 202: startPath=path
1.10 dwinter 203: server=xmlrpclib.Server(self.serverUrl)
204: indexMeta,stats=server.findIndexMetaWithStats(path)#findex index.meta zu path.
1.16 dwinter 205:
1.10 dwinter 206: if not indexMeta:
207: return ret
208:
209: realPath=os.path.split(indexMeta)[0]
210: path=path.replace(realPath,"")
211: if path and (path[0]==os.sep): #falls am Anfang os.sep steht lösche dieses.
212: path=path[1:]
213:
214:
215:
1.17 dwinter 216: #teste ob schon im cache zur Zeit kein chache wenn index.meta file nicht im selben ordner wie path.
217:
1.20 casties 218: #if self._v_metaFiles.has_key(startPath) and (self._v_metaFiles[realPath][0]==stats[stat.ST_MTIME]) and (path==""):
219: #
220: # return self._v_metaFiles[startPath][1]
1.10 dwinter 221:
222: try:
223: dom=xml.dom.minidom.parseString(server.getFile(indexMeta))
224: except:
225: zLOG.LOG("OSAS_browser (getSubDirsFromIndexMeta)",zLOG.ERROR,"Cannot parse: %s"%indexMeta)
226: return ret
227:
228: dirs=[]
229: dirs=dom.getElementsByTagName('dir')+dom.getElementsByTagName('file')
230:
231: for dir in dirs:
232: pathes=dir.getElementsByTagName('path')
233: if pathes:
234: pathX=OSAS_helpers.getText(pathes[0].childNodes)
235: else:
236: pathX=""
237: names=dir.getElementsByTagName('name')
238: if names:
239: name=OSAS_helpers.getText(names[0].childNodes)
240: else:
241: name=""
242:
243: #print "PP",pathX,path
244: if pathX==path:
245: if dir.tagName=="dir":
246: fileType="OSAS_dir_archive"
247: else:
248: fileType="OSAS_file_archive"
249:
250: object=os.path.join(realPath,pathX,name)
251: ret[object.encode('utf-8')]=(fileType,'')
252:
1.17 dwinter 253: self._v_metaFiles[startPath]=(stats[stat.ST_MTIME],ret) # speicher im chache
1.10 dwinter 254:
255: return ret
256:
257:
1.1 dwinter 258:
1.8 dwinter 259: def __init__(self,id,serverUrl):
1.7 dwinter 260: """initialize a new instance
261: @param id: Zope id"""
1.1 dwinter 262: self.id = id
1.8 dwinter 263: self.serverUrl = serverUrl
1.1 dwinter 264:
265:
266: security.declareProtected('View','index_html')
267: def index_html(self):
1.2 dwinter 268: """main view either standard template zpt/storeOnline_index_html.zpt or storeOnline_index.html in tree"""
1.1 dwinter 269: if hasattr(self,'storeOnline_index.html'):
270: return getattr(self,'storeOnline_index.html')()
271: else:
272: pt=PageTemplateFile(os.path.join(package_home(globals()),'zpt','storeOnline_index_html.zpt')).__of__(self)
273: return pt()
274:
275:
1.2 dwinter 276: def findIndexMeta(self,path=""):
1.7 dwinter 277: """finde Rueckwaerts im Baum von Pfad ausgehend, dass erste index.meta file
278: @keyword path: default ist "", Pfad auf das Object relativ zum rootFolderName
1.2 dwinter 279: @return: None falls kein index.meta existiert sonst Pfad auf das index.meta
280: """
281: realPath=os.path.normpath(os.path.join(self.rootFolderName,path))
282: #suche index.meta
1.8 dwinter 283: server=xmlrpclib.Server(self.serverUrl)
284: return server.findIndexMeta(realPath)
1.7 dwinter 285:
1.2 dwinter 286:
1.8 dwinter 287:
1.7 dwinter 288: def readObjectsFromPath(self,path="",metaDataId=None):
1.1 dwinter 289: """Liest files aus dem path und speichert im cache _v_filesystem.
290:
1.7 dwinter 291: @keyword path : path relativ zum root folder des Storagesystems
292: @keyword metaDataId: Optional, id des OSAS_Metadata Object, dass benutzt werden soll, generisch wird das erste Object, dass in parent gefunden wird angezeigt.
1.2 dwinter 293: @return: directory der Form [pfad zum Objekt] -> (fileType,metadatum als String)
1.1 dwinter 294: """
1.8 dwinter 295: server=xmlrpclib.Server(self.serverUrl)
1.1 dwinter 296: realPath=os.path.normpath(os.path.join(self.rootFolderName,path))
1.7 dwinter 297:
298: if metaDataId:
299: metaData=getattr(self,metaDataId)
300: if not (getattr(metaData,'meta_type','')=='OSAS_Metadata__neu'):
301: zLOG.LOG('OSAS_browser (readObjectsFromPath)',zLOG.ERROR,"%s is not OSAS_Metadata")
302: metaData=None
303: else:
304: metaDatas=self.ZopeFind(self.aq_parent,obj_metatypes=['OSAS_Metadata__neu'],search_sub=1)
305: if metaDatas:
306: metaData=metaDatas[0][1]
307: else:
308: zLOG.LOG('OSAS_browser (readObjectsFromPath)',zLOG.INFO,"There is no OSAS_Metadata Object")
309: metaData=None
310:
311: #print "md",metaData
1.1 dwinter 312: if realPath.find(self.rootFolderName) <0: #versuch auf Pfad unterhalb des Rootfolder zuzugreifen
313: return {}
314:
315:
1.8 dwinter 316:
317:
318: stats=server.getStat(realPath)
319:
320: if not stats:
1.2 dwinter 321: return None
322:
1.3 dwinter 323: #teste ob schon im cache
1.20 casties 324: #if self._v_fileSystem.has_key(realPath) and (self._v_fileSystem[realPath][0]==stats[stat.ST_MTIME]):
325: #
326: # return self._v_fileSystem[realPath][1]
1.15 dwinter 327:
328: indexMetas=server.getAllIndexMetasOfSubDirs(realPath)
1.13 dwinter 329: dir=indexMetas.keys()
1.11 dwinter 330:
1.1 dwinter 331: ret={}
332: for filename in dir:
1.16 dwinter 333:
1.1 dwinter 334: object=os.path.join(realPath,filename)
1.13 dwinter 335: fileType=indexMetas[filename][0]
1.15 dwinter 336:
1.1 dwinter 337: if fileType:
1.15 dwinter 338: if (fileType=='OSAS_dir') and indexMetas.has_key(".") and indexMetas["."][1]:
1.16 dwinter 339:
1.15 dwinter 340: if(OSAS_helpers.isImageFolder(object,decodeRPC(indexMetas["."][1]))):
1.13 dwinter 341: fileType='OSAS_imageFolder'
1.15 dwinter 342: elif(OSAS_helpers.isVideoFolder(object,decodeRPC(indexMetas["."][1]))):
343: fileType='OSAS_videoFolder'
344: if metaData and indexMetas[filename][1]:
1.16 dwinter 345:
1.15 dwinter 346: ret[object]=(fileType,metaData.getDisplayFieldsAsStr(decodeRPC(indexMetas[filename][1])))
1.7 dwinter 347: else:
1.15 dwinter 348: metaDataStr=self.findEntryInIndexMeta(object)
1.16 dwinter 349:
1.15 dwinter 350: if metaDataStr:
351: display=metaData.getDisplayFieldsAsStr(metaDataStr)
352:
1.21 ! dwinter 353: dom = NonvalidatingReader.parseString(metaDataStr,"http://www.mpiwg-berlin.mpg.de/")
! 354: if len(Ft.Xml.XPath.Evaluate("/file/meta/video-file",contextNode=dom))>0:
1.15 dwinter 355: fileType='OSAS_videoFile'
356:
357: else:
358: display=""
1.16 dwinter 359:
1.15 dwinter 360:
361: ret[object]=(fileType,display)
1.1 dwinter 362:
363: self._v_fileSystem[realPath]=(stats[stat.ST_MTIME],ret) # speicher im chache
364:
365: return ret
366:
367: def giveHandlers(self,path,type):
1.7 dwinter 368: """teste ob fuer diesen Typ, handler definiert sind und gibt einen entsprechenden Link zurueck, der das Object mit diesem Handler ausfuehrt. Die Handler mussen im parent ordner des browser oder einem Subordner davon liegen.
1.2 dwinter 369: @param path: Pfad auf das Objekt
370: @param type: Typ des Objektes
371: @return: (string) html-Fragment, link der das Objekt mit diesem Handler anzeigt.
372: """
1.1 dwinter 373: ret=[]
374:
1.4 dwinter 375: for handler in self.ZopeFind(self.aq_parent,obj_metatypes=['OSAS_HandlerObject__neu'],search_sub=1):
1.15 dwinter 376:
1.4 dwinter 377: if type in handler[1].objectTypes:
1.19 dwinter 378: try:
1.6 dwinter 379: path=path.replace(getattr(handler[1],'ignorePath',''),'')
380: except:
1.19 dwinter 381: pass
1.4 dwinter 382: url=handler[1].prefix%path
383: text=handler[1].title
1.1 dwinter 384: string="""<a target="_blank" href="%s">%s</a>"""%(url,text)
385: ret.append(string)
386: return ret
387:
388:
389: def generateTree(self,path=""):
1.2 dwinter 390: """erzeuge liest die Objekte aus die im Pfad gespeichert sind
1.7 dwinter 391:
392: @keyword path: optional mit default='', Pfad relativ zu rootFolderName
1.2 dwinter 393: @return: List von Tripeln, (link_html,array of handlers,metainformationen) hierbei ist
1.7 dwinter 394: - (string) link_html ein html-Fragement, falls das Objekt vom Typ OSAS_dir ist, ist dies ein Link auf dieses Verzeichnis, sonst der Dateiname
395: - (string) handler sind die Ergebnisse von giveHandlers fuer dieses Objekt
396: - (string) metainformationen die Metainformationen zum Objekt als Ergebnis von readObjectsFromPath
1.2 dwinter 397: """
1.17 dwinter 398:
399: objects=self.getSubDirsFromIndexMeta(path)
400:
1.18 dwinter 401:
1.17 dwinter 402:
403: im=self.readObjectsFromPath(path)
404: if not im:
405: im={}
1.9 dwinter 406:
1.10 dwinter 407:
1.17 dwinter 408:
409:
1.2 dwinter 410: for key in im.keys():
1.17 dwinter 411: #relle pfade hinzufuegen, virtueller wird ueberschrieben
412:
413: objects[key]=im[key]
1.2 dwinter 414:
1.17 dwinter 415:
1.2 dwinter 416:
1.1 dwinter 417: def sortLow(x,y):
418: return cmp(x.lower(),y.lower())
419:
420: ret=[]
421:
422: objectSorted=objects.keys()
423: objectSorted.sort(sortLow)
424: for object in objectSorted:
1.15 dwinter 425:
1.1 dwinter 426: handler=self.giveHandlers(object,objects[object][0])
1.16 dwinter 427: if not(os.path.split(object)[1]=="."):
428: if objects[object][0] in OSASDirObjects:
429:
430: string="""<a href="?path=%s">%s</a>"""%(object,os.path.split(object)[1])
431:
432: ret.append((string,handler,objects[object][1]))
433: elif objects[object][0]=="OSAS_dir_archive":
434: string="""<a href="?path=%s">%s (A)</a>"""%(object,os.path.split(object)[1])
435:
436: ret.append((string,handler,objects[object][1]))
437: else:
438:
439: ret.append((os.path.split(object)[1],handler,objects[object][1]))
1.1 dwinter 440:
441:
442: return ret
443:
444:
445: def path_to_link(self,pathTmp=""):
1.7 dwinter 446: """generates navigation bar for viewfiles
447: @keyword pathTmp: optional, generisch="", pfad der erstellt werden soll
1.18 dwinter 448: @return: html Fragment, pathTmp zerlegt, dass jeder Teil von Pfad unterhalb von rootFolderName direkt angesprungen werden kann.
1.7 dwinter 449: """
1.1 dwinter 450:
451: path=os.path.normpath(os.path.join(self.rootFolderName,pathTmp))
452:
453: URL=self.absolute_url()
454: string=""
455:
456: tmppath=os.path.dirname(path)
457: i=0
458: pathes=[[path, os.path.basename(path)]]
459:
460: while not (len(tmppath)==1):
461:
462: i=i+1
463: if i>20: break
464:
465: pathes.append([tmppath, os.path.basename(tmppath)])
466: tmppath=os.path.dirname(tmppath)
467:
468: while i>=0:
469: if pathes[i][0].find(self.rootFolderName) <0: #versuch auf Pfad unterhalb des Rootfolder zuzugreifen
470: string=string+"<a>"+pathes[i][1]+"</a>/"
471: else:
472: string=string+"<a href="+URL+"?path="+pathes[i][0]+">"+pathes[i][1]+"</a>/"
473:
474: i=i-1
475: return string
476:
477:
478: InitializeClass(OSAS_storeOnline)
1.19 dwinter 479:
1.1 dwinter 480: def manage_addOSAS_storeOnlineForm(self):
1.7 dwinter 481: """interface for adding the OSAS_storeOnline"""
1.1 dwinter 482: pt=PageTemplateFile(os.path.join(package_home(globals()),'zpt','addStoreOnline.zpt')).__of__(self)
483: return pt()
484:
485: def manage_addOSAS_storeOnline(self,id,RESPONSE=None):
1.7 dwinter 486: """add the OSAS_storeOnline
487: @param id: id
488: """
1.1 dwinter 489: newObj=OSAS_storeOnline(id)
490: self._setObject(id,newObj)
491: if RESPONSE is not None:
492: RESPONSE.redirect('manage_main')
493:
FreeBSD-CVSweb <freebsd-cvsweb@FreeBSD.org>
![[BACK]](/cvs/cvsweb/icons/back.gif){kind=icon}
Return to OSAS_browser.py CVS log ![[TXT]](/cvs/cvsweb/icons/text.gif){kind=icon}
![[DIR]](/cvs/cvsweb/icons/dir.gif){kind=icon}
Up to [Repository] / OSA_system2