Annotation of OSA_system2/OSAS_browser.py, revision 1.17
1.1 dwinter 1: """ Classes for displaying, browsing and organizing the archive
2: """
3:
4:
5: import OSAS_helpers
6: from AccessControl import ClassSecurityInfo
7: from Products.PageTemplates.PageTemplateFile import PageTemplateFile
8: from OFS.Folder import Folder
9: from OFS.SimpleItem import SimpleItem
10: from Globals import InitializeClass,package_home
11: import zLOG
1.15 dwinter 12: import base64
1.14 dwinter 13: import bz2
1.1 dwinter 14: import os
15: import os.path
16: import stat
1.2 dwinter 17: import xml.dom.minidom
1.3 dwinter 18: from types import *
1.8 dwinter 19: import xmlrpclib
1.10 dwinter 20: from OSAS_helpers import *
1.8 dwinter 21:
1.15 dwinter 22: def decodeRPC(string):
23: return bz2.decompress(base64.decodestring(string))
24:
1.1 dwinter 25:
26: class OSAS_storeOnline(SimpleItem):
27: """Webfrontend für das Storagesystem
28: liefert Browserumgebung
29: """
30: meta_type="OSAS_StoreOnline__neu"
31:
32: security=ClassSecurityInfo()
33:
34: _v_fileSystem={} #chache fuer filesystem
1.10 dwinter 35: _v_metaFiles={} #chache fuer indexMeta
1.15 dwinter 36:
37: def getParentType(self,path):
38: """getFileType des parentordners"""
39:
40: realPath=os.path.split(path)[0]
41:
42: objects=self.readObjectsFromPath(realPath)
43:
1.16 dwinter 44: try:
45: return objects[os.path.join(realPath,".")][0]
46: except:
47: return ""
48: def getHandlersOfPath(self):
49: """handler des actullen path"""
50: path=self.REQUEST['path']
51: objects=self.readObjectsFromPath(path)
52:
53: typeObject=objects.get(os.path.join(path,"."),None)
54: if not typeObject:
55: return("",[],"")
56: type=typeObject[0]
57:
58: handler=self.giveHandlers(path,type)
59:
60:
61: return (os.path.split(path)[1],handler,objects[os.path.join(path,".")][1],type)
62:
63:
1.10 dwinter 64: def getMetaFile(self,path):
65: """get index.meta and translate it to HTML"""
66: """Lies Metafile ein
67: @param path: Pfad des index.met
68: @return: index.meta file
69: """
70: html=[]
71: server=xmlrpclib.Server(self.serverUrl)
72:
73:
74: f=server.getFile(path+"/index.meta")
75:
76: if not f:
77:
78: return self.getMetaInfoFromIndexMeta(path)
79: #return "NO_METADATA"
80: else:
81:
82: dom = xml.dom.minidom.parseString(f)
83:
84: try:
85: name=getText(dom.getElementsByTagName("name")[0].childNodes)
86: except:
87: name="NOT_DEFINED!!!"
88: try:
89: creator=getText(dom.getElementsByTagName("creator")[0].childNodes)
90: except:
91: creator="NOT_DEFINED!!!"
92:
93: try:
94: creation_date=getText(dom.getElementsByTagName("archive-creation-date")[0].childNodes)
95: except:
96: creation_date="NOT_DEFINED!!!"
97:
98: try:
99: description=getText(dom.getElementsByTagName("description")[0].childNodes)
100: except:
101: description="NOT_DEFINED!!!"
102:
103: try:
104: type=getText(dom.getElementsByTagName("content-type")[0].childNodes)
105: except:
106: type=""
107: if type=="scanned document":
108: html="<h3>Document: "+name+"</h3>"
109: elif type=="folder":
110: html="<h3>Folder: "+name+"</h3>"
111: else:
112: html="<h3>Document: "+name+"</h3>"
113:
114: html=html+"<p><i>created by: "+creator+" at: "+creation_date+"</i></p>"
115: html=html+"<h4>Description</h4><p>"+description+"</p>"
116: try:
117: bib = dom.getElementsByTagName("meta")[0].getElementsByTagName("bib")[0]
118: if bib.attributes.has_key('type'):
119: html=html+"<h4>Info ("+bib.attributes['type'].value+")</h4>"
120: else:
121: html=html+"<h4>Info</h4>"
122: html=html+getBib(bib.childNodes)
123:
124: except:
125: """none"""
1.8 dwinter 126:
1.10 dwinter 127: # html=html.encode('utf-8','replace')+getBib(bib.childNodes).encode('utf-8','replace')
128:
129: return html
130:
131:
132: def getMetaInfoFromIndexMeta(self,path):
133: """metadaten zu path als html aus dem index.meta file zu path (meta tag im file bzw. dir container)
134: @param path: Pfad auf das Object relativ zum rootFolderName
135: @return: metadata als html
136: """
1.16 dwinter 137:
1.10 dwinter 138: xmlInfos=self.findEntryInIndexMeta(path)
1.16 dwinter 139:
1.10 dwinter 140: if xmlInfos:
141: return OSAS_helpers.getMetaInfoFromXML(path,xmlInfos)
142: else:
143: return ""
1.8 dwinter 144:
1.10 dwinter 145: def findEntryInIndexMeta(self,path):
146: """Finde im naechstgelegenden index.meta relativ zu path den entprechenden Eintrag fuer diesen Pfad.
147: @param path: Pfad auf das Object relativ zum rootFolderName
148: @return: den Teil von Index.meta der Informationen zu path enthaelt, None wenn error.
149: """
150:
151: server=xmlrpclib.Server(self.serverUrl)
152: indexMeta=server.findIndexMeta(path) # suche index.meta
1.16 dwinter 153:
1.10 dwinter 154: if not indexMeta:
155: return None
156:
157: realPath=os.path.split(indexMeta)[0]
158: path=os.path.normpath(path)
159:
160: try:
161:
162: dom=xml.dom.minidom.parseString(server.getFile(indexMeta))
163: except:
164: zLOG.LOG("OSAS_browser (findEntryInIndexMeta)",zLOG.ERROR,"Cannot parse: %s"%indexMeta)
1.15 dwinter 165: return None
166:
167: path=path.replace(realPath,'')
168: (searchPath,name)=os.path.split(path)
169: if (len(searchPath)>0) and (searchPath[0]=="/"):
170: if len(searchPath)<=1:
171: searchPath=""
172: else:
173: searchPath=searchPath[1:]
1.10 dwinter 174: #ist path ein directory?
1.15 dwinter 175: xpath="/resource/dir[name='%s' and path='%s']"%(name,searchPath)
176:
177: dirs=xml.xpath.Evaluate(xpath,dom)
1.10 dwinter 178:
1.15 dwinter 179: if len(dirs)>0:
180: return dirs[0].toxml
1.10 dwinter 181:
1.15 dwinter 182: #ist path ein file?
183: xpath="/resource/file[name='%s' and path='%s']"%(name,searchPath)
1.10 dwinter 184:
1.15 dwinter 185: dirs=xml.xpath.Evaluate(xpath,dom)
1.10 dwinter 186:
1.15 dwinter 187: if len(dirs)>0:
188: return dirs[0].toxml()
1.10 dwinter 189:
190: return None
191:
192:
193: def getSubDirsFromIndexMeta(self,path):
194:
195: """Gebe alle path untergeordenten Objekte aus
196: @param path: optional, default ist "", Pfad auf das Object relativ zum rootFolderName
197: @return: Directory [pfad auf das Objekt]->(fileType,''), fileType ist hierbei OSAS_dir_archive falls Object ein directory und OSAS_file_archive falls das Object ein File ist,der zweite Eintrag des Tupels ist zur Zeit immer '', spaeter wird hier die Beschreibung gemaess Metadaten stehen, wie bei readObjectsFromPath.
198: @todo: Rueckgabe einer Beschreibung gemaess Metadaten
199: """
200: ret={}
1.17 ! dwinter 201: startPath=path
1.10 dwinter 202: server=xmlrpclib.Server(self.serverUrl)
203: indexMeta,stats=server.findIndexMetaWithStats(path)#findex index.meta zu path.
1.16 dwinter 204:
1.10 dwinter 205: if not indexMeta:
206: return ret
207:
208: realPath=os.path.split(indexMeta)[0]
209: path=path.replace(realPath,"")
210: if path and (path[0]==os.sep): #falls am Anfang os.sep steht lösche dieses.
211: path=path[1:]
212:
213:
214:
1.17 ! dwinter 215: #teste ob schon im cache zur Zeit kein chache wenn index.meta file nicht im selben ordner wie path.
! 216:
! 217: if self._v_metaFiles.has_key(startPath) and (self._v_metaFiles[realPath][0]==stats[stat.ST_MTIME]) and (path==""):
! 218:
! 219: return self._v_metaFiles[startPath][1]
1.10 dwinter 220:
221: try:
222: dom=xml.dom.minidom.parseString(server.getFile(indexMeta))
223: except:
224: zLOG.LOG("OSAS_browser (getSubDirsFromIndexMeta)",zLOG.ERROR,"Cannot parse: %s"%indexMeta)
225: return ret
226:
227: dirs=[]
228: dirs=dom.getElementsByTagName('dir')+dom.getElementsByTagName('file')
229:
230: for dir in dirs:
231: pathes=dir.getElementsByTagName('path')
232: if pathes:
233: pathX=OSAS_helpers.getText(pathes[0].childNodes)
234: else:
235: pathX=""
236: names=dir.getElementsByTagName('name')
237: if names:
238: name=OSAS_helpers.getText(names[0].childNodes)
239: else:
240: name=""
241:
242: #print "PP",pathX,path
243: if pathX==path:
244: if dir.tagName=="dir":
245: fileType="OSAS_dir_archive"
246: else:
247: fileType="OSAS_file_archive"
248:
249: object=os.path.join(realPath,pathX,name)
250: ret[object.encode('utf-8')]=(fileType,'')
251:
1.17 ! dwinter 252: self._v_metaFiles[startPath]=(stats[stat.ST_MTIME],ret) # speicher im chache
1.10 dwinter 253:
254: return ret
255:
256:
1.1 dwinter 257:
1.8 dwinter 258: def __init__(self,id,serverUrl):
1.7 dwinter 259: """initialize a new instance
260: @param id: Zope id"""
1.1 dwinter 261: self.id = id
1.8 dwinter 262: self.serverUrl = serverUrl
1.1 dwinter 263:
264:
265: security.declareProtected('View','index_html')
266: def index_html(self):
1.2 dwinter 267: """main view either standard template zpt/storeOnline_index_html.zpt or storeOnline_index.html in tree"""
1.1 dwinter 268: if hasattr(self,'storeOnline_index.html'):
269: return getattr(self,'storeOnline_index.html')()
270: else:
271: pt=PageTemplateFile(os.path.join(package_home(globals()),'zpt','storeOnline_index_html.zpt')).__of__(self)
272: return pt()
273:
274:
1.2 dwinter 275: def findIndexMeta(self,path=""):
1.7 dwinter 276: """finde Rueckwaerts im Baum von Pfad ausgehend, dass erste index.meta file
277: @keyword path: default ist "", Pfad auf das Object relativ zum rootFolderName
1.2 dwinter 278: @return: None falls kein index.meta existiert sonst Pfad auf das index.meta
279: """
280: realPath=os.path.normpath(os.path.join(self.rootFolderName,path))
281: #suche index.meta
1.8 dwinter 282: server=xmlrpclib.Server(self.serverUrl)
283: return server.findIndexMeta(realPath)
1.7 dwinter 284:
1.2 dwinter 285:
1.8 dwinter 286:
1.7 dwinter 287: def readObjectsFromPath(self,path="",metaDataId=None):
1.1 dwinter 288: """Liest files aus dem path und speichert im cache _v_filesystem.
289:
1.7 dwinter 290: @keyword path : path relativ zum root folder des Storagesystems
291: @keyword metaDataId: Optional, id des OSAS_Metadata Object, dass benutzt werden soll, generisch wird das erste Object, dass in parent gefunden wird angezeigt.
1.2 dwinter 292: @return: directory der Form [pfad zum Objekt] -> (fileType,metadatum als String)
1.1 dwinter 293: """
1.8 dwinter 294: server=xmlrpclib.Server(self.serverUrl)
1.1 dwinter 295: realPath=os.path.normpath(os.path.join(self.rootFolderName,path))
1.7 dwinter 296:
297: if metaDataId:
298: metaData=getattr(self,metaDataId)
299: if not (getattr(metaData,'meta_type','')=='OSAS_Metadata__neu'):
300: zLOG.LOG('OSAS_browser (readObjectsFromPath)',zLOG.ERROR,"%s is not OSAS_Metadata")
301: metaData=None
302: else:
303: metaDatas=self.ZopeFind(self.aq_parent,obj_metatypes=['OSAS_Metadata__neu'],search_sub=1)
304: if metaDatas:
305: metaData=metaDatas[0][1]
306: else:
307: zLOG.LOG('OSAS_browser (readObjectsFromPath)',zLOG.INFO,"There is no OSAS_Metadata Object")
308: metaData=None
309:
310: #print "md",metaData
1.1 dwinter 311: if realPath.find(self.rootFolderName) <0: #versuch auf Pfad unterhalb des Rootfolder zuzugreifen
312: return {}
313:
314:
1.8 dwinter 315:
316:
317: stats=server.getStat(realPath)
318:
319: if not stats:
1.2 dwinter 320: return None
321:
1.3 dwinter 322: #teste ob schon im cache
1.16 dwinter 323: if self._v_fileSystem.has_key(realPath) and (self._v_fileSystem[realPath][0]==stats[stat.ST_MTIME]):
324:
325: return self._v_fileSystem[realPath][1]
1.15 dwinter 326:
327: indexMetas=server.getAllIndexMetasOfSubDirs(realPath)
1.13 dwinter 328: dir=indexMetas.keys()
1.11 dwinter 329:
1.1 dwinter 330: ret={}
331: for filename in dir:
1.16 dwinter 332:
1.1 dwinter 333: object=os.path.join(realPath,filename)
1.13 dwinter 334: fileType=indexMetas[filename][0]
1.15 dwinter 335:
1.1 dwinter 336: if fileType:
1.15 dwinter 337: if (fileType=='OSAS_dir') and indexMetas.has_key(".") and indexMetas["."][1]:
1.16 dwinter 338:
1.15 dwinter 339: if(OSAS_helpers.isImageFolder(object,decodeRPC(indexMetas["."][1]))):
1.13 dwinter 340: fileType='OSAS_imageFolder'
1.15 dwinter 341: elif(OSAS_helpers.isVideoFolder(object,decodeRPC(indexMetas["."][1]))):
342: fileType='OSAS_videoFolder'
343: if metaData and indexMetas[filename][1]:
1.16 dwinter 344:
1.15 dwinter 345: ret[object]=(fileType,metaData.getDisplayFieldsAsStr(decodeRPC(indexMetas[filename][1])))
1.7 dwinter 346: else:
1.15 dwinter 347: metaDataStr=self.findEntryInIndexMeta(object)
1.16 dwinter 348:
1.15 dwinter 349: if metaDataStr:
350: display=metaData.getDisplayFieldsAsStr(metaDataStr)
351: dom=xml.dom.minidom.parseString(metaDataStr)
352:
353: if len(xml.xpath.Evaluate("/file/meta/video-file",dom))>0:
354: fileType='OSAS_videoFile'
355:
356: else:
357: display=""
1.16 dwinter 358:
1.15 dwinter 359:
360: ret[object]=(fileType,display)
1.1 dwinter 361:
362: self._v_fileSystem[realPath]=(stats[stat.ST_MTIME],ret) # speicher im chache
363:
364: return ret
365:
366: def giveHandlers(self,path,type):
1.7 dwinter 367: """teste ob fuer diesen Typ, handler definiert sind und gibt einen entsprechenden Link zurueck, der das Object mit diesem Handler ausfuehrt. Die Handler mussen im parent ordner des browser oder einem Subordner davon liegen.
1.2 dwinter 368: @param path: Pfad auf das Objekt
369: @param type: Typ des Objektes
370: @return: (string) html-Fragment, link der das Objekt mit diesem Handler anzeigt.
371: """
1.1 dwinter 372: ret=[]
373:
1.4 dwinter 374: for handler in self.ZopeFind(self.aq_parent,obj_metatypes=['OSAS_HandlerObject__neu'],search_sub=1):
1.15 dwinter 375:
1.4 dwinter 376: if type in handler[1].objectTypes:
1.6 dwinter 377: try:
378: path=path.replace(getattr(handler[1],'ignorePath',''),'')
379: except:
380: pass
1.4 dwinter 381: url=handler[1].prefix%path
382: text=handler[1].title
1.1 dwinter 383: string="""<a target="_blank" href="%s">%s</a>"""%(url,text)
384: ret.append(string)
385: return ret
386:
387:
388: def generateTree(self,path=""):
1.2 dwinter 389: """erzeuge liest die Objekte aus die im Pfad gespeichert sind
1.7 dwinter 390:
391: @keyword path: optional mit default='', Pfad relativ zu rootFolderName
1.2 dwinter 392: @return: List von Tripeln, (link_html,array of handlers,metainformationen) hierbei ist
1.7 dwinter 393: - (string) link_html ein html-Fragement, falls das Objekt vom Typ OSAS_dir ist, ist dies ein Link auf dieses Verzeichnis, sonst der Dateiname
394: - (string) handler sind die Ergebnisse von giveHandlers fuer dieses Objekt
395: - (string) metainformationen die Metainformationen zum Objekt als Ergebnis von readObjectsFromPath
1.2 dwinter 396: """
1.17 ! dwinter 397:
! 398: objects=self.getSubDirsFromIndexMeta(path)
! 399:
! 400: print "obje",objects
! 401:
! 402: im=self.readObjectsFromPath(path)
! 403: if not im:
! 404: im={}
1.9 dwinter 405:
1.10 dwinter 406:
1.17 ! dwinter 407:
! 408:
1.2 dwinter 409: for key in im.keys():
1.17 ! dwinter 410: #relle pfade hinzufuegen, virtueller wird ueberschrieben
! 411:
! 412: objects[key]=im[key]
1.2 dwinter 413:
1.17 ! dwinter 414:
1.2 dwinter 415:
1.1 dwinter 416: def sortLow(x,y):
417: return cmp(x.lower(),y.lower())
418:
419: ret=[]
420:
421: objectSorted=objects.keys()
422: objectSorted.sort(sortLow)
423: for object in objectSorted:
1.15 dwinter 424:
1.1 dwinter 425: handler=self.giveHandlers(object,objects[object][0])
1.16 dwinter 426: if not(os.path.split(object)[1]=="."):
427: if objects[object][0] in OSASDirObjects:
428:
429: string="""<a href="?path=%s">%s</a>"""%(object,os.path.split(object)[1])
430:
431: ret.append((string,handler,objects[object][1]))
432: elif objects[object][0]=="OSAS_dir_archive":
433: string="""<a href="?path=%s">%s (A)</a>"""%(object,os.path.split(object)[1])
434:
435: ret.append((string,handler,objects[object][1]))
436: else:
437:
438: ret.append((os.path.split(object)[1],handler,objects[object][1]))
1.1 dwinter 439:
440:
441: return ret
442:
443:
444: def path_to_link(self,pathTmp=""):
1.7 dwinter 445: """generates navigation bar for viewfiles
446: @keyword pathTmp: optional, generisch="", pfad der erstellt werden soll
447: @return: html Fragment, pathTmp zerlegt, dass jeder Teil von Pfad unterhalb von rootFolderName direkt angesprunden werden kann.
448: """
1.1 dwinter 449:
450: path=os.path.normpath(os.path.join(self.rootFolderName,pathTmp))
451:
452: URL=self.absolute_url()
453: string=""
454:
455: tmppath=os.path.dirname(path)
456: i=0
457: pathes=[[path, os.path.basename(path)]]
458:
459: while not (len(tmppath)==1):
460:
461: i=i+1
462: if i>20: break
463:
464: pathes.append([tmppath, os.path.basename(tmppath)])
465: tmppath=os.path.dirname(tmppath)
466:
467: while i>=0:
468: if pathes[i][0].find(self.rootFolderName) <0: #versuch auf Pfad unterhalb des Rootfolder zuzugreifen
469: string=string+"<a>"+pathes[i][1]+"</a>/"
470: else:
471: string=string+"<a href="+URL+"?path="+pathes[i][0]+">"+pathes[i][1]+"</a>/"
472:
473: i=i-1
474: return string
475:
476:
477: InitializeClass(OSAS_storeOnline)
478:
479: def manage_addOSAS_storeOnlineForm(self):
1.7 dwinter 480: """interface for adding the OSAS_storeOnline"""
1.1 dwinter 481: pt=PageTemplateFile(os.path.join(package_home(globals()),'zpt','addStoreOnline.zpt')).__of__(self)
482: return pt()
483:
484: def manage_addOSAS_storeOnline(self,id,RESPONSE=None):
1.7 dwinter 485: """add the OSAS_storeOnline
486: @param id: id
487: """
1.1 dwinter 488: newObj=OSAS_storeOnline(id)
489: self._setObject(id,newObj)
490: if RESPONSE is not None:
491: RESPONSE.redirect('manage_main')
492:
FreeBSD-CVSweb <freebsd-cvsweb@FreeBSD.org>