1: """ Classes for displaying, browsing and organizing the archive
2: """
3:
4:
5: import OSAS_helpers
6: from AccessControl import ClassSecurityInfo
7: from Products.PageTemplates.PageTemplateFile import PageTemplateFile
8: from OFS.Folder import Folder
9: from OFS.SimpleItem import SimpleItem
10: from Globals import InitializeClass,package_home
11: import zLOG
12: import base64
13: import bz2
14: import os
15: import os.path
16: import stat
17: import Ft.Xml.XPath
18: import xml.dom.minidom
19: from types import *
20: import xmlrpclib
21: from OSAS_helpers import *
22:
23: def decodeRPC(string):
24: return bz2.decompress(base64.decodestring(string))
25:
26:
27: class OSAS_storeOnline(SimpleItem):
28: """Webfrontend für das Storagesystem
29: liefert Browserumgebung
30: """
31: meta_type="OSAS_StoreOnline__neu"
32:
33: security=ClassSecurityInfo()
34:
35: _v_fileSystem={} #chache fuer filesystem
36: _v_metaFiles={} #chache fuer indexMeta
37:
38: def getParentType(self,path):
39: """getFileType des parentordners"""
40:
41: realPath=os.path.split(path)[0]
42:
43: objects=self.readObjectsFromPath(realPath)
44:
45: try:
46: return objects[os.path.join(realPath,".")][0]
47: except:
48: return ""
49: def getHandlersOfPath(self):
50: """handler des actullen path"""
51: path=self.REQUEST['path']
52: objects=self.readObjectsFromPath(path)
53:
54: typeObject=objects.get(os.path.join(path,"."),None)
55: if not typeObject:
56: return("",[],"")
57: type=typeObject[0]
58:
59: handler=self.giveHandlers(path,type)
60:
61:
62: return (os.path.split(path)[1],handler,objects[os.path.join(path,".")][1],type)
63:
64:
65: def getMetaFile(self,path):
66: """get index.meta and translate it to HTML"""
67: """Lies Metafile ein
68: @param path: Pfad des index.met
69: @return: index.meta file
70: """
71: html=[]
72: server=xmlrpclib.Server(self.serverUrl)
73:
74:
75: f=server.getFile(path+"/index.meta")
76:
77: if not f:
78:
79: return self.getMetaInfoFromIndexMeta(path)
80: #return "NO_METADATA"
81: else:
82:
83: dom = xml.dom.minidom.parseString(f)
84:
85: try:
86: name=getText(dom.getElementsByTagName("name")[0].childNodes)
87: except:
88: name="NOT_DEFINED!!!"
89: try:
90: creator=getText(dom.getElementsByTagName("creator")[0].childNodes)
91: except:
92: creator="NOT_DEFINED!!!"
93:
94: try:
95: creation_date=getText(dom.getElementsByTagName("archive-creation-date")[0].childNodes)
96: except:
97: creation_date="NOT_DEFINED!!!"
98:
99: try:
100: description=getText(dom.getElementsByTagName("description")[0].childNodes)
101: except:
102: description="NOT_DEFINED!!!"
103:
104: try:
105: type=getText(dom.getElementsByTagName("content-type")[0].childNodes)
106: except:
107: type=""
108: if type=="scanned document":
109: html="<h3>Document: "+name+"</h3>"
110: elif type=="folder":
111: html="<h3>Folder: "+name+"</h3>"
112: else:
113: html="<h3>Document: "+name+"</h3>"
114:
115: html=html+"<p><i>created by: "+creator+" at: "+creation_date+"</i></p>"
116: html=html+"<h4>Description</h4><p>"+description+"</p>"
117: try:
118: bib = dom.getElementsByTagName("meta")[0].getElementsByTagName("bib")[0]
119: if bib.attributes.has_key('type'):
120: html=html+"<h4>Info ("+bib.attributes['type'].value+")</h4>"
121: else:
122: html=html+"<h4>Info</h4>"
123: html=html+getBib(bib.childNodes)
124:
125: except:
126: """none"""
127:
128: # html=html.encode('utf-8','replace')+getBib(bib.childNodes).encode('utf-8','replace')
129:
130: return html
131:
132:
133: def getMetaInfoFromIndexMeta(self,path):
134: """metadaten zu path als html aus dem index.meta file zu path (meta tag im file bzw. dir container)
135: @param path: Pfad auf das Object relativ zum rootFolderName
136: @return: metadata als html
137: """
138:
139: xmlInfos=self.findEntryInIndexMeta(path)
140:
141: if xmlInfos:
142: return OSAS_helpers.getMetaInfoFromXML(path,xmlInfos)
143: else:
144: return ""
145:
146: def findEntryInIndexMeta(self,path):
147: """Finde im naechstgelegenden index.meta relativ zu path den entprechenden Eintrag fuer diesen Pfad.
148: @param path: Pfad auf das Object relativ zum rootFolderName
149: @return: den Teil von Index.meta der Informationen zu path enthaelt, None wenn error.
150: """
151:
152: server=xmlrpclib.Server(self.serverUrl)
153: indexMeta=server.findIndexMeta(path) # suche index.meta
154:
155: if not indexMeta:
156: return None
157:
158: realPath=os.path.split(indexMeta)[0]
159: path=os.path.normpath(path)
160:
161: try:
162: dom = NonvalidatingReader.parseString(server.getFile(indexMeta),"http://www.mpiwg-berlin.mpg.de/")
163:
164: except:
165: zLOG.LOG("OSAS_browser (findEntryInIndexMeta)",zLOG.ERROR,"Cannot parse: %s"%indexMeta)
166: return None
167:
168: path=path.replace(realPath,'')
169: (searchPath,name)=os.path.split(path)
170: if (len(searchPath)>0) and (searchPath[0]=="/"):
171: if len(searchPath)<=1:
172: searchPath=""
173: else:
174: searchPath=searchPath[1:]
175: #ist path ein directory?
176: xpath="/resource/dir[name='%s' and path='%s']"%(name,searchPath)
177: dirs=Ft.Xml.XPath.Evaluate(xpath,contextNode=dom)
178:
179:
180: if len(dirs)>0:
181: return dirs[0].toxml
182:
183: #ist path ein file?
184: xpath="/resource/file[name='%s' and path='%s']"%(name,searchPath)
185:
186:
187: dirs=Ft.Xml.XPath.Evaluate(xpath,contextNode=dom)
188: if len(dirs)>0:
189: return dirs[0].toxml()
190:
191: return None
192:
193:
194: def getSubDirsFromIndexMeta(self,path):
195:
196: """Gebe alle path untergeordenten Objekte aus
197: @param path: optional, default ist "", Pfad auf das Object relativ zum rootFolderName
198: @return: Directory [pfad auf das Objekt]->(fileType,''), fileType ist hierbei OSAS_dir_archive falls Object ein directory und OSAS_file_archive falls das Object ein File ist,der zweite Eintrag des Tupels ist zur Zeit immer '', spaeter wird hier die Beschreibung gemaess Metadaten stehen, wie bei readObjectsFromPath.
199: @todo: Rueckgabe einer Beschreibung gemaess Metadaten
200: """
201: ret={}
202: startPath=path
203: server=xmlrpclib.Server(self.serverUrl)
204: indexMeta,stats=server.findIndexMetaWithStats(path)#findex index.meta zu path.
205:
206: if not indexMeta:
207: return ret
208:
209: realPath=os.path.split(indexMeta)[0]
210: path=path.replace(realPath,"")
211: if path and (path[0]==os.sep): #falls am Anfang os.sep steht lösche dieses.
212: path=path[1:]
213:
214:
215:
216: #teste ob schon im cache zur Zeit kein chache wenn index.meta file nicht im selben ordner wie path.
217:
218: #if self._v_metaFiles.has_key(startPath) and (self._v_metaFiles[realPath][0]==stats[stat.ST_MTIME]) and (path==""):
219: #
220: # return self._v_metaFiles[startPath][1]
221:
222: try:
223: dom=xml.dom.minidom.parseString(server.getFile(indexMeta))
224: except:
225: zLOG.LOG("OSAS_browser (getSubDirsFromIndexMeta)",zLOG.ERROR,"Cannot parse: %s"%indexMeta)
226: return ret
227:
228: dirs=[]
229: dirs=dom.getElementsByTagName('dir')+dom.getElementsByTagName('file')
230:
231: for dir in dirs:
232: pathes=dir.getElementsByTagName('path')
233: if pathes:
234: pathX=OSAS_helpers.getText(pathes[0].childNodes)
235: else:
236: pathX=""
237: names=dir.getElementsByTagName('name')
238: if names:
239: name=OSAS_helpers.getText(names[0].childNodes)
240: else:
241: name=""
242:
243: #print "PP",pathX,path
244: if pathX==path:
245: if dir.tagName=="dir":
246: fileType="OSAS_dir_archive"
247: else:
248: fileType="OSAS_file_archive"
249:
250: object=os.path.join(realPath,pathX,name)
251: ret[object.encode('utf-8')]=(fileType,'')
252:
253: self._v_metaFiles[startPath]=(stats[stat.ST_MTIME],ret) # speicher im chache
254:
255: return ret
256:
257:
258:
259: def __init__(self,id,serverUrl):
260: """initialize a new instance
261: @param id: Zope id"""
262: self.id = id
263: self.serverUrl = serverUrl
264:
265:
266: security.declareProtected('View','index_html')
267: def index_html(self):
268: """main view either standard template zpt/storeOnline_index_html.zpt or storeOnline_index.html in tree"""
269: if hasattr(self,'storeOnline_index.html'):
270: return getattr(self,'storeOnline_index.html')()
271: else:
272: pt=PageTemplateFile(os.path.join(package_home(globals()),'zpt','storeOnline_index_html.zpt')).__of__(self)
273: return pt()
274:
275:
276: def findIndexMeta(self,path=""):
277: """finde Rueckwaerts im Baum von Pfad ausgehend, dass erste index.meta file
278: @keyword path: default ist "", Pfad auf das Object relativ zum rootFolderName
279: @return: None falls kein index.meta existiert sonst Pfad auf das index.meta
280: """
281: realPath=os.path.normpath(os.path.join(self.rootFolderName,path))
282: #suche index.meta
283: server=xmlrpclib.Server(self.serverUrl)
284: return server.findIndexMeta(realPath)
285:
286:
287:
288: def readObjectsFromPath(self,path="",metaDataId=None):
289: """Liest files aus dem path und speichert im cache _v_filesystem.
290:
291: @keyword path : path relativ zum root folder des Storagesystems
292: @keyword metaDataId: Optional, id des OSAS_Metadata Object, dass benutzt werden soll, generisch wird das erste Object, dass in parent gefunden wird angezeigt.
293: @return: directory der Form [pfad zum Objekt] -> (fileType,metadatum als String)
294: """
295: server=xmlrpclib.Server(self.serverUrl)
296: realPath=os.path.normpath(os.path.join(self.rootFolderName,path))
297:
298: if metaDataId:
299: metaData=getattr(self,metaDataId)
300: if not (getattr(metaData,'meta_type','')=='OSAS_Metadata__neu'):
301: zLOG.LOG('OSAS_browser (readObjectsFromPath)',zLOG.ERROR,"%s is not OSAS_Metadata")
302: metaData=None
303: else:
304: metaDatas=self.ZopeFind(self.aq_parent,obj_metatypes=['OSAS_Metadata__neu'],search_sub=1)
305: if metaDatas:
306: metaData=metaDatas[0][1]
307: else:
308: zLOG.LOG('OSAS_browser (readObjectsFromPath)',zLOG.INFO,"There is no OSAS_Metadata Object")
309: metaData=None
310:
311: #print "md",metaData
312: if realPath.find(self.rootFolderName) <0: #versuch auf Pfad unterhalb des Rootfolder zuzugreifen
313: return {}
314:
315:
316:
317:
318: stats=server.getStat(realPath)
319:
320: if not stats:
321: return None
322:
323: #teste ob schon im cache
324: #if self._v_fileSystem.has_key(realPath) and (self._v_fileSystem[realPath][0]==stats[stat.ST_MTIME]):
325: #
326: # return self._v_fileSystem[realPath][1]
327:
328: indexMetas=server.getAllIndexMetasOfSubDirs(realPath)
329: dir=indexMetas.keys()
330:
331: ret={}
332: for filename in dir:
333:
334: object=os.path.join(realPath,filename)
335: fileType=indexMetas[filename][0]
336:
337: if fileType:
338: if (fileType=='OSAS_dir') and indexMetas.has_key(".") and indexMetas["."][1]:
339:
340: if(OSAS_helpers.isImageFolder(object,decodeRPC(indexMetas["."][1]))):
341: fileType='OSAS_imageFolder'
342: elif(OSAS_helpers.isVideoFolder(object,decodeRPC(indexMetas["."][1]))):
343: fileType='OSAS_videoFolder'
344: if metaData and indexMetas[filename][1]:
345:
346: ret[object]=(fileType,metaData.getDisplayFieldsAsStr(decodeRPC(indexMetas[filename][1])))
347: else:
348: metaDataStr=self.findEntryInIndexMeta(object)
349:
350: if metaDataStr:
351: display=metaData.getDisplayFieldsAsStr(metaDataStr)
352:
353: dom = NonvalidatingReader.parseString(metaDataStr,"http://www.mpiwg-berlin.mpg.de/")
354: if len(Ft.Xml.XPath.Evaluate("/file/meta/video-file",contextNode=dom))>0:
355: fileType='OSAS_videoFile'
356:
357: else:
358: display=""
359:
360:
361: ret[object]=(fileType,display)
362:
363: self._v_fileSystem[realPath]=(stats[stat.ST_MTIME],ret) # speicher im chache
364:
365: return ret
366:
367: def giveHandlers(self,path,type):
368: """teste ob fuer diesen Typ, handler definiert sind und gibt einen entsprechenden Link zurueck, der das Object mit diesem Handler ausfuehrt. Die Handler mussen im parent ordner des browser oder einem Subordner davon liegen.
369: @param path: Pfad auf das Objekt
370: @param type: Typ des Objektes
371: @return: (string) html-Fragment, link der das Objekt mit diesem Handler anzeigt.
372: """
373: ret=[]
374:
375: for handler in self.ZopeFind(self.aq_parent,obj_metatypes=['OSAS_HandlerObject__neu'],search_sub=1):
376:
377: if type in handler[1].objectTypes:
378: try:
379: path=path.replace(getattr(handler[1],'ignorePath',''),'')
380: except:
381: pass
382: url=handler[1].prefix%path
383: text=handler[1].title
384: string="""<a target="_blank" href="%s">%s</a>"""%(url,text)
385: ret.append(string)
386: return ret
387:
388:
389: def generateTree(self,path=""):
390: """erzeuge liest die Objekte aus die im Pfad gespeichert sind
391:
392: @keyword path: optional mit default='', Pfad relativ zu rootFolderName
393: @return: List von Tripeln, (link_html,array of handlers,metainformationen) hierbei ist
394: - (string) link_html ein html-Fragement, falls das Objekt vom Typ OSAS_dir ist, ist dies ein Link auf dieses Verzeichnis, sonst der Dateiname
395: - (string) handler sind die Ergebnisse von giveHandlers fuer dieses Objekt
396: - (string) metainformationen die Metainformationen zum Objekt als Ergebnis von readObjectsFromPath
397: """
398:
399: objects=self.getSubDirsFromIndexMeta(path)
400:
401:
402:
403: im=self.readObjectsFromPath(path)
404: if not im:
405: im={}
406:
407:
408:
409:
410: for key in im.keys():
411: #relle pfade hinzufuegen, virtueller wird ueberschrieben
412:
413: objects[key]=im[key]
414:
415:
416:
417: def sortLow(x,y):
418: return cmp(x.lower(),y.lower())
419:
420: ret=[]
421:
422: objectSorted=objects.keys()
423: objectSorted.sort(sortLow)
424: for object in objectSorted:
425:
426: handler=self.giveHandlers(object,objects[object][0])
427: if not(os.path.split(object)[1]=="."):
428: if objects[object][0] in OSASDirObjects:
429:
430: string="""<a href="?path=%s">%s</a>"""%(object,os.path.split(object)[1])
431:
432: ret.append((string,handler,objects[object][1]))
433: elif objects[object][0]=="OSAS_dir_archive":
434: string="""<a href="?path=%s">%s (A)</a>"""%(object,os.path.split(object)[1])
435:
436: ret.append((string,handler,objects[object][1]))
437: else:
438:
439: ret.append((os.path.split(object)[1],handler,objects[object][1]))
440:
441:
442: return ret
443:
444:
445: def path_to_link(self,pathTmp=""):
446: """generates navigation bar for viewfiles
447: @keyword pathTmp: optional, generisch="", pfad der erstellt werden soll
448: @return: html Fragment, pathTmp zerlegt, dass jeder Teil von Pfad unterhalb von rootFolderName direkt angesprungen werden kann.
449: """
450:
451: path=os.path.normpath(os.path.join(self.rootFolderName,pathTmp))
452:
453: URL=self.absolute_url()
454: string=""
455:
456: tmppath=os.path.dirname(path)
457: i=0
458: pathes=[[path, os.path.basename(path)]]
459:
460: while not (len(tmppath)==1):
461:
462: i=i+1
463: if i>20: break
464:
465: pathes.append([tmppath, os.path.basename(tmppath)])
466: tmppath=os.path.dirname(tmppath)
467:
468: while i>=0:
469: if pathes[i][0].find(self.rootFolderName) <0: #versuch auf Pfad unterhalb des Rootfolder zuzugreifen
470: string=string+"<a>"+pathes[i][1]+"</a>/"
471: else:
472: string=string+"<a href="+URL+"?path="+pathes[i][0]+">"+pathes[i][1]+"</a>/"
473:
474: i=i-1
475: return string
476:
477:
478: InitializeClass(OSAS_storeOnline)
479:
480: def manage_addOSAS_storeOnlineForm(self):
481: """interface for adding the OSAS_storeOnline"""
482: pt=PageTemplateFile(os.path.join(package_home(globals()),'zpt','addStoreOnline.zpt')).__of__(self)
483: return pt()
484:
485: def manage_addOSAS_storeOnline(self,id,RESPONSE=None):
486: """add the OSAS_storeOnline
487: @param id: id
488: """
489: newObj=OSAS_storeOnline(id)
490: self._setObject(id,newObj)
491: if RESPONSE is not None:
492: RESPONSE.redirect('manage_main')
493:
FreeBSD-CVSweb <freebsd-cvsweb@FreeBSD.org>