File:  [Repository] / OSA_system2 / OSAS_browser.py
Revision 1.21: download - view: text, annotated - select for diffs - revision graph
Fri Nov 25 17:49:53 2005 UTC (18 years, 6 months ago) by dwinter
Branches: MAIN
CVS tags: HEAD
fix xpath

    1: """ Classes for displaying, browsing and organizing the archive
    2: """
    3: 
    4: 
    5: import OSAS_helpers
    6: from AccessControl import ClassSecurityInfo
    7: from Products.PageTemplates.PageTemplateFile import PageTemplateFile
    8: from OFS.Folder import Folder
    9: from OFS.SimpleItem import SimpleItem
   10: from Globals import InitializeClass,package_home
   11: import zLOG
   12: import base64
   13: import bz2
   14: import os
   15: import os.path
   16: import stat
   17: import Ft.Xml.XPath
   18: import xml.dom.minidom
   19: from types import *
   20: import xmlrpclib
   21: from OSAS_helpers import *
   22: 
   23: def decodeRPC(string):
   24:     return bz2.decompress(base64.decodestring(string))
   25: 
   26: 
   27: class OSAS_storeOnline(SimpleItem):
   28:     """Webfrontend für das Storagesystem
   29:     liefert Browserumgebung 
   30:     """
   31:     meta_type="OSAS_StoreOnline__neu"
   32:     
   33:     security=ClassSecurityInfo()
   34: 
   35:     _v_fileSystem={} #chache fuer filesystem
   36:     _v_metaFiles={} #chache fuer indexMeta
   37: 
   38:     def getParentType(self,path):
   39:         """getFileType des parentordners"""
   40: 
   41:         realPath=os.path.split(path)[0]
   42: 
   43:         objects=self.readObjectsFromPath(realPath)
   44: 
   45:         try:
   46:             return objects[os.path.join(realPath,".")][0]
   47:         except:
   48:             return ""
   49:     def getHandlersOfPath(self):
   50:         """handler des actullen path"""
   51:         path=self.REQUEST['path']
   52:         objects=self.readObjectsFromPath(path)
   53:         
   54:         typeObject=objects.get(os.path.join(path,"."),None)
   55:         if not typeObject:
   56:             return("",[],"")
   57:         type=typeObject[0]
   58: 
   59:         handler=self.giveHandlers(path,type)
   60: 
   61:         
   62:         return (os.path.split(path)[1],handler,objects[os.path.join(path,".")][1],type)
   63: 
   64:                
   65:     def getMetaFile(self,path):
   66:         """get index.meta and translate it to HTML"""
   67:         """Lies Metafile ein
   68:         @param path: Pfad des index.met        
   69:         @return: index.meta file
   70:         """
   71:         html=[]
   72:         server=xmlrpclib.Server(self.serverUrl)
   73:         
   74: 
   75:         f=server.getFile(path+"/index.meta")
   76:         
   77:         if not f:
   78:               
   79:               return self.getMetaInfoFromIndexMeta(path)
   80:               #return "NO_METADATA"
   81:         else:
   82:                   
   83:            dom = xml.dom.minidom.parseString(f)
   84:            
   85:            try:
   86:                name=getText(dom.getElementsByTagName("name")[0].childNodes)
   87:            except:
   88:                name="NOT_DEFINED!!!"
   89:            try:
   90:                creator=getText(dom.getElementsByTagName("creator")[0].childNodes)
   91:            except:
   92:                creator="NOT_DEFINED!!!"
   93: 
   94:            try:
   95:                creation_date=getText(dom.getElementsByTagName("archive-creation-date")[0].childNodes)
   96:            except:
   97:                creation_date="NOT_DEFINED!!!"
   98: 
   99:            try:
  100:                description=getText(dom.getElementsByTagName("description")[0].childNodes)
  101:            except:
  102:                description="NOT_DEFINED!!!"
  103: 
  104:            try:
  105:             type=getText(dom.getElementsByTagName("content-type")[0].childNodes) 
  106:            except:
  107:             type=""
  108:            if type=="scanned document":
  109:                     html="<h3>Document: "+name+"</h3>"
  110:            elif type=="folder":
  111:                     html="<h3>Folder: "+name+"</h3>"
  112:            else:
  113:                     html="<h3>Document: "+name+"</h3>"
  114: 
  115:            html=html+"<p><i>created by: "+creator+" at: "+creation_date+"</i></p>" 
  116:            html=html+"<h4>Description</h4><p>"+description+"</p>"
  117:            try:
  118:             bib = dom.getElementsByTagName("meta")[0].getElementsByTagName("bib")[0]
  119:             if bib.attributes.has_key('type'):
  120:               html=html+"<h4>Info ("+bib.attributes['type'].value+")</h4>"
  121:             else:
  122:               html=html+"<h4>Info</h4>"
  123:             html=html+getBib(bib.childNodes)
  124: 
  125:            except:
  126:             """none"""
  127: 
  128:     #        html=html.encode('utf-8','replace')+getBib(bib.childNodes).encode('utf-8','replace')
  129: 
  130:            return html
  131: 
  132: 
  133:     def getMetaInfoFromIndexMeta(self,path):
  134:         """metadaten zu path als html aus dem index.meta file zu path (meta tag im file bzw. dir container)
  135:         @param path: Pfad auf das Object relativ zum rootFolderName
  136:         @return: metadata als html
  137:         """
  138: 
  139:         xmlInfos=self.findEntryInIndexMeta(path)
  140: 
  141:         if xmlInfos:
  142:             return OSAS_helpers.getMetaInfoFromXML(path,xmlInfos)
  143:         else:
  144:             return ""
  145:    
  146:     def findEntryInIndexMeta(self,path):
  147:         """Finde im naechstgelegenden index.meta relativ zu path den entprechenden Eintrag fuer diesen Pfad.
  148:         @param path: Pfad auf das Object relativ zum rootFolderName
  149:         @return: den Teil von Index.meta der Informationen zu path enthaelt, None wenn error.
  150:         """
  151:         
  152:         server=xmlrpclib.Server(self.serverUrl)
  153:         indexMeta=server.findIndexMeta(path) # suche index.meta
  154: 
  155:         if not indexMeta:
  156:             return None
  157: 
  158:         realPath=os.path.split(indexMeta)[0]
  159:         path=os.path.normpath(path)
  160: 
  161:         try:
  162:             dom = NonvalidatingReader.parseString(server.getFile(indexMeta),"http://www.mpiwg-berlin.mpg.de/")
  163:            
  164:         except:
  165:             zLOG.LOG("OSAS_browser (findEntryInIndexMeta)",zLOG.ERROR,"Cannot parse: %s"%indexMeta)
  166:             return None
  167:        
  168:         path=path.replace(realPath,'')
  169:         (searchPath,name)=os.path.split(path)
  170:         if (len(searchPath)>0) and (searchPath[0]=="/"):
  171:             if len(searchPath)<=1:
  172:                 searchPath=""
  173:             else:
  174:                 searchPath=searchPath[1:]
  175:         #ist path ein directory? 
  176:         xpath="/resource/dir[name='%s' and path='%s']"%(name,searchPath)
  177:         dirs=Ft.Xml.XPath.Evaluate(xpath,contextNode=dom)
  178: 
  179: 
  180:         if len(dirs)>0:
  181:             return dirs[0].toxml
  182: 
  183:         #ist path ein file?      
  184:         xpath="/resource/file[name='%s' and path='%s']"%(name,searchPath)
  185: 
  186: 
  187:         dirs=Ft.Xml.XPath.Evaluate(xpath,contextNode=dom)
  188:         if len(dirs)>0:
  189:             return dirs[0].toxml()
  190:         
  191:         return None
  192: 
  193: 
  194:     def getSubDirsFromIndexMeta(self,path):
  195:         
  196:         """Gebe alle path untergeordenten Objekte aus
  197:         @param path: optional, default ist "", Pfad auf das Object relativ zum rootFolderName
  198:         @return: Directory [pfad auf das Objekt]->(fileType,''), fileType ist hierbei OSAS_dir_archive falls Object ein directory und OSAS_file_archive falls das Object ein File ist,der zweite Eintrag des Tupels ist zur Zeit immer '', spaeter wird hier die Beschreibung gemaess Metadaten stehen, wie bei readObjectsFromPath.
  199:         @todo: Rueckgabe einer Beschreibung gemaess Metadaten
  200:         """
  201:         ret={}
  202:         startPath=path
  203:         server=xmlrpclib.Server(self.serverUrl)
  204:         indexMeta,stats=server.findIndexMetaWithStats(path)#findex index.meta zu path.
  205: 
  206:         if not indexMeta:
  207:             return ret
  208: 
  209:         realPath=os.path.split(indexMeta)[0]
  210:         path=path.replace(realPath,"")
  211:         if path and (path[0]==os.sep): #falls am Anfang os.sep steht lösche dieses.
  212:             path=path[1:]
  213: 
  214: 
  215: 
  216:         #teste ob schon im cache zur Zeit kein chache wenn index.meta file nicht im selben ordner wie path.
  217: 
  218:         #if self._v_metaFiles.has_key(startPath) and (self._v_metaFiles[realPath][0]==stats[stat.ST_MTIME]) and (path==""):
  219:         #
  220:         #    return self._v_metaFiles[startPath][1]
  221: 
  222:         try:
  223:             dom=xml.dom.minidom.parseString(server.getFile(indexMeta))
  224:         except:
  225:             zLOG.LOG("OSAS_browser (getSubDirsFromIndexMeta)",zLOG.ERROR,"Cannot parse: %s"%indexMeta)
  226:             return ret
  227: 
  228:         dirs=[]
  229:         dirs=dom.getElementsByTagName('dir')+dom.getElementsByTagName('file')
  230:     
  231:         for dir in dirs:
  232:             pathes=dir.getElementsByTagName('path')
  233:             if pathes:
  234:                 pathX=OSAS_helpers.getText(pathes[0].childNodes)
  235:             else:
  236:                 pathX=""
  237:             names=dir.getElementsByTagName('name')
  238:             if names:
  239:                 name=OSAS_helpers.getText(names[0].childNodes)
  240:             else:
  241:                 name=""
  242: 
  243:             #print "PP",pathX,path
  244:             if pathX==path:
  245:                 if dir.tagName=="dir":
  246:                     fileType="OSAS_dir_archive"
  247:                 else:
  248:                     fileType="OSAS_file_archive"
  249: 
  250:                 object=os.path.join(realPath,pathX,name)
  251:                 ret[object.encode('utf-8')]=(fileType,'')
  252: 
  253:         self._v_metaFiles[startPath]=(stats[stat.ST_MTIME],ret) # speicher im chache
  254:       
  255:         return ret
  256: 
  257:         
  258:     
  259:     def __init__(self,id,serverUrl):
  260:         """initialize a new instance
  261:         @param id: Zope id"""
  262:         self.id = id
  263:         self.serverUrl = serverUrl
  264:     
  265: 
  266:     security.declareProtected('View','index_html')
  267:     def index_html(self):
  268:         """main view either standard template zpt/storeOnline_index_html.zpt or storeOnline_index.html in tree"""
  269:         if hasattr(self,'storeOnline_index.html'):
  270:             return getattr(self,'storeOnline_index.html')()
  271:         else:
  272:             pt=PageTemplateFile(os.path.join(package_home(globals()),'zpt','storeOnline_index_html.zpt')).__of__(self)
  273:             return pt()
  274: 
  275: 
  276:     def findIndexMeta(self,path=""):
  277:         """finde Rueckwaerts im Baum von Pfad ausgehend, dass erste index.meta file
  278:         @keyword path: default ist "", Pfad auf das Object relativ zum rootFolderName
  279:         @return: None falls kein index.meta existiert sonst Pfad auf das index.meta
  280:         """
  281:         realPath=os.path.normpath(os.path.join(self.rootFolderName,path))
  282:         #suche index.meta
  283:         server=xmlrpclib.Server(self.serverUrl)
  284:         return server.findIndexMeta(realPath)
  285:         
  286: 
  287:   
  288:     def readObjectsFromPath(self,path="",metaDataId=None):
  289:         """Liest files aus dem path und speichert im cache _v_filesystem.
  290: 
  291:         @keyword path : path relativ zum root folder des Storagesystems
  292:         @keyword metaDataId: Optional, id des OSAS_Metadata Object, dass benutzt werden soll, generisch wird das erste Object, dass in parent gefunden wird angezeigt.
  293:         @return: directory der Form [pfad zum Objekt] -> (fileType,metadatum als String)
  294:         """
  295:         server=xmlrpclib.Server(self.serverUrl)             
  296:         realPath=os.path.normpath(os.path.join(self.rootFolderName,path))
  297: 
  298:         if metaDataId:
  299:             metaData=getattr(self,metaDataId)
  300:             if not (getattr(metaData,'meta_type','')=='OSAS_Metadata__neu'):
  301:                 zLOG.LOG('OSAS_browser (readObjectsFromPath)',zLOG.ERROR,"%s is not OSAS_Metadata")
  302:                 metaData=None
  303:         else:
  304:             metaDatas=self.ZopeFind(self.aq_parent,obj_metatypes=['OSAS_Metadata__neu'],search_sub=1)
  305:             if metaDatas:
  306:                 metaData=metaDatas[0][1]
  307:             else:
  308:                 zLOG.LOG('OSAS_browser (readObjectsFromPath)',zLOG.INFO,"There is no OSAS_Metadata Object")
  309:                 metaData=None
  310:                 
  311:         #print "md",metaData
  312:         if realPath.find(self.rootFolderName) <0: #versuch auf Pfad unterhalb des Rootfolder zuzugreifen
  313:             return {}
  314:             
  315:         
  316:        
  317:         
  318:         stats=server.getStat(realPath)
  319: 
  320:         if not stats:
  321:             return None
  322:         
  323:         #teste ob schon im cache
  324:         #if self._v_fileSystem.has_key(realPath) and (self._v_fileSystem[realPath][0]==stats[stat.ST_MTIME]):
  325:         #    
  326:         #   return self._v_fileSystem[realPath][1]
  327:         
  328:         indexMetas=server.getAllIndexMetasOfSubDirs(realPath)
  329:         dir=indexMetas.keys()
  330:         
  331:         ret={}
  332:         for filename in dir:
  333: 
  334:             object=os.path.join(realPath,filename)
  335:             fileType=indexMetas[filename][0]
  336:             
  337:             if fileType:
  338:                 if (fileType=='OSAS_dir') and indexMetas.has_key(".") and indexMetas["."][1]:
  339: 
  340:                     if(OSAS_helpers.isImageFolder(object,decodeRPC(indexMetas["."][1]))):
  341:                         fileType='OSAS_imageFolder'
  342:                     elif(OSAS_helpers.isVideoFolder(object,decodeRPC(indexMetas["."][1]))):
  343:                         fileType='OSAS_videoFolder'
  344:                 if metaData and indexMetas[filename][1]:
  345: 
  346:                     ret[object]=(fileType,metaData.getDisplayFieldsAsStr(decodeRPC(indexMetas[filename][1])))
  347:                 else:
  348:                     metaDataStr=self.findEntryInIndexMeta(object)
  349: 
  350:                     if metaDataStr:
  351:                         display=metaData.getDisplayFieldsAsStr(metaDataStr)
  352: 
  353:                         dom = NonvalidatingReader.parseString(metaDataStr,"http://www.mpiwg-berlin.mpg.de/")
  354:                         if len(Ft.Xml.XPath.Evaluate("/file/meta/video-file",contextNode=dom))>0:
  355:                             fileType='OSAS_videoFile'
  356:                             
  357:                     else:
  358:                         display=""
  359: 
  360:                     
  361:                     ret[object]=(fileType,display)
  362:             
  363:         self._v_fileSystem[realPath]=(stats[stat.ST_MTIME],ret) # speicher im chache
  364:         
  365:         return ret
  366: 
  367:     def giveHandlers(self,path,type):
  368:         """teste ob fuer diesen Typ, handler definiert sind und gibt einen entsprechenden Link zurueck, der das Object mit diesem Handler ausfuehrt. Die Handler mussen im parent ordner des browser oder einem Subordner davon liegen. 
  369:         @param path: Pfad auf das Objekt
  370:         @param type: Typ des Objektes
  371:         @return: (string) html-Fragment, link der das Objekt mit diesem Handler anzeigt.
  372:         """
  373:         ret=[]
  374:         
  375:         for handler in self.ZopeFind(self.aq_parent,obj_metatypes=['OSAS_HandlerObject__neu'],search_sub=1):
  376:             
  377:             if type in handler[1].objectTypes:
  378:                 try:
  379:                  path=path.replace(getattr(handler[1],'ignorePath',''),'')
  380:                 except:
  381:                    pass
  382:                 url=handler[1].prefix%path
  383:                 text=handler[1].title
  384:                 string="""<a target="_blank" href="%s">%s</a>"""%(url,text)
  385:                 ret.append(string)
  386:         return ret
  387:                       
  388:         
  389:     def generateTree(self,path=""):
  390:         """erzeuge liest die Objekte aus die im Pfad gespeichert sind
  391:         
  392:         @keyword path: optional mit default='', Pfad relativ zu rootFolderName
  393:         @return: List von Tripeln, (link_html,array of handlers,metainformationen) hierbei ist
  394:          - (string) link_html ein html-Fragement, falls das Objekt vom Typ OSAS_dir ist, ist dies ein Link auf dieses Verzeichnis, sonst der Dateiname
  395:          - (string) handler sind die Ergebnisse von giveHandlers fuer dieses Objekt
  396:          - (string) metainformationen die Metainformationen zum Objekt als Ergebnis von readObjectsFromPath
  397:         """
  398: 
  399:         objects=self.getSubDirsFromIndexMeta(path)
  400: 
  401:         
  402:         
  403:         im=self.readObjectsFromPath(path)
  404:         if not im:
  405:             im={}
  406: 
  407: 
  408: 
  409:         
  410:         for key in im.keys():
  411:             #relle  pfade hinzufuegen, virtueller wird ueberschrieben
  412:             
  413:             objects[key]=im[key]
  414:             
  415:         
  416:         
  417:         def sortLow(x,y):
  418:             return cmp(x.lower(),y.lower())
  419:         
  420:         ret=[]
  421:         
  422:         objectSorted=objects.keys()
  423:         objectSorted.sort(sortLow)
  424:         for object in objectSorted:
  425:             
  426:             handler=self.giveHandlers(object,objects[object][0])
  427:             if not(os.path.split(object)[1]=="."):
  428:                 if objects[object][0] in OSASDirObjects:
  429: 
  430:                     string="""<a href="?path=%s">%s</a>"""%(object,os.path.split(object)[1])
  431: 
  432:                     ret.append((string,handler,objects[object][1]))
  433:                 elif objects[object][0]=="OSAS_dir_archive":
  434:                     string="""<a href="?path=%s">%s (A)</a>"""%(object,os.path.split(object)[1])
  435: 
  436:                     ret.append((string,handler,objects[object][1]))
  437:                 else:
  438: 
  439:                     ret.append((os.path.split(object)[1],handler,objects[object][1]))
  440: 
  441:                      
  442:         return ret
  443: 
  444: 
  445:     def path_to_link(self,pathTmp=""):
  446:         """generates navigation bar for viewfiles
  447:         @keyword pathTmp: optional, generisch="", pfad der erstellt werden soll
  448:         @return: html Fragment, pathTmp zerlegt, dass jeder Teil von Pfad unterhalb von rootFolderName direkt angesprungen werden kann.
  449:         """
  450: 
  451:         path=os.path.normpath(os.path.join(self.rootFolderName,pathTmp))
  452:         
  453:         URL=self.absolute_url()
  454:         string=""
  455:         
  456:         tmppath=os.path.dirname(path)
  457:         i=0
  458:         pathes=[[path, os.path.basename(path)]]
  459: 
  460:         while not (len(tmppath)==1):
  461: 
  462:               i=i+1
  463:               if i>20: break
  464: 
  465:               pathes.append([tmppath, os.path.basename(tmppath)])
  466:               tmppath=os.path.dirname(tmppath)
  467: 
  468:         while i>=0:
  469:             if pathes[i][0].find(self.rootFolderName) <0: #versuch auf Pfad unterhalb des Rootfolder zuzugreifen
  470:                 string=string+"<a>"+pathes[i][1]+"</a>/"
  471:             else:
  472:                 string=string+"<a href="+URL+"?path="+pathes[i][0]+">"+pathes[i][1]+"</a>/"
  473:             
  474:             i=i-1
  475:         return string
  476: 
  477: 
  478: InitializeClass(OSAS_storeOnline)
  479:         
  480: def manage_addOSAS_storeOnlineForm(self):
  481:     """interface for adding the OSAS_storeOnline"""
  482:     pt=PageTemplateFile(os.path.join(package_home(globals()),'zpt','addStoreOnline.zpt')).__of__(self)
  483:     return pt()
  484: 
  485: def manage_addOSAS_storeOnline(self,id,RESPONSE=None):
  486:     """add the OSAS_storeOnline
  487:     @param id: id
  488:     """
  489:     newObj=OSAS_storeOnline(id)
  490:     self._setObject(id,newObj)
  491:     if RESPONSE is not None:
  492:         RESPONSE.redirect('manage_main')
  493: 

FreeBSD-CVSweb <freebsd-cvsweb@FreeBSD.org>