Annotation of ECHO_content/VLPExtension.py, revision 1.95

1.31      dwinter     1: """
                      2: This module contains extensions which where originally made for the VLP.
                      3: """
1.33      dwinter     4: from OFS.Cache import Cacheable
1.1       dwinter     5: from Products.PageTemplates.PageTemplateFile import PageTemplateFile
                      6: from Products.PageTemplates.PageTemplate import PageTemplate
                      7: from Products.PageTemplates.ZopePageTemplate import ZopePageTemplate
1.26      dwinter     8: from OFS.Image import File
1.11      dwinter     9: import xml.dom.minidom
                     10: import urllib
1.20      dwinter    11: import xmlrpclib
1.26      dwinter    12: import vlp_xmlhelpers
1.47      dwinter    13: import sys
1.48      dwinter    14: import os
                     15: from stat import *
1.26      dwinter    16: from types import *
1.31      dwinter    17: from Globals import package_home
1.62      casties    18: import transaction
1.78      dwinter    19: import Acquisition
1.93      dwinter    20: import re
                     21: import logging
1.20      dwinter    22: 
1.73      casties    23: from Products.ECHO_content.ECHO_collection import *
                     24: from vlp_xmlhelpers import *
                     25: try:
                     26:         from Products.zogiLib import zogiLib
                     27: except:
                     28:         print "Zogilib not installed, VLP_resource will not work"
                     29: 
1.20      dwinter    30: 
                     31: def lemmatize(str):
1.49      dwinter    32:         """takes a str and addes links the dictionary service"""
                     33:         server = xmlrpclib.ServerProxy("http://archimedes.fas.harvard.edu/cgi-bin/donatus-rpc")
                     34:         if server:
                     35:                 splitted=str.split(" ")
                     36:                 wordlist=["<w>%s</w>"%split for split in splitted].join()
                     37:         return wordlist
1.20      dwinter    38: 
1.49      dwinter    39:                 
1.20      dwinter    40: 
1.49      dwinter    41:                 
1.14      dwinter    42: def makeXML(str):
1.49      dwinter    43:           
                     44:             try:
                     45:                     dom=xml.dom.minidom.parseString(str)
                     46:                     return str
                     47:             except:
                     48:                     str=str.replace("& ","&amp; ")
                     49:                     return """<?xml version="1.0" encoding="utf-8" ?><!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Strict//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd"><page>
                     50:                               %s
                     51:                               </page>"""%str
                     52:             
1.70      casties    53: 
                     54: def checkXMLfrag(str):
                     55:     """checks and returns str as XML fragment"""
                     56:     
                     57:     xmltempl = """<?xml version="1.0" encoding="utf-8" ?><!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Strict//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd">
                     58:     <txt>%s</txt>"""
1.73      casties    59: 
1.70      casties    60:     try:
1.73      casties    61:         dom=xml.dom.minidom.parseString(xmltempl%utf8ify(str))
1.70      casties    62:         return str
                     63:     except:
                     64:         str=str.replace("& ","&amp; ")
                     65: 
1.73      casties    66:     dom=xml.dom.minidom.parseString(xmltempl%utf8ify(str))
1.70      casties    67:     return str
                     68:     
1.49      dwinter    69:                      
                     70:             
1.1       dwinter    71: def getText(nodelist):
                     72: 
                     73:     rc = ""
                     74:     for node in nodelist:
1.49      dwinter    75:         if node.nodeType == node.TEXT_NODE:
1.1       dwinter    76:            rc = rc + node.data
                     77:     return rc
                     78: 
1.29      dwinter    79: class sendMailForm(ZopePageTemplate):
1.49      dwinter    80:         """sendMailForm"""
                     81:         meta_type="sendMailForm"
1.29      dwinter    82: 
1.49      dwinter    83:         _default_content_fn = os.path.join(package_home(globals()), 'vlp','sendMail_template.zpt')
1.29      dwinter    84: 
1.49      dwinter    85:         manage_options = ZopePageTemplate.manage_options+(
1.29      dwinter    86:         {'label':'Main Config','action':'main_configForm'},
                     87:         )
                     88: 
1.49      dwinter    89:         main_configForm = PageTemplateFile(
1.29      dwinter    90:     'vlp/changeSendMailForm', globals())
                     91: 
1.49      dwinter    92:         def main_config(self, toAddrs,mailServer, subjectAdd=None, RESPONSE=None):
                     93:                 """main_config"""
                     94:                 self.toAddrs=toAddrs.split("\n")
                     95:                 self.mailServer=mailServer
                     96:                 self.subjectAdd=subjectAdd
                     97:                 if RESPONSE:
                     98:                         RESPONSE.redirect('manage_main')
                     99: 
                    100:         def sendForm(self,fromaddr,subject,content,nextPage="index_html",RESPONSE=None):
                    101:                 """sendform"""
                    102:                 fromaddr=fromaddr.strip("\r\n\t") # sicherstellen dass keine zusaetzlichen headerzeilen eingefuegt werden
                    103:                 subject=subject.strip("\r\n\t") # sicherstellen dass keine zusaetzlichen headerzeilen eingefuegt werden
                    104:                 toaddrs=self.toAddrs
1.29      dwinter   105: 
1.49      dwinter   106:                 subject="%s %s"%(self.subjectAdd,subject)
                    107:                 
                    108:                 msg = ("From: %s\r\nSubject: %s\r\nTo: %s\r\n\r\n"
                    109:                        % (fromaddr, subject, ", ".join(toaddrs)))
                    110:                 server = smtplib.SMTP(self.mailServer)
                    111:                 #server.set_debuglevel(1)
                    112:                 msg=msg+content
                    113:                 server.sendmail(fromaddr, toaddrs, msg)
                    114:                 server.quit()
                    115: 
                    116:                 if RESPONSE:
                    117:                         RESPONSE.redirect(nextPage)
1.29      dwinter   118: 
                    119: manage_addSendMailFormForm = PageTemplateFile(
                    120:     'vlp/addSendMailForm', globals(), __name__='manage_addSendMailFormFrom')
                    121: 
                    122: from urllib import quote
                    123: 
                    124: def manage_addSendMailForm(self, id, toAddrs,mailServer, title=None, text=None, subjectAdd=None,
                    125:                            REQUEST=None, submit=None):
                    126:     "Add a Page Template with optional file content."
                    127:     toAddrsList=toAddrs.split("\n")
                    128:     id = str(id)
                    129:     if REQUEST is None:
                    130:         self._setObject(id, sendMailForm(id, text))
                    131:         ob = getattr(self, id)
                    132:         if title:
                    133:             ob.pt_setTitle(title)
1.49      dwinter   134:         setattr(ob,'toAddrs',toAddrsList)
                    135:         setattr(ob,'mailServer',mailServer)
                    136:         setattr(ob,'subjectAdd',subjectAdd)
1.29      dwinter   137:         return ob
                    138:     else:
                    139:         file = REQUEST.form.get('file')
                    140:         headers = getattr(file, 'headers', None)
                    141:         if headers is None or not file.filename:
                    142:             zpt = sendMailForm(id)
                    143:         else:
                    144:             zpt = sendMailForm(id, file, headers.get('content_type'))
                    145: 
                    146:         self._setObject(id, zpt)
                    147: 
                    148:         try:
                    149:             u = self.DestinationURL()
                    150:         except AttributeError:
                    151:             u = REQUEST['URL1']
                    152: 
                    153:         if submit == " Add and Edit ":
                    154:             u = "%s/%s" % (u, quote(id))
1.49      dwinter   155:             
                    156:         ob = getattr(self, id)
1.29      dwinter   157:         if title:
                    158:             ob.pt_setTitle(title)
1.49      dwinter   159:             
                    160:         setattr(ob,'toAddrs',toAddrsList)
                    161:         setattr(ob,'mailServer',mailServer)
                    162:         setattr(ob,'subjectAdd',subjectAdd)
1.29      dwinter   163:         REQUEST.RESPONSE.redirect(u+'/manage_main')
                    164:     return ''
                    165: 
1.49      dwinter   166:         
1.78      dwinter   167: class VLP_collectionFolder(Folder):
1.92      casties   168:     """klasse fuer folder innerhalb der collection"""
1.78      dwinter   169:     meta_type="VLP_collectionFolder"
                    170:     
1.6       dwinter   171: class VLP_essay(Folder):
1.61      casties   172:     """classe fr VLP essays"""
1.6       dwinter   173: 
                    174:     meta_type="VLP_essay"
                    175: 
1.8       dwinter   176:     manage_options = Folder.manage_options+(
1.49      dwinter   177:                 {'label':'Main Config','action':'ConfigVLP_essayForm'},
                    178:                 {'label':'Generate Essay Template','action':'generateEssayTemplateHTML'},
1.8       dwinter   179:                 )
                    180: 
1.9       dwinter   181:     def content_html(self,type='collection'):
                    182:         """template fuer content"""
                    183:         #templates = self.ZopeFind(self.aq_parent,obj_ids=[type+"_template"])
                    184:         #
                    185:         #if templates:
                    186:         #    return templates[0][1]()
1.49      dwinter   187:         
1.9       dwinter   188:         if hasattr(self,type+"_template"):
                    189:             obj=getattr(self,type+"_template")
                    190:             return obj()
                    191:         else:
1.31      dwinter   192:             pt=PageTemplateFile(os.path.join(package_home(globals()),'zpt','ECHO_%s_template_standard.zpt'%type)).__of__(self)
1.9       dwinter   193:             pt.content_type="text/html"
                    194:             return pt()
                    195: 
1.8       dwinter   196:     def ConfigVLP_essayForm(self):
                    197:         """Form for adding"""
1.31      dwinter   198:         pt=PageTemplateFile(os.path.join(package_home(globals()),'vlp','ChangeVLP_essay.zpt')).__of__(self)
1.8       dwinter   199:         return pt()
                    200: 
                    201:     def ChangeVLP_essay(self,title,label,description,RESPONSE=None):
                    202:         """Change vlp_essay"""
                    203:         self.title=title
                    204:         self.label=label
                    205:         self.description=description
                    206: 
                    207:         if RESPONSE is not None:
                    208:             RESPONSE.redirect('manage_main')
                    209: 
1.6       dwinter   210:     def __init__(self,id,title,label):
                    211:         """init"""
                    212:         self.id=id
                    213:         self.title=title
                    214:         self.label=label
                    215: 
1.17      dwinter   216:     def index_html(self):
1.49      dwinter   217:         
                    218:             """show the rendered file"""
                    219:             
                    220:             if hasattr(self,'essayTemplate.html'):
                    221:                         return getattr(self,'essayTemplate.html')()
                    222: 
                    223:             pt=PageTemplateFile(os.path.join(package_home(globals()),'vlp','essay_template.zpt')).__of__(self)
                    224:             pt.content_type="text/html"
                    225:             return pt()
1.17      dwinter   226: 
                    227:     def generateEssayTemplateHTML(self,RESPONSE=None):
                    228:         """lege standard index.html an"""
                    229: 
1.49      dwinter   230:         if not hasattr(self,'essayTemplate.html'):
1.17      dwinter   231:             zt=ZopePageTemplate('essayTemplate.html')
                    232:             self._setObject('essayTemplate.html',zt)
                    233:             default_content_fn = os.path.join(package_home(globals()),
                    234:                                                'vlp/essay_template.zpt')
                    235:             text = open(default_content_fn).read()
                    236:             zt.pt_edit(text, 'text/html')
                    237: 
                    238:         else:
                    239:             return "already exists!"
                    240:         
                    241:         if RESPONSE is not None:
                    242:             RESPONSE.redirect('manage_main')
                    243: 
1.70      casties   244:     def getPageList(self):
                    245:         """returns sorted list of (id,object) of page objects"""
                    246: 
                    247:         def sortFind(x,y):
                    248:             return cmp(x[0],y[0])
                    249:         
                    250: #        pages=[]
                    251: #        pagestmp=self.ZopeFind(self,obj_metatypes=['DTML Document','File'])
                    252: #        for page in pagestmp:
                    253: #            if not (page[1].getId()[0]=="."):
                    254: #                pages.append(page)
                    255: 
                    256:         pages = self.objectItems(['DTML Document','File'])                        
                    257:         pages.sort(sortFind)
1.73      casties   258:         #logging.debug("pageList=%s"%repr(pages))
1.71      casties   259:         return pages
1.70      casties   260:         
                    261:         
                    262:     def getPageXMLfrag(self, pageNum=None, pageId=None, pageObj=None):
                    263:         """returns XML fragment of page with id"""
1.71      casties   264:         xml = None
                    265:         
1.70      casties   266:         if pageNum is not None:
                    267:             pl = self.getPageList()
                    268:             pageObj = pl[int(pageNum)-1][1]
                    269:             
                    270:         if pageId is not None:
                    271:             pageObj = getattr(self, pageId, None)
                    272:             
                    273:         if pageObj is not None:
                    274:             txt = ""
1.73      casties   275:             if pageObj.meta_type == 'File':
                    276:                 data = pageObj.data
                    277:                 #logging.debug("data=%s txt=%s"%(repr(data),txt))
                    278:                 while data is not None:
                    279:                     if isinstance(data, str):
                    280:                         txt += data
                    281:                         data = None
                    282:                     else:
                    283:                         txt += data.data
                    284:                         data = data.next
1.70      casties   285:         
1.73      casties   286:             else:
                    287:                 # not a File object... perhaps its executable
                    288:                 txt += pageObj()
                    289:                 
1.70      casties   290:             xml = checkXMLfrag(txt)
1.71      casties   291: 
1.73      casties   292:         return unicodify(xml)
1.70      casties   293: 
1.17      dwinter   294: 
1.6       dwinter   295:     def getPage(self,pagenum):
                    296:         """gibt essay page mit num aus"""
                    297:         def sortFind(x,y):
                    298:             return cmp(x[0],y[0])
1.16      dwinter   299:         pages=[]
                    300:         pagestmp=self.ZopeFind(self,obj_metatypes=['DTML Document','File'])
1.49      dwinter   301:         for page in pagestmp:
1.70      casties   302:             if not (page[1].getId()[0]=="."):
                    303:                 pages.append(page)
1.49      dwinter   304:                         
1.6       dwinter   305:         pages.sort(sortFind)
                    306:         #print str(pages[int(pagenum)][1]())
1.52      dwinter   307:         
1.6       dwinter   308:         if pages[int(pagenum)-1][1].meta_type=='File':
1.70      casties   309:             #return makeXML(str(pages[int(pagenum)-1][1]))
                    310:             #txt=pages[int(pagenum)-1][1].data.decode('utf-8')
                    311:             txt=pages[int(pagenum)-1][1].data
                    312:             #print txt.encode('utf-8')
1.94      dwinter   313:             tmp =makeXML(txt)
                    314:             logging.debug(txt)
                    315:             return self.xml2html(tmp,quote="no")
1.6       dwinter   316:         else:
1.70      casties   317:             return self.xml2html(makeXML(pages[int(pagenum)-1][1]()),quote="no")
1.6       dwinter   318:         
                    319:     def nextPage(self,pagenum,url):
1.7       dwinter   320:         pages=len(self.ZopeFind(self,obj_metatypes=['DTML Document','File'])) # teste ob performance ok, sonst in variable
1.6       dwinter   321:         if int(pagenum)+1 <= pages:
                    322:             retstr=url+"?p="+str(int(pagenum)+1)
                    323:             return """<td align="right" <a href="%s">next</a></td>"""%retstr
                    324:         
                    325:     def previousPage(self,pagenum,url):
1.7       dwinter   326:         
1.6       dwinter   327:         if int(pagenum)-1 > 0:
                    328:             retstr=url+"?p="+str(int(pagenum)-1)
                    329:             return """<td align="left" <a href="%s">previous</a></td>"""%retstr
                    330:         
1.19      dwinter   331:     def nextURL(self,pagenum,url):
                    332:         pages=len(self.ZopeFind(self,obj_metatypes=['DTML Document','File'])) # teste ob performance ok, sonst in variable
                    333:         if int(pagenum)+1 <= pages:
                    334:             retstr=url+"?p="+str(int(pagenum)+1)
                    335:             return retstr
                    336:         
1.61      casties   337:     def lastURL(self,pagenum,url):
                    338:         # teste ob performance ok, sonst in variable
                    339:         pages=len(self.ZopeFind(self,obj_metatypes=['DTML Document','File'])) 
                    340:         
                    341:         return url+"?p="+str(pages)
                    342:             
1.19      dwinter   343:     def previousURL(self,pagenum,url):
                    344:         
                    345:         if int(pagenum)-1 > 0:
                    346:             retstr=url+"?p="+str(int(pagenum)-1)
                    347:             return retstr
                    348:         
1.6       dwinter   349:         
                    350: def manage_addVLP_essayForm(self):
                    351:     """Form for adding"""
1.31      dwinter   352:     pt=PageTemplateFile(os.path.join(package_home(globals()),'vlp','AddVLP_essay.zpt')).__of__(self)
1.6       dwinter   353:     return pt()
                    354: 
                    355: def manage_addVLP_essay(self, id,title,label,RESPONSE=None):
1.49      dwinter   356:         """add the copyright"""
1.6       dwinter   357: 
1.49      dwinter   358:         
                    359:         self._setObject(id, VLP_essay(id, title,label))
1.6       dwinter   360: 
1.49      dwinter   361:         if RESPONSE is not None:
                    362:                 RESPONSE.redirect('manage_main')
                    363:         
1.6       dwinter   364: 
1.26      dwinter   365: class VLP_encyclopaedia(VLP_essay):
1.49      dwinter   366:         """essay"""
                    367: 
                    368:         meta_type="VLP_encyclopaedia"
                    369:         
                    370:         manage_options = VLP_essay.manage_options+(
                    371:                 {'label':'Load File','action':'loadNewFileForm'},
                    372:                 )
1.26      dwinter   373: 
1.49      dwinter   374:         
                    375:         def loadNewFileForm(self):
                    376:                 """Neues XML-File einlesen"""
                    377:                 pt=PageTemplateFile(os.path.join(package_home(globals()),'vlp','VLP_newfile.zpt')).__of__(self)
                    378:                 return pt()
                    379: 
                    380:         def loadNewFile(self,RESPONSE=None):
                    381:                 """einlesen des neuen files"""
                    382:                 fileupload=self.REQUEST['fileupload']
                    383:                 if fileupload:
                    384:                         file_name=fileupload.filename
                    385:                         filedata=fileupload.read()
                    386: 
                    387:                         argv=vlp_xmlhelpers.proj2hash(self,filedata)
                    388:                         textsStr=string.join(argv['text']).encode('utf-8')
                    389:                         
                    390:                         texts=textsStr.split("<pb/>")
                    391:                         
                    392:                         i=0
                    393:                         for text in texts:
                    394:                                 i+=1
                    395:                                 pageName='page%03d.xml'%i
                    396:                                 pages=self.ZopeFind(self,obj_ids=[pageName])
                    397:                                 if pages:
                    398:                                         pages[0][1].update_data(text)
                    399: 
                    400:                                 else:
                    401:                                         zt=File(pageName,pageName,text,content_type="text/plain")
                    402:                                         self._setObject(pageName,zt)
                    403:                                 
                    404:                 if RESPONSE is not None:
                    405:                         RESPONSE.redirect('manage_main')
                    406:                         
                    407:         
1.26      dwinter   408: def manage_addVLP_encycForm(self):
                    409:     """Form for adding"""
1.31      dwinter   410:     pt=PageTemplateFile(os.path.join(package_home(globals()),'vlp','AddVLP_encyc.zpt')).__of__(self)
1.26      dwinter   411:     return pt()
                    412: 
                    413: def manage_addVLP_encyc(self, id,title,label,RESPONSE=None):
1.49      dwinter   414:         """add the copyright"""
1.26      dwinter   415: 
1.49      dwinter   416:         
                    417:         self._setObject(id, VLP_encyclopaedia(id, title,label))
1.26      dwinter   418: 
1.49      dwinter   419:         if RESPONSE is not None:
                    420:                 RESPONSE.redirect('manage_main')
                    421:         
1.41      dwinter   422: class VLP_subcollection(ECHO_collection):
1.49      dwinter   423:         """ subcollection of elements"""
                    424: 
                    425:         meta_type="VLP_subcollection"
                    426:         
1.53      dwinter   427:         def getVLPSubcollectionToc(self,type):
                    428:             
                    429:             #different ordering depending on the type
                    430:             if(type == "(Collection)"):
                    431:                sort= "shortreference"
                    432:             else:
                    433:                sort = "startpages"
                    434:            
                    435:            #content of journals also displayed if not online
                    436:            
1.54      dwinter   437:             if (type == "(JournalVolume)"):
1.53      dwinter   438:                online =""
                    439:             else:
                    440:                online ="AND online = 1"
                    441:             sort=self.collectionSort(type)
                    442:         
                    443:             item = [x for x in self.ZSQLSimpleSearch("""SELECT * FROM vl_literature 
1.58      dwinter   444:                                  WHERE volumeid ~ '%s\\\\M' """%self.getId()
1.53      dwinter   445:                                  + """ %s AND not referenceType='%s' """%(online,type)
                    446:                                  + """ORDER BY """ + sort)]
                    447:         
                    448:             tocItem = [x for x in self.ZSQLSimpleSearch("""SELECT * FROM vl_literature 
1.56      dwinter   449:                                  WHERE reference = '%s' """%self.getId()
1.53      dwinter   450:                                  + """AND online = 1 AND referenceType='%s' """%type
                    451:                                  + """ORDER BY """ + sort)]
                    452:             
                    453:             
                    454: 
                    455:             return tocItem+item
                    456:             
1.49      dwinter   457:         def checkForFrontMatter(self,item):
                    458:                 """Teste ob Frontmatter exists"""
                    459:                 if not item==self.getId():
                    460:                         return False
                    461:                 
                    462:                 if self.ZopeFind(self,obj_ids=[self.getId()]):
                    463:                         return True
                    464:                 else:
                    465:                         return False
                    466:                 
                    467:         def generateSubCollectionFromDB(self):
                    468:                 """erzeuge subcollection"""
                    469:                 for item in self.ZSQLSimpleSearch("select * from vl_literature where volumeid like '%s'"%self.id):
                    470:                         manage_addECHO_link(self,item.reference,item.titlerefdisplay,item.titlerefdisplay)
                    471: 
1.41      dwinter   472: 
1.49      dwinter   473:         def index_html(self):
                    474:                 """erzeuge darstellung"""
                    475:                 
                    476:                 if hasattr(self,'subCollection_template.html'):
                    477:                         return getattr(self,'subCollection_template.html')()
1.43      dwinter   478: 
1.49      dwinter   479:                 pt=zptFile(self, 'vlp/subCollection_template.zpt')
                    480:                 return pt()
1.41      dwinter   481: 
                    482: 
                    483: def manage_addVLP_subCollection(self,id,title,label,RESPONSE=None):
                    484: 
1.49      dwinter   485:         self._setObject(id,VLP_subcollection(id,title,label))
1.41      dwinter   486: 
1.49      dwinter   487:         if RESPONSE is not None:
                    488:                 RESPONSE.redirect('manage_main')
1.41      dwinter   489: 
1.78      dwinter   490: from zope.publisher.interfaces import IPublishTraverse
                    491: from zope.interface import implements
                    492: from zope.publisher.interfaces import NotFound 
1.92      casties   493: #from zope.app import zapi 
1.78      dwinter   494: from zope.component import queryMultiAdapter
1.86      dwinter   495: try:
                    496:    from ZPublisher.BaseRequest import DefaultPublishTraverse
                    497: except:
                    498:    pass
1.6       dwinter   499: 
1.78      dwinter   500: class VLP_collection(ECHO_collection,Acquisition.Explicit):
1.2       dwinter   501:     """VLP spezifische Erweiterung der Collection"""
                    502: 
1.78      dwinter   503: 
                    504:     
                    505:     implements(IPublishTraverse)
1.93      dwinter   506:     
                    507:     
                    508:     def foxridgePath2vlp(self,url,mk,RESPONSE=None):
                    509:         """convertiert einen pfad zu einer url in vlp"""
                    510:         litRe = re.match(r".*lit([0-9]*)",url)
                    511:         logging.debug("foxridgePath2vlp URL:"+repr(url))
                    512:         lit = "lit"+litRe.group(1)
                    513:         splitted=url.split("/")
                    514:         path=splitted[-1].split(".")[0]
                    515:         newUrl=lit+"?p=%s&mk=%s"%(path,mk)
                    516:         
                    517:         if RESPONSE:
                    518:             RESPONSE.redirect(newUrl)
                    519:             return
                    520:             
                    521:         return newUrl
                    522:       
1.78      dwinter   523:     def findObjFromLitName(self,fileName):
                    524:         if not fileName[0:3]=="lit":
                    525:             logging.error("getOrCreateFolder wrong filename: %s"%fileName)
                    526:             return None
                    527:         
                    528:         
                    529:         restName="%08d"%int(fileName[3:])
                    530:         
                    531:         fs=(restName[0:2],restName[0:4],restName[0:6])
                    532:         
                    533:         current =self
                    534:         for f in fs:
                    535:             obj = getattr(current,f,None)
                    536:             if not obj: #subfolder existiert nicht
                    537:                 return None
                    538:             current=obj
                    539:             
                    540:         return getattr(current,fileName,None)
                    541:         
                    542:     def publishTraverse(self,request,name):
                    543:         """change the traversal if literature object"""
                    544:         
                    545:         actual_url=request['ACTUAL_URL']
                    546:         lastActual=actual_url.split("/")[-1]
1.84      dwinter   547:         logging.debug("pub_trav:"+actual_url)
1.78      dwinter   548:    
                    549:         if name.startswith("lit"): #umleitung wenn lit aufgerufen wirk
                    550:             # umleitung auf den eigentlichen folder nur wenn direkt der Folder litXXX oder dessen index_html methode aufgerufen wird
1.90      dwinter   551:             if lastActual.startswith("lit") or (lastActual=="index_html") or (lastActual=="index_meta") or   (lastActual=="getTitle") or   (lastActual=="getMetaDataLink") or (lastActual=="hasTranscription") or (lastActual=="transcription"): 
1.78      dwinter   552:                 #obj=self. ZopeFind(self,obj_ids=[name],search_sub=1)
                    553:                 ob=self.findObjFromLitName(name)
                    554:                 if not ob:
                    555:                     return "LIt not found"
                    556:                 else:
                    557:           
1.84      dwinter   558:                     logging.debug("request:"+repr(ob))
1.78      dwinter   559:                     request.response.setStatus(200)
1.81      dwinter   560:                     #if (lastActual=="index_meta"):
                    561:                    #     logging.debug("index_meta requested")
                    562:                    #     return ob.index_meta
1.78      dwinter   563:                     return ob
1.82      dwinter   564:                 
1.78      dwinter   565:             else: ## andern falls transversiere zum parent.
                    566:                 obj = self.aq_parent
                    567:                 return obj
                    568:         else: # mache gar nichts falls nicht lit aufgerufen wird
                    569:  
                    570:            
                    571:             tr=DefaultPublishTraverse(self, request)
                    572:             ob= tr.publishTraverse(request, name)
                    573:        
                    574:             return ob
                    575:          #raise NotFound(self.context, name, request) 
                    576:             #return repr(request)
1.41      dwinter   577:     
1.3       dwinter   578:     meta_type="VLP_collection"
                    579:     manage_options=ECHO_collection.manage_options+(
                    580:         {'label':'Change Path','action':'VLP_path_configForm'},
                    581:         {'label':'Update Library','action':'updateCollection'},
                    582:         {'label':'Update Metadata','action':'updateCollectionMD'},
                    583:         )
1.83      dwinter   584:     def getAllRessources(self):
                    585:         """getallressources"""
                    586:         res=self.ZopeFind(self,obj_metatypes=['VLP_resource'],search_sub=1)
                    587:         ret=[]
                    588:         for r in res:
                    589:             ret.append([r[0],r[1].absolute_url()])
                    590:         
                    591:         return ret
                    592:         
1.65      casties   593:     def generateSubCollections(self,errorsTXT="",forceUpdate=False,RESPONSE=None):
1.63      casties   594:         """erzeuge subcollectionen"""
                    595:         logging.debug("generateSubCollections")
                    596:         founds=self.ZSQLSimpleSearch("select * from vl_literature where referencetype in ('(Edited Book)','(Book)','(Collection)','(JournalVolume)','(Generic Container)')")
                    597:         
1.65      casties   598:         if RESPONSE is not None:
                    599:             RESPONSE.setHeader('Content-Type','text/html')
                    600:             self.REQUEST.RESPONSE.write("<h2>Create Subcollections</h2>\n")
1.63      casties   601:         for found in founds:
                    602:             try:
                    603:                 litid = str(found.reference)
1.79      dwinter   604:                 foundCol=self.findObjFromLitName(litid)
                    605:                 #foundCol=self.ZopeFind(self,obj_ids=[litid])
1.63      casties   606:                 if foundCol:
1.79      dwinter   607:                     col = foundCol
                    608:                     logging.debug("generateSubCollections: subcollection %s exists (%s)"%(repr(col),found.reference))
1.84      dwinter   609:                     logging.debug(repr([col.title,found.titlerefdisplay,col.label,found.titlerefdisplay]))
1.88      dwinter   610:                     if (unicodify(col.title) != unicodify(found.titlerefdisplay)) or (unicodify(col.label) != unicodify(found.titlerefdisplay)):
1.65      casties   611:                         # subcollection seems to have changed    
                    612:                         logging.debug("generateSubCollections: subcollection has changed, recreating!")
1.79      dwinter   613:                         col.aq_parent.manage_delObjects([col.getId()])
                    614:                         manage_addVLP_subCollection(self.getOrCreateFolderForFile(litid),litid,found.titlerefdisplay,found.titlerefdisplay)
1.65      casties   615:                 else:
                    616:                     logging.debug("generateSubCollections: creating new subcollection %s"%found.reference)
1.79      dwinter   617:                     manage_addVLP_subCollection(self.getOrCreateFolderForFile(litid),litid,found.titlerefdisplay,found.titlerefdisplay)
1.64      casties   618:                 
                    619:                 #teste ob es Images auf dem Server gibt mit gleichem Namen (frontmatter)
                    620:                 if os.path.exists(os.path.join(self.vlp_basis,litid)):
1.65      casties   621:                     logging.debug("generateSubCollections: found frontmatter in %s"%litid)
1.79      dwinter   622:                     obj=self.findObjFromLitName(litid)
1.64      casties   623:                     if not self.ZopeFind(obj,obj_ids=[litid]):
                    624:                         metalink=self.REQUEST['URL1']+"/"+litid+"/"+litid+"/index_meta"
                    625:                         newObj=VLP_resource(litid,'',metalink,litid,litid,litid,'generated','book','','','','','','')
                    626:                         obj._setObject(litid,newObj)
                    627:                         
                    628:                     genObj=getattr(obj,litid)
1.65      casties   629:                     genObj.createIndexFile(forceUpdate=forceUpdate)
                    630: 
                    631:                 if RESPONSE is not None:
                    632:                     self.REQUEST.RESPONSE.write("<p>%s</p>\n"%litid)
1.79      dwinter   633:                 logging.debug("<p>%s</p>\n"%litid)
1.49      dwinter   634: 
1.63      casties   635:             except:
                    636:                 error=sys.exc_info()[0:2]
                    637:                 logging.error("generateSubCollections: ERROR in %s"%litid)
1.65      casties   638:                 if RESPONSE is not None:
1.84      dwinter   639:                     RESPONSE.write("<p>(ERROR  updateII(%s): %s %s  TXT: %s)\n</p>"%(litid,error[0],error[1],sys.exc_info()[2]))
1.65      casties   640:                     RESPONSE.write("<p>(ERROR (%s): %s %s)</p>\n"%(litid,error[0],error[1]))
1.84      dwinter   641:                 logging.error("generateSubCollections: %s %s"%error)
                    642:                 self.REQUEST.RESPONSE.write("(ERROR (%s): %s %s)\n"%(litid,repr(error[0]),repr(error[1])))
1.65      casties   643:                 errorsTXT+="<p>ERROR: No subcollection of %s (ERROR: %s %s)</p>\n"%(litid,error[0],error[1])
1.84      dwinter   644:                 errorsTXT+="<p>No subcollection of %s  "%litid+"(ERROR: %s %s)</p>"%error
1.63      casties   645:                 
                    646:         return errorsTXT
1.49      dwinter   647:             
1.3       dwinter   648:     def VLP_path_configForm(self):
1.5       dwinter   649:         """change pt"""
1.44      dwinter   650:         pt=PageTemplateFile(os.path.join(package_home(globals()),'vlp','ChangeVLPPath.zpt')).__of__(self)
1.3       dwinter   651:         return pt()
                    652: 
                    653:     def VLP_path_config(self,path,RESPONSE=None):
                    654:         """config"""
1.44      dwinter   655:         self.vlp_basis=path
1.3       dwinter   656:         if RESPONSE is not None:
                    657:             RESPONSE.redirect('manage_main')
                    658: 
1.78      dwinter   659:     
                    660:     def getOrCreateFolderForFile(self,fileName):
                    661:         
                    662:         if not fileName[0:3]=="lit":
                    663:             logging.error("getOrCreateFolder wrong filename: %s"%fileName)
                    664:             return None
                    665:         
1.89      dwinter   666:         try:
                    667:             restName="%08d"%int(fileName[3:])
                    668:         except:
                    669:             logging.error("getOrCreateFolder wrong filename: %s"%fileName)
                    670:             return None
1.78      dwinter   671:         
                    672:         fs=(restName[0:2],restName[0:4],restName[0:6])
                    673:         
                    674:         current =self
                    675:         for f in fs:
                    676:             obj = getattr(current,f,None)
                    677:             if not obj:
                    678:                  newObj=VLP_collectionFolder(f)
                    679:                  current._setObject(f,newObj)
                    680:                  obj = getattr(current,f)
                    681:             current=obj
                    682:             
                    683:         return current
                    684:         
1.84      dwinter   685:     def changeOrAddResources(self,forceUpdate=False,RESPONSE=None):
                    686:         """changes ord updates all resources found in the file system"""
                    687:         
1.49      dwinter   688:         errorsTXT="<h2>Errors</h2>"
1.65      casties   689:         if RESPONSE is not None:
                    690:             RESPONSE.setHeader('Content-Type','text/html')
                    691:             RESPONSE.write("<html><body>")
                    692: 
1.44      dwinter   693:         files=os.listdir(self.vlp_basis)
1.75      dwinter   694:         i=0
1.3       dwinter   695:         for fileName in files:
1.75      dwinter   696:             if i<100:
                    697:                 i+=1
                    698:             else:
                    699:                 i=0
1.76      dwinter   700:                 j=0
                    701:                 while j<5:
                    702:                     try:
                    703:                         transaction.get().commit()  
                    704:                         j=6
                    705:                     except:
                    706:                         logging.error("Commit: %s"%j)
                    707:                         j+=1
                    708:                         
1.75      dwinter   709:                 RESPONSE.write("<p>committed</p>")
1.3       dwinter   710:             if fileName[0:3]=="lit":
                    711:                 metalink=self.REQUEST['URL1']+"/"+fileName+"/index_meta"
1.78      dwinter   712:                 
                    713:                 folder=self.getOrCreateFolderForFile(fileName) #get the folder where fileName lives or should live
                    714:                 if not folder: #folder gave an error
                    715:                     continue
1.49      dwinter   716:                 try:
1.78      dwinter   717:                     if not hasattr(folder,fileName):
1.65      casties   718:                         # create new resource
1.63      casties   719:                         logging.debug("updateCollection: new %s"%fileName)
1.65      casties   720:                         if RESPONSE is not None:
                    721:                             RESPONSE.write("<p>new: %s</p>\n"%fileName)
1.77      casties   722:                         logging.debug("new: %s \n"%fileName)
1.63      casties   723:                         newObj=VLP_resource(fileName,'',metalink,fileName,fileName,fileName,'generated','book','','','','','','')
1.78      dwinter   724:                         
                    725:                         folder._setObject(fileName,newObj)
1.49      dwinter   726:                 
1.65      casties   727:                     if RESPONSE is not None:
                    728:                         RESPONSE.write("<p>got: %s "%fileName)
1.78      dwinter   729: 
                    730:                     genObj=getattr(folder,fileName)
                    731:                     logging.debug("got: %s "%fileName)
                    732: 
1.63      casties   733:                     logging.debug("updateCollection: inspecting %s"%fileName)
1.65      casties   734:                     # create index
1.63      casties   735:                     if hasattr(genObj,'createIndexFile'):
                    736:                         try:
                    737:                             logging.debug("updateCollection: creating index for %s"%fileName)
1.65      casties   738:                             msg = genObj.createIndexFile(forceUpdate=forceUpdate)
                    739:                             if msg and RESPONSE is not None:
                    740:                                 RESPONSE.write(msg)
1.63      casties   741:                         except:
                    742:                             error=sys.exc_info()[0:2]
1.65      casties   743:                             if RESPONSE is not None:
1.84      dwinter   744:                                 RESPONSE.write("(ERROR Update(%s): %s %s %s) "%(fileName,error[0],error[1],sys.exc_info()[2]))
1.65      casties   745:                             errorsTXT+="<p>ERROR creating index for %s "%fileName+"(ERROR: %s %s)</p>\n"%error
                    746:                     
                    747:                     # update pageSizeSum for subcollections
1.63      casties   748:                     if genObj.meta_type=="VLP_subcollection":
1.65      casties   749:                         if RESPONSE is not None:
                    750:                             RESPONSE.write(" is subcollection")
1.63      casties   751:                         logging.debug("updateCollection: %s is subcollection"%fileName)
                    752:                         genObj.pageSizeSum=getattr(genObj,fileName).getPageSizeSum()
                    753:                     else:
                    754:                         genObj.pageSizeSum=genObj.getPageSizeSum()
1.65      casties   755: 
                    756:                     if RESPONSE is not None:
                    757:                         RESPONSE.write("</p>\n")
                    758:                        
1.49      dwinter   759:                 except:
1.63      casties   760:                     error=sys.exc_info()[0:2]
1.65      casties   761:                     logging.error("updateCollection: ERROR in %s (%s %s)"%(fileName,error[0],error[1]))
                    762:                     if RESPONSE is not None:
1.84      dwinter   763:                          RESPONSE.write("(ERROR  updateII(%s): %s %s %s) "%(fileName,error[0],error[1],sys.exc_info()[2]))
1.65      casties   764:                     errorsTXT+="<p>File not created:%s  (ERROR: %s %s)</p>\n"%(fileName,error[0],error[1])
1.84      dwinter   765:         return errorsTXT
                    766:      
1.88      dwinter   767:     def updateCollection(self,forceUpdate=True,RESPONSE=None):
1.84      dwinter   768:         """liest verzeichnisse aus dem pfad und legt sie dann als objekte in den ordner"""
                    769:         
                    770:         # update subcollections 
                    771:         errorsTXT=""   
                    772:         errorsTXT+=self.changeOrAddResources(forceUpdate, RESPONSE);
1.65      casties   773:         errorsTXT+=self.generateSubCollections(forceUpdate=forceUpdate,RESPONSE=RESPONSE)
1.60      casties   774:         errorsTXT+="\n"
1.65      casties   775:         if RESPONSE is not None:
                    776:             RESPONSE.write(errorsTXT)
                    777:             RESPONSE.write("</body></html>")
1.3       dwinter   778: 
                    779:     def updateCollectionMD(self,RESPONSE=None):
                    780:         """updateMD"""
1.44      dwinter   781:         files=os.listdir(self.vlp_basis)
1.3       dwinter   782:         for fileName in files:
1.4       dwinter   783:             if fileName[0:3]=="lit":
1.3       dwinter   784:                 genObj=getattr(self,fileName)
                    785:                 genObj.copyIndex_meta2echo_resource()
                    786:                 genObj.generate_title()
                    787: 
                    788:         if RESPONSE is not None:
                    789:             RESPONSE.redirect('manage_main')
                    790: 
1.20      dwinter   791:     def copyFullTextsFromDB(self,RESPONSE=None):
1.49      dwinter   792:             """copy fulltext aus DB"""
1.2       dwinter   793: 
1.49      dwinter   794:             ress=self.ZopeFind(self,obj_metatypes=['VLP_resource'])
                    795:             ret=""
                    796:             for res in ress:
                    797:                     tmp=res[1].copyTranscriptionFromDB()
                    798:                     ret+=tmp
                    799: 
                    800:                     if RESPONSE:
                    801:                             RESPONSE.write(tmp+"\n")
                    802:             if not RESPONSE:                
                    803:                     return ret
                    804:             else:
                    805:                     RESPONSE.write("END\n")
                    806:                     
                    807:             
1.2       dwinter   808: def manage_addVLP_collectionForm(self):
                    809:         """Form for adding a ressource"""
1.31      dwinter   810:         pt=PageTemplateFile(os.path.join(package_home(globals()),'vlp','AddVLP_collectionForm.zpt')).__of__(self)
1.2       dwinter   811:         return pt()
                    812: 
                    813: 
                    814: 
1.3       dwinter   815: def manage_addVLP_collection(self,id,title,label,description,contentType,responsible,weight,sortfield,path,coords="",secondaryLinkTitle="",secondaryLink="",credits=None,RESPONSE=None,imageTag="",bgcolour=""):
1.2       dwinter   816:     """add a echo collection"""
                    817:     
                    818: 
                    819:     newObj=VLP_collection(id,title,label,description,contentType,responsible,credits,weight,sortfield,coords,secondaryLinkTitle=secondaryLinkTitle,secondaryLink=secondaryLink,imageTag=imageTag,bgcolour="")
                    820: 
                    821:     self._setObject(id,newObj)
1.3       dwinter   822:     setattr(newObj,'path',path)
1.2       dwinter   823: 
                    824:     if RESPONSE is not None:
                    825:         RESPONSE.redirect('manage_main')
                    826: 
                    827: 
1.1       dwinter   828: 
1.33      dwinter   829: class VLP_resource(ECHO_resource,Cacheable):
1.1       dwinter   830:     """VLP spezifische Erweiterung"""
                    831: 
                    832:     meta_type="VLP_resource"
                    833: 
1.88      dwinter   834:     def _p_resolveConflict(self,oldstate,savedstate,newstate):
                    835:         logging.debug("updateCollection: Have to resolve conflict!")
                    836:         return newstate
                    837: 
1.44      dwinter   838:     #vlp_basis="/mpiwg/online/permanent/vlp"
1.1       dwinter   839: 
                    840:     
1.85      dwinter   841:     
1.1       dwinter   842:     referencetypes=[]
                    843: 
1.35      dwinter   844:     manage_options=ECHO_resource.manage_options+Cacheable.manage_options+(
1.1       dwinter   845:         {'label':'Update Index','action':'createIndexFile'},
                    846:         {'label':'Reset MetaLink','action':'resetMetaLink'},
                    847:         {'label':'Generate Title','action':'generate_title'},
1.49      dwinter   848:         {'label':'Generate Library Template','action':'generateLibraryTemplateHTML'},
1.1       dwinter   849:         )
                    850: 
1.85      dwinter   851:     def getMetaDataLink(self):
                    852:         """link auf die metatdaten"""
                    853:         return self.absolute_url()+"/index_meta"
                    854: 
1.36      dwinter   855: 
1.85      dwinter   856:     def getTitle(self):
                    857:         """Title der Ressource"""
                    858:         title= self.ZSQLSimpleSearch("""select title from vl_literature where reference= \'%s\'  """ %self.getId())[0].title
                    859:         logging.debug(title)
                    860:         return title
                    861:     
1.93      dwinter   862:  
                    863:         
1.36      dwinter   864:     def getImagePath(self):
1.49      dwinter   865:             """Pfad zu den Images"""
1.85      dwinter   866:             path=None
1.49      dwinter   867:             
                    868:             if os.path.isdir(os.path.join(self.vlp_basis,self.resourceID,'pageimg')):
1.85      dwinter   869:                     path= os.path.join(self.vlp_basis,self.resourceID,'pageimg')
1.69      casties   870:             elif os.path.isdir(os.path.join(self.vlp_basis,self.resourceID,'pages')):
1.85      dwinter   871:                     path = os.path.join(self.vlp_basis,self.resourceID,'pages')
                    872:             # workaround in some cases there seem to be no pictures in pages
                    873:             
                    874:             if os.path.isdir(os.path.join(self.vlp_basis,self.resourceID,'pagesHi')):
1.88      dwinter   875: 
                    876:        
                    877:        pagesHi = os.listdir(os.path.join(self.vlp_basis,self.resourceID,'pagesHi'))
                    878:        if path is None:
                    879:            return os.path.join(self.vlp_basis,self.resourceID,'pagesHi')
                    880: 
                    881:            pages = os.listdir(path)
                    882: 
                    883:                 if len (pagesHi) > len(pages):
                    884: 
                    885:            countHi=0
                    886:            for p in pagesHi:
                    887:            dat,ext = os.path.splitext(p)
                    888:            if ext.lower() in [".tiff",".tif",".jpg"]:
                    889:                countHi+=1
                    890:            count=0
                    891:            for p in pages:
                    892:            dat,ext = os.path.splitext(p)
                    893:            if ext.lower() in [".tiff",".tif",".jpg"]:
                    894:                count+=1
                    895:            
                    896:            if countHi > count:
                    897:                        path=os.path.join(self.vlp_basis,self.resourceID,'pagesHi')
                    898:            
                    899:                        logging.error("pages < pagesHi:  %s"%self.resourceID)
                    900:             if path is None:
                    901: 
1.87      dwinter   902:             
1.91      dwinter   903:                 if len (os.listdir(os.path.join(self.vlp_basis,self.resourceID,'pagesHi'))) > len(os.listdir(path)):
1.87      dwinter   904:                     
                    905:                     
                    906:                     
1.85      dwinter   907:                     path=os.path.join(self.vlp_basis,self.resourceID,'pagesHi')
                    908:                     logging.error("pages < pagesHi:  %s"%self.resourceID)
1.91      dwinter   909:                else:
1.88      dwinter   910: 
1.85      dwinter   911:                     logging.error("no images:  %s"%self.resourceID)
1.88      dwinter   912:                     return None   
                    913: 
                    914:        return path 
1.36      dwinter   915: 
1.49      dwinter   916:             
1.20      dwinter   917:     def transcription(self):
1.49      dwinter   918:             """show the rendered transcriptiofile"""
                    919:             
                    920:             if hasattr(self,'libraryTranscriptionTemplate.html'):
                    921:                         return getattr(self,'libraryTranscriptionTemplate.html')()
                    922: 
                    923:             pt=PageTemplateFile(os.path.join(package_home(globals()),'vlp','library_transcriptionTemplate.zpt')).__of__(self)
                    924:             pt.content_type="text/html"
                    925:             return pt()
1.20      dwinter   926: 
                    927: 
                    928: 
1.74      dwinter   929:     def identifyMediaType(self):
                    930:         """identifiziert den Medientype aus der VLP Datenbank"""
                    931:         founds=self.ZSQLSimpleSearch('select * from vl_literature where reference=\''+self.resourceID+'\' order by id')
                    932:         if (not founds) or (len(founds)==0):
                    933:             self.mediaType="generic" # steht nicht in der Datenbank, dann nimm generisch an
                    934:             return self.mediaType
                    935:         
                    936:         
                    937:         if founds[0].referencetype =="Audio":
                    938:             self.mediaType ="audio"
                    939:         elif founds[0].referencetype =="Film":
                    940:             self.mediaType ="video"
                    941:         else:
                    942:             self.mediaType ="image" # nimm an, dass alle anderen Eintrage in der Datenbank auf images verweisen (Buecher oder Fotografien).
                    943:         
                    944:         return self.mediaType
                    945:          
                    946:     def getMediaType(self,cached=False):
                    947:         """give the Media-type back, if chached False, then get it from the database"""
                    948:         
                    949:         if (not hasattr(self,'mediaType')) or (self.mediaType=="") or (not cached):
                    950:             self.identifyMediaType()
                    951:         
                    952:         return self.mediaType
                    953:     
                    954:         
                    955:         
                    956:         
1.20      dwinter   957:     def copyTranscriptionFromDB(self):
1.49      dwinter   958:             """checks if transcription exits in DB"""
                    959:             founds=self.ZSQLSimpleSearch('select * from vl_transcript where source=\''+self.resourceID+'\' order by id')
1.38      dwinter   960: 
1.20      dwinter   961: 
1.49      dwinter   962:             ret="""<?xml version="1.0" encoding="utf-8"?>
1.20      dwinter   963:                <text>"""
                    964:         
1.49      dwinter   965:             if founds:
                    966:                     
                    967:                     for found in founds:
                    968:                         
                    969:                             text=found.transcript
                    970:                             if not text: text=""
                    971:                             ret+="<page><pb/>"+text+"</page>"
                    972: 
                    973:                     ret+="</text>"
                    974:                     re2=ret[0:]
1.90      dwinter   975:                     re3=self.unicodify(re2)
1.49      dwinter   976:                     #re3=re2
                    977:                     ft=self.ZopeFind(self,obj_metatypes=['ECHO_fullText'])
                    978:                     
                    979:                     if ft:
                    980:                         
                    981:                             ft[0][1].pt_edit(re3,'text/xml')
                    982:                         
                    983:                     else:
                    984:         
1.95    ! dwinter   985:                             self._setObject('fulltext',ECHO_fullText('fulltext',''))
1.49      dwinter   986: 
                    987:                             try:
                    988:                                 getattr(self,'fulltext').pt_edit(re3.encode('utf-8','ignore'),'text/xml')
                    989:                             except:
1.40      dwinter   990:                                 getattr(self,'fulltext').pt_edit(re3.encode('latin-1').decode('utf-8'),'text/xml')
                    991: 
1.49      dwinter   992:                     return "FT: %s"%self.getId()
                    993:             else:
                    994:                     return "no: %s"%self.getId()
                    995:             
1.90      dwinter   996:     def hasTranscription(self):
                    997:         """transcription"""
                    998:        
                    999:         if not hasattr(self,'fulltext'):
                   1000:             self.copyTranscriptionFromDB()
                   1001:         if not hasattr(self,'fulltext'): #still not
1.91      dwinter  1002:             return False
1.90      dwinter  1003:         
1.91      dwinter  1004:         return True 
1.90      dwinter  1005:             
1.1       dwinter  1006:     def resetMetaLink(self,all="no",RESPONSE=None):
                   1007:         """resets metalink to standard resp. in case of server change it sets to the new server url"""
                   1008:         if all=="yes":
                   1009:             self.metalink=self.absolute_url()+"/index_meta"
                   1010:         else:
                   1011:             splitted=self.metalink.split("/")
                   1012:             if (len(splitted)>1) and (splitted[len(splitted)-1]=="index_meta") and (splitted[len(splitted)-2]==self.getId()): # heuristic nur generische Metadatafiles andern
                   1013:                 self.metalink=self.absolute_url()+"/index_meta"
                   1014: 
                   1015:         if RESPONSE:
                   1016:             return "done"
                   1017:             
                   1018:     def show(self):
                   1019:         """show the rendered file"""
1.11      dwinter  1020: 
1.74      dwinter  1021:         mt = self.getMediaType()
1.49      dwinter  1022:         
1.74      dwinter  1023:         if (mt in ['video','audio']):
                   1024:             pt = self.getVLPTemplate('libraryMovieTemplate')
                   1025:         else: #zur zeit werden alle anderen type auf das libraryTemplate abgebildet.
                   1026:             
                   1027:             if self.REQUEST.get('p',None): #make sure that parameter p exists
                   1028:                 #self.REQUEST.set('pn',self.file2page(self.REQUEST.get('p',None)))
                   1029:                 params = "pn=%s"%self.file2page(self.REQUEST.get('p',None))
                   1030:                 mk = self.REQUEST.get('mk',None)
                   1031:                 if mk:
                   1032:                     params += "&mk=%s"%mk
                   1033:                 self.REQUEST.RESPONSE.redirect(self.REQUEST['URL']+'?'+params)
                   1034:                
                   1035:             pt = self.getVLPTemplate('libraryTemplate')
                   1036:        
                   1037:         return pt()
                   1038: 
                   1039:     def getVLPTemplate(self,name):
                   1040:         html=name+".html"
                   1041:         if hasattr(self,html):
                   1042:                 return getattr(self,html)
                   1043:         
                   1044:         pt=PageTemplateFile(os.path.join(package_home(globals()),'vlp',name+'.zpt')).__of__(self)
1.1       dwinter  1045:         pt.content_type="text/html"
1.74      dwinter  1046:         return pt
1.37      dwinter  1047: 
                   1048:     def index_html(self):
1.49      dwinter  1049:             """index_html"""
                   1050:             #return self.REQUEST
                   1051:             if not self.REQUEST.has_key("ws"):
                   1052:                     self.REQUEST.form["ws"]="1.5"
1.37      dwinter  1053: 
1.49      dwinter  1054:             return self.show()
1.14      dwinter  1055: 
                   1056:     def generateLibraryTemplateHTML(self,RESPONSE=None):
                   1057:         """lege standard index.html an"""
                   1058: 
1.49      dwinter  1059:         if not hasattr(self,'libraryTemplate.html'):
1.14      dwinter  1060:             zt=ZopePageTemplate('libraryTemplate.html')
                   1061:             self._setObject('libraryTemplate.html',zt)
                   1062:             default_content_fn = os.path.join(package_home(globals()),
                   1063:                                                'vlp/library_template.zpt')
                   1064:             text = open(default_content_fn).read()
                   1065:             zt.pt_edit(text, 'text/html')
                   1066: 
                   1067:         else:
                   1068:             return "already exists!"
                   1069:         
                   1070:         if RESPONSE is not None:
                   1071:             RESPONSE.redirect('manage_main')
                   1072: 
                   1073: 
1.81      dwinter  1074:     def index_meta(self,RESPONSE=None):
1.1       dwinter  1075:         """index_meta"""
1.81      dwinter  1076:        
1.31      dwinter  1077:         pt=PageTemplateFile(os.path.join(package_home(globals()),'vlp','index_meta.zpt')).__of__(self)
1.81      dwinter  1078:         pt.content_type="text/xml"      
                   1079:         x= pt.pt_render()
                   1080:         #logging.debug("index_meta 4:"+x)
                   1081:         if RESPONSE:
                   1082:             RESPONSE.setHeader("Content-Type","text/xml")
                   1083:         return x
1.11      dwinter  1084:     def file2page(self,p):
                   1085:         """converts filename to pagenumber"""
1.80      dwinter  1086:         
                   1087:         #dom=xml.dom.minidom.parse(ECHO_helpers.urlopen(getattr(self,'index.xml').absolute_url()))
                   1088:         index=getattr(self,'index.xml')
                   1089:  
                   1090:         txt=index.pt_render()
                   1091:         dom=xml.dom.minidom.parseString(txt)
1.11      dwinter  1092:         
                   1093:         for page in dom.getElementsByTagName('page'):
1.49      dwinter  1094:                  # pageummer mit lo oder hi sind aequivalent
                   1095:                  if (page.getAttribute('file')==p) or ("%slo"%page.getAttribute('file')==p) or ("%shi"%page.getAttribute('file')==p):
1.80      dwinter  1096:                      nr=page.getAttribute('nr')
                   1097:                     
                   1098:                      return nr
1.11      dwinter  1099:             
                   1100:         return 0
1.48      dwinter  1101: 
                   1102:     def getPageSizeSum(self):
1.49      dwinter  1103:             """generate average page size"""
1.48      dwinter  1104: 
1.49      dwinter  1105:             #size of hi resolution
                   1106:             files=[]
                   1107:             try:
1.69      casties  1108:                     pathHi=os.path.join(self.vlp_basis,self.resourceID,'pages')
1.49      dwinter  1109:                     files=os.listdir(pathHi)
                   1110:                     hi=0
                   1111:                     for f in files:
                   1112:                             hi+=os.stat(os.path.join(pathHi,f))[ST_SIZE]
                   1113: 
                   1114:             except:
                   1115:                     hi=0
                   1116: 
                   1117:             #size of hi resolution
                   1118:             try:
                   1119:                     pathHi=os.path.join(self.vlp_basis,self.resourceID,'pagesLo')
                   1120:                     files=os.listdir(pathHi)
                   1121:                     lo=0
                   1122:                     for f in files:
                   1123:                             lo+=os.stat(os.path.join(pathHi,f))[ST_SIZE]
                   1124: 
                   1125:             except:
                   1126:                     lo=0
                   1127: 
                   1128:             
                   1129:             return (hi,lo,len(files))
                   1130:                     
1.48      dwinter  1131: 
                   1132:     def getPageWeights(self):
1.49      dwinter  1133:             """average Page sizes in kBytes"""
1.1       dwinter  1134:     
1.49      dwinter  1135:             res=getattr(self,'pageSizeSum',(0,0,1))
                   1136:             return (res[0]/(1024*res[2]),res[1]/(1024*res[2]))
                   1137:                             
                   1138:             
                   1139:             
1.1       dwinter  1140:     def dir2index(self):
                   1141:         """dir to index"""
                   1142: 
1.62      casties  1143:         excludeNames=['Icon']
1.49      dwinter  1144:                 
                   1145:         
1.1       dwinter  1146:         def calculateName(str):
1.49      dwinter  1147:             name=os.path.splitext(str[1:])[0]
1.31      dwinter  1148:             ret="%s: %s"%(str[0],name)
1.1       dwinter  1149:             return ret
1.2       dwinter  1150: 
1.88      dwinter  1151:         self.imagePathFull=self.getImagePath();
                   1152:    self.imagePath=self.imagePathFull.split("/")[-1]
                   1153:         if (self.imagePath is None):
1.85      dwinter  1154:             return None
                   1155:         
1.1       dwinter  1156:         temp=[]
1.88      dwinter  1157:         ret = os.listdir(self.imagePathFull)
1.85      dwinter  1158:         
1.49      dwinter  1159:         ret.sort()
1.1       dwinter  1160:         for x in ret:
1.62      casties  1161:             if (not (x[0] in ('.',':'))) and (not x[0:4] in excludeNames):
1.11      dwinter  1162:                 temp.append((calculateName(x),os.path.splitext(x)[0]))
1.1       dwinter  1163:         return temp
                   1164: 
1.11      dwinter  1165:     
1.1       dwinter  1166:     def firstPage(self,url=None):
                   1167:         """showlink to the first image"""
1.24      dwinter  1168:         if self.REQUEST.get('pn','1')=="1": #erste seinte dann kein a tag
1.67      casties  1169:             return """<img src="/images/first.gif" alt="first" width="14" height="14" border="0"><br>first"""
1.1       dwinter  1170: 
                   1171:         else:
1.49      dwinter  1172:                 ws=self.REQUEST.get('ws','1')
                   1173:                 return """<a href=%s>
1.67      casties  1174:                          <img src="/images/first.gif" alt="first" width="14" height="14" border="0"><br>first
1.1       dwinter  1175:                          </a>
1.30      dwinter  1176:                          """%(self.REQUEST['URL']+"?pn=1&ws=%s"%ws)
1.1       dwinter  1177: 
                   1178:     def lastPage(self,url=None):
                   1179:         """showlink to the first image"""
                   1180:         pages=self.readIndexFile(url)
                   1181:         if pages:
                   1182:             ln=len(pages)
                   1183:         
1.24      dwinter  1184:         if (self.REQUEST.get('pn')==str(ln)) or (ln==1): #letzte seite dann kein a tag oder nur eine Seite
1.67      casties  1185:             return """<img src="/images/last.gif" alt="last" width="14" height="14" border="0"><br>last"""
1.1       dwinter  1186: 
                   1187:         else:
1.49      dwinter  1188:                 ws=self.REQUEST.get('ws','1')
                   1189:                 return """<a href=%s>
1.67      casties  1190:                          <img src="/images/last.gif" alt="last" width="14" height="14" border="0"><br>last
1.1       dwinter  1191:                          </a>
1.30      dwinter  1192:                          """%(self.REQUEST['URL']+"?pn="+str(ln)+"&ws="+ws)
1.1       dwinter  1193:             
                   1194:     def prevPage(self,url=None):
                   1195:         """showlink to the first image"""
                   1196:         
                   1197: 
                   1198:         nn = int(self.REQUEST.get('pn','1'))-1
                   1199:         if nn < 1: #letzte  seite dann kein a tag
1.67      casties  1200:             return """<img src="/images/lisePrev.gif" alt="prev" width="14" height="14" border="0"><br>prev"""
1.1       dwinter  1201: 
                   1202:         else:
1.49      dwinter  1203:                 ws=self.REQUEST.get('ws','1')
                   1204:                 return """<a href=%s>
1.67      casties  1205:                          <img src="/images/lisePrev.gif" alt="prev" width="14" height="14" border="0"><br>prev
1.1       dwinter  1206:                          </a>
1.30      dwinter  1207:                          """%(self.REQUEST['URL']+"?pn="+str(nn)+"&ws="+ws)
1.1       dwinter  1208: 
                   1209:     def nextPage(self,url=None):
                   1210:         """showlink to the first image"""
                   1211:         pages=self.readIndexFile(url)
                   1212:         if pages:
                   1213:             ln=len(pages)
                   1214: 
                   1215:         nn = int(self.REQUEST.get('pn','1'))+1
1.24      dwinter  1216:         if (nn>int(ln)) or (ln==1): #letzte  seite dann kein a tag
1.67      casties  1217:             return """<img src="/images/liseNext.gif" alt="next" width="14" height="14" border="0"><br>next"""
1.1       dwinter  1218: 
                   1219:         else:
1.49      dwinter  1220:                 ws=self.REQUEST.get('ws','1')
                   1221:                 return """<a href=%s>
1.67      casties  1222:                          <img src="/images/liseNext.gif" alt="next" width="14" height="14" border="0"><br>next
1.1       dwinter  1223:                          </a>
1.30      dwinter  1224:                          """%(self.REQUEST['URL']+"?pn="+str(nn)+"&ws="+ws)
1.1       dwinter  1225:         
                   1226:     
                   1227:     def readIndexFile(self,url=None):
                   1228:         """reads the indexfile. presently url not None isn't implemented. In the future url can be defined."""
1.49      dwinter  1229:         if not url:
1.50      dwinter  1230:             urlTmp=self.absolute_url()+"/index.xml"
1.1       dwinter  1231: 
1.49      dwinter  1232:         if self.ZCacheable_isCachingEnabled():
1.51      dwinter  1233: 
1.50      dwinter  1234:             result = self.ZCacheable_get(view_name=urlTmp)
1.33      dwinter  1235:             if result is not None:
                   1236:                 # Got a cached value.
                   1237:                 return result
                   1238: 
                   1239:         pagelist=[]
1.50      dwinter  1240:         
                   1241:         if not url:
1.51      dwinter  1242: 
1.50      dwinter  1243:             xmlTxt=getattr(self,'index.xml')()
                   1244:             dom=xml.dom.minidom.parseString(xmlTxt)
                   1245:         else:            
                   1246:             fh=ECHO_helpers.urlopen(urlTmp)
                   1247:             dom=xml.dom.minidom.parse(fh)
1.1       dwinter  1248:         
                   1249:         
                   1250:         for page in dom.getElementsByTagName('page'):
                   1251:             text=getText(page.childNodes)
                   1252:             pageNum=page.getAttribute('nr')
1.49      dwinter  1253:             fileName=page.getAttribute('file')
1.22      dwinter  1254:             pagelist.append((pageNum,text,fileName))
1.1       dwinter  1255: 
1.50      dwinter  1256:         self.ZCacheable_set(pagelist,view_name=urlTmp)
1.33      dwinter  1257:         return pagelist 
1.22      dwinter  1258: 
                   1259:     def getFileName(self):
1.49      dwinter  1260:            """getNameOfCurrentFile"""
                   1261:            try:
                   1262:             pn=int(self.REQUEST.get('pn','1'))
                   1263:            except:
                   1264:             pn=1
                   1265:            pageinfo=self.readIndexFile()[pn-1]
                   1266:            return pageinfo[2]
1.22      dwinter  1267:    
1.65      casties  1268:     def createIndexFile(self,forceUpdate=False,RESPONSE=None):
1.1       dwinter  1269:         """create index file"""
1.62      casties  1270:         logging.debug("createindexfile of %s"%self.id)
1.1       dwinter  1271: 
1.65      casties  1272:         if hasattr(self,'index.xml'):
                   1273:             # index exists
                   1274:             zt=getattr(self,'index.xml')
                   1275:             if not forceUpdate:
                   1276:                 # check if directory is newer (self.imagePath sould be set by now)
1.85      dwinter  1277:                 path = self.getImagePath()
                   1278:                 if (path is None):
                   1279:                     return "CREATE INDEX FILE NOT POSSIBLE"
                   1280:                 imgdir = os.path.join(path)
1.65      casties  1281:                 dirtime = os.path.getmtime(imgdir)
                   1282:                 zttime = zt.bobobase_modification_time()
                   1283:                 logging.debug("createindexfile: dir %s of %s index of %s"%(imgdir,dirtime,zttime))
                   1284:                 if dirtime < zttime:
                   1285:                     # nothing to do
                   1286:                     logging.debug("createindexfile: dir %s older than index"%(imgdir))
                   1287:                     return "index is up to date"
                   1288:                 
                   1289:         else:
                   1290:             # create new index template
1.1       dwinter  1291:             zt=ZopePageTemplate('index.xml')
                   1292:             self._setObject('index.xml',zt)
1.65      casties  1293:         
                   1294:         # fill index template
                   1295:         pt=PageTemplateFile(os.path.join(package_home(globals()),'vlp','index_template.zpt')).__of__(self)()
1.62      casties  1296:         #logging.debug("createindexfile uses %s"%pt)
1.1       dwinter  1297:         zt.pt_edit(pt, 'text/xml')
1.62      casties  1298:         transaction.get().commit()
1.1       dwinter  1299: 
                   1300:         if RESPONSE is not None:
                   1301:             RESPONSE.redirect('manage_main')
                   1302: 
                   1303:         
                   1304: def manage_addVLP_resourceForm(self):
                   1305:         """Form for adding a ressource"""
1.31      dwinter  1306:         pt=PageTemplateFile(os.path.join(package_home(globals()),'vlp','AddVLP_resourceForm.zpt')).__of__(self)
1.1       dwinter  1307:         return pt()
                   1308: 
                   1309: 
                   1310: 
                   1311: def manage_addVLP_resource(self,id,title,label,description,responsible,link,metalink,weight,resourceID=None,contentType=None,renderingType=None,credits=None,coords=None,RESPONSE=None):
                   1312:     """addaresource"""
                   1313: 
                   1314:     
1.2       dwinter  1315:     if metalink=='':
                   1316:         metalink=self.absolute_url()+"/"+id+"/index_meta"
                   1317:             
1.1       dwinter  1318:     newObj=VLP_resource(id,link,metalink,resourceID,title,label,description,contentType,renderingType,responsible,credits,weight,coords)
                   1319: 
                   1320:     self._setObject(id,newObj)
                   1321: 
                   1322:     if RESPONSE is not None:
                   1323:         RESPONSE.redirect('manage_main')
                   1324:  

FreeBSD-CVSweb <freebsd-cvsweb@FreeBSD.org>