File:  [Repository] / MPIWGWeb / Attic / MPIWGRoot.py
Revision 1.1.2.22: download - view: text, annotated - select for diffs - revision graph
Thu Feb 26 08:06:44 2009 UTC (15 years, 4 months ago) by dwinter
Branches: r2
*** empty log message ***

    1: from Products.PageTemplates.PageTemplateFile import PageTemplateFile
    2: from Products.PageTemplates.PageTemplate import PageTemplate
    3: from Products.PageTemplates.ZopePageTemplate import ZopePageTemplate
    4: from Products.ZSQLExtend.ZSQLExtend import ZSQLExtendFolder
    5: from Products.ZCatalog.CatalogPathAwareness import CatalogAware
    6: from OFS.Image import Image
    7: from Globals import package_home
    8: import urllib
    9: import MPIWGStaff
   10: import string
   11: import re
   12: import os
   13: from types import *
   14: import logging
   15: import xmlhelper # Methoden zur Verwaltung der projekt xml
   16: from OFS.SimpleItem import SimpleItem
   17: from OFS.Folder import Folder
   18: from Products.ZSQLMethods.SQL import SQLConnectionIDs
   19: from AccessControl import ClassSecurityInfo
   20: from bibliography import *
   21: import time
   22: import xml.dom.minidom
   23: import sys
   24: from Ft.Xml.XPath import Evaluate
   25: from Ft.Xml.XPath.Context import Context
   26: from Ft.Xml.Domlette import NonvalidatingReader,PrettyPrint, Print
   27: from Ft.Xml import EMPTY_NAMESPACE
   28: import copy
   29: import updatePersonalWWW
   30: import MPIWGStaff
   31: from MPIWGHelper import *
   32: 
   33: 
   34: def sortWeight(x,y):
   35:     x1=int(getattr(x[1],'weight','0'))
   36:     y1=int(getattr(y[1],'weight','0'))
   37:     return cmp(x1,y1)
   38: 
   39: 
   40: class MPIWGRoot(ZSQLExtendFolder):
   41:     """Stammordner fuer den Web-Server"""
   42: 
   43:     meta_type='MPIWGRoot'
   44: 
   45:     fieldLabels={'WEB_title':'WEB_Title',
   46:                  'xdata_01':'Responsible Scientists',
   47:                  'xdata_02':'Department',
   48:                  'xdata_03':'Historical Persons',
   49:                  'xdata_04':'Time period',
   50:                  'xdata_05':'Sorting number',
   51:                  'xdata_06':'Keywords',
   52:                  'xdata_07':'Short title',
   53:                  'xdata_08':'Other involved scholars' ,
   54:                  'xdata_09':'Disciplines',
   55:                  'xdata_10':'Themes',
   56:                  'xdata_11':'Object Digitallibrary',
   57:                  'xdata_12':'Cooperation partners',
   58:                  'xdata_13':'Funding institutions',
   59:                  'WEB_project_header':'WEB_project_header',
   60:                  'WEB_project_description':'WEB_project_description',
   61:                  'WEB_related_pub':'WEB_related_pub'}
   62:     
   63:     # (is this used?)
   64:     folders=['MPIWGProject','Folder','ECHO_Navigation']
   65:     # language of this instance
   66:     lang = 'en'
   67:     # types of objects that show up in navigation
   68:     nav_meta_types = ['MPIWGTemplate','MPIWGLink','MPIWGFolder']
   69: 
   70:     def getGetNeighbourhood(self,obj, wordStr, length=100,tagging=True):
   71:         """finde umgebung um die worte in wordStr, zurueckgegeben wird eine Array mit den Umgebungen von Fundstellen der Worte
   72:         alle Tags werden entfernt, die Fundstellen werden mit <span class="found">XX</span> getaggt, die Umgebungen werden 
   73:         case insensitive gesucht
   74:         @param wordStr: string mit Worten getrennt durch Leerzeichen, Phrasen sind mit " gekennzeichnet
   75:                         "eine phrase", "*"  bezeichnet wildcards und wird ignoriert"
   76:         @param length: optional, default wert 100, 2*length ist die groesse der Umgebung
   77:         @param tagging: optional default wert true, kein span tag wird erzweugt falls tag=false
   78:         """
   79:         
   80:         ret=[] # nimmt das Array auf, dass spaeter zurueckgegeben wird
   81:         ranges=[] #Array mit tupeln x,y wobei x die Position des Anfang und y des Endes der i-ten Umgebung angiebt
   82:         
   83:         wordStr=wordStr.lstrip().rstrip()
   84:         
   85:         def isInRanges(nr,length):
   86:             """test ob eine gegeben Position nr schon irgendwo in einer Umgebung ist, gibt den Index des ersten Wertes aus ranges zurueck, 
   87:             -1, wenn kein Treffer
   88:             
   89:             @param nr: Position die geprueft werden soll
   90:             @param length: Laenge des Wortes das geprueft werden soll
   91:             """
   92:             for x in ranges:
   93:                 if (x[0]<=nr) and (nr < (x[1]-length)):
   94:                     return ranges.index(x)
   95:             return -1
   96:                 
   97:         # deal with phrases, in Phrasen werden die Leerzeichen durch "_" ersetzt.
   98:         def rep_empty(str):
   99:             x= re.sub(" ","_",str.group(0))
  100:             return re.sub("\"","",x)
  101:             
  102:         wordStr=re.sub("\".*?\"", rep_empty,wordStr)#ersetze leerzeichen in " " durch "_" und loesche "
  103:         
  104:         #deal with wildcards, for our purposes it is enough to delete the wildcard 
  105:         wordStr=wordStr.replace("*","")
  106:         
  107:         words=wordStr.split(" ")
  108:         #if not words is ListType:
  109:         #   words=[words]
  110:             
  111:         txt=obj.harvest_page()
  112:         if not txt:
  113:             return ret
  114:         txt=re.sub("<.*?>", "", txt) # loesche alle Tags
  115:         for word in words:
  116:             word=re.sub("_"," ",word) # ersetze zurueck "_" durch " "
  117:             pos=0
  118:             
  119:             n=txt.lower().count(word.lower()) # wie oft tritt das Wort auf
  120: 
  121:             for i in range(n):
  122:                 pos=txt.lower().find(word.lower(),pos)
  123: 
  124:                 if pos > 0:
  125:                     x=max(0,pos-length)
  126:                     y=min(len(txt),pos+length)
  127:                   
  128:                     
  129:                     #is word already in one of the results
  130:                     nr=isInRanges(pos,len(word))
  131:                     if nr >=0:# word ist in einer schon gefunden Umgebung, dann vergroessere diese
  132:                         x=min(ranges[nr][0],x)
  133:                         y=max(ranges[nr][1],y)
  134:               
  135:                     str=txt[x:y]
  136:                 
  137:                     if nr >=0: # word ist in einer schon gefunden Umgebung
  138:                         ranges[nr]=(x,y) # neue Position der Umgebung
  139: 
  140:                         ret[nr]=str # neue Umgebung
  141:                     else: # andernfalls neue Umgebung hinzufuegen
  142:                         ranges.append((x,y))
  143: 
  144:                         ret.append(str)
  145:                     
  146:                     pos=pos+len(word)
  147:                 else:
  148:                     break;
  149:                 
  150:         # now highlight everything        
  151:         if tagging:
  152:             for x in range(len(ret)):
  153:                 for word in words:
  154:                     repl=re.compile(word,re.IGNORECASE)
  155:                     ret[x]=repl.sub(""" <span class="found">%s</span>"""%word.upper(),ret[x])
  156: 
  157:         return ret
  158:     def copyAllImagesToMargin(self):
  159:         """tranformiere alle Bilder in die Margins"""
  160:         projects=self.getTree()
  161:         ret=""
  162:         for project in projects:
  163:             proj=project[3]
  164:             try:
  165:                 persons=proj.copyImageToMargin();
  166:             except:
  167:                 logging.error("Cannnot do: %s"%repr(project))
  168:                 
  169:     def transformProjectsToId(self):
  170:         """trnasformiere zu ID, Hilfsfunktion die die alten Templates analysiert und mit der neuen Liste
  171:         verantwortlicher Personen versieht"""
  172:         projects=self.getTree()
  173:         ret=""
  174:         for project in projects:
  175:             
  176:             proj=project[3]
  177:             persons=proj.identifyNames(proj.getContent('xdata_01'))
  178:             if not hasattr(proj,'responsibleScientistsList'):
  179:                         proj.responsibleScientistsList=[]
  180:                         
  181:             for person in persons.items():
  182:               
  183:                 if len(person[1]) >1: #nicht eindeutig
  184:                     ret+="nicht eindeutig ---  %s:  %s\n"%(proj.getId(),person[0])
  185:                     
  186:                 elif len(person[1]) ==0: #kein eintrage
  187:                     ret+="kein eintrag---  %s:  %s\n"%(proj.getId(),person[0])
  188:                     proj.responsibleScientistsList.append((person[0],""))
  189:                 else:           
  190:                     proj.responsibleScientistsList.append((person[0],person[1][0].getObject().getKey()))
  191:         
  192:         return ret
  193:           
  194:                 
  195:     def harvestProjects(self):
  196:         """harvest"""
  197:         folder="/tmp"
  198:         try:
  199:             os.mkdir("/tmp/harvest_MPIWG")
  200:         except:
  201:             pass
  202:         founds=self.ZopeFind(self.aq_parent.projects,obj_metatypes=['MPIWGProject'],search_sub=1)
  203:         for found in founds:
  204:             txt=found[1].harvest_page()
  205:         
  206:             if txt and (txt != ""):
  207:                 name=found[0].replace("/","_")
  208:                 fh=file("/tmp/harvest_MPIWG/"+name,"w")
  209:                 fh.write(txt)
  210:                 fh.close()
  211:                 
  212:     def decode(self,str):
  213:         """decoder"""
  214: 
  215:         if not str:
  216:             return ""
  217:         if type(str) is StringType:
  218:             try:            
  219:                 return str.decode('utf-8')
  220:             except:
  221:                 return str.decode('latin-1')
  222:         else:
  223:             return str
  224: 
  225: 
  226:     def getat(self,array,idx=0,default=None):
  227:         """return array element idx or default (but no exception)"""
  228:         if len(array) <= idx:
  229:             return default
  230:         else:
  231:             return array[idx]
  232:         
  233:     def getLang(self):
  234:         """returns the default language"""
  235:         return self.lang
  236: 
  237:     def browserCheck(self):
  238:         """check the browsers request to find out the browser type"""
  239:         bt = {}
  240:         ua = self.REQUEST.get_header("HTTP_USER_AGENT")
  241:         bt['ua'] = ua
  242:         bt['isIE'] = False
  243:         bt['isN4'] = False
  244:         if string.find(ua, 'MSIE') > -1:
  245:             bt['isIE'] = True
  246:         else:
  247:             bt['isN4'] = (string.find(ua, 'Mozilla/4.') > -1)
  248: 
  249:         try:
  250:             nav = ua[string.find(ua, '('):]
  251:             ie = string.split(nav, "; ")[1]
  252:             if string.find(ie, "MSIE") > -1:
  253:                 bt['versIE'] = string.split(ie, " ")[1]
  254:         except: pass
  255: 
  256:         bt['isMac'] = string.find(ua, 'Macintosh') > -1
  257:         bt['isWin'] = string.find(ua, 'Windows') > -1
  258:         bt['isIEWin'] = bt['isIE'] and bt['isWin']
  259:         bt['isIEMac'] = bt['isIE'] and bt['isMac']
  260:         bt['staticHTML'] = False
  261: 
  262:         return bt
  263: 
  264: 
  265:     def versionHeaderEN(self):
  266:         """version header text"""
  267:         
  268:         date= self.REQUEST.get('date',None)
  269:         if date:
  270:             txt="""<h2>This pages shows the project which existed at %s</h2>"""%str(date)
  271:             return txt
  272:         return ""
  273: 
  274:     def versionHeaderDE(self):
  275:         """version header text"""
  276:         date= self.REQUEST.get('date',None)
  277:         if date:
  278:             txt="""<h2>Auf dieser Seite finden Sie die Projekte mit Stand vom %s</h2>"""%str(date)
  279:         return ""
  280:     
  281:         
  282:     def createOrUpdateId_raw(self):
  283:         """create sequence to create ids for bibliography"""
  284:         debug=None
  285:         #suche groesste existierende id
  286:         founds=self.ZSQLQuery("select id from bibliography")
  287:         
  288:         if founds:
  289:             ids=[int(x.id[1:]) for x in founds]
  290:             maximum=max(ids)
  291:             
  292:             id_raw=self.ZSQLQuery("select nextval('id_raw')",debug=debug)
  293:             
  294:             if id_raw:
  295:                 self.ZSQLQuery("drop sequence id_raw",debug=debug)
  296:             
  297:             self.ZSQLQuery("create sequence id_raw start %i"%(maximum+1),debug=debug)
  298:         
  299:     
  300:     def queryLink(self,link):
  301:         """append querystring to the link"""
  302:         return "%s?%s"%(link,self.REQUEST.get('QUERY_STRING',''))
  303: 
  304:     def getKategory(self,url):
  305:         """kategorie"""
  306:         splitted=url.split("/")
  307:         return splitted[4]
  308: 
  309:     def generateUrlProject(self,url,project=None):
  310:         """erzeuge aus absoluter url, relative des Projektes"""
  311:         if project:
  312:             splitted=url.split("/")
  313:             length=len(splitted)
  314:             short=splitted[length-2:length]
  315:             
  316:             base=self.REQUEST['URL3']+"/"+"/".join(short)
  317: 
  318:         else:
  319:             findPart=url.find("/projects/")
  320:             base=self.REQUEST['URL1']+"/"+url[findPart:]
  321: 
  322:                 
  323:         return base
  324:     
  325:     def isNewCapital(self,text=None,reset=None):
  326:         if reset:
  327:             self.REQUEST['capital']="A"
  328:             return True
  329:         else:
  330:             if len(text)>0 and not (text[0]==self.REQUEST['capital']):
  331:                 self.REQUEST['capital']=text[0]
  332:                 return True
  333:             else:
  334:                 return False
  335:     
  336:     def subNavStatic(self,obj):
  337:         """subnav" von self"""
  338:         subs=self.ZopeFind(obj,obj_metatypes=['MPIWGTemplate','MPIWGLink'])
  339:         subret=[]
  340: 
  341:         for x in subs:
  342:             if not(x[1].title==""):
  343:                 subret.append(x)
  344:         subret.sort(sortWeight)
  345:         return subret
  346:     
  347:     def subNav(self,obj):
  348:         """return sub-navigation elements i.e. below sections"""
  349:         # get section -> parent should be MPIWGRoot
  350:         p = obj
  351:         sec = None
  352:         # descend parents to the root (and remember the last id)
  353:         while p is not None and p.meta_type != 'MPIWGRoot':
  354:             sec = p
  355:             p = p.aq_parent
  356:     
  357:         subsecs = sec.objectItems(self.nav_meta_types)
  358:         subsecs = [s for s in subsecs if s[1].title != ""]
  359:         subsecs.sort(sortWeight)
  360:         return subsecs
  361:                 
  362:     def isType(self,object,meta_type):
  363:         """teste ob ein object vom meta_type ist."""
  364:         return (object.meta_type==meta_type)
  365:     
  366:     def isActive(self,name):
  367:         """teste ob subnavigation aktiv"""
  368:         for part in self.REQUEST['URL'].split("/"):
  369:             if part==name:
  370:                 return True
  371:         return False
  372:         
  373:     
  374:     def getSections(self):
  375:         """returns a list of all sections i.e. top-level MPIWGFolders"""
  376:         secs = self.objectItems(['MPIWGFolder'])
  377:         secs.sort(sortWeight)
  378:         #logging.debug("root: %s secs: %s"%(repr(self.absolute_url()), repr(secs)))
  379:         # return pure list of objects
  380:         return [s[1] for s in secs]
  381: 
  382:     def getSectionStyle(self, name, style=""):
  383:         """returns a string with the given style + '-sel' if the current section == name"""
  384:         if self.getSection() == name:
  385:             return style + '-sel'
  386:         else:
  387:             return style    
  388: 
  389:     def getFeatures(self):
  390:         """returns a list of all Features"""
  391:         dir = getattr(self, 'features')
  392:         features = dir.objectItems(['MPIWGFeature'])
  393:         features.sort(sortWeight)
  394:         # return pure list of objects
  395:         return [f[1] for f in features]
  396: 
  397: 
  398:     def getMPIWGRoot(self):
  399:         """returns the MPIWG root"""
  400:         return self
  401: 
  402:     def MPIWGrootURL(self):
  403:         """returns the URL to the root"""
  404:         return self.absolute_url()
  405:         
  406:     def upDateSQL(self,fileName):
  407:         """updates SQL databases using fm.jar"""
  408:         fmJarPath=os.path.join(package_home(globals()), 'updateSQL/fm.jar')
  409:         xmlPath=os.path.join(package_home(globals()), "updateSQL/%s"%fileName)
  410:         logger("MPIWG Web",logging.INFO,"java -classpath %s -Djava.awt.headless=true Convert %s"%(fmJarPath,xmlPath))
  411:         ret=os.popen("java -classpath %s -Djava.awt.headless=true Convert %s"%(fmJarPath,xmlPath),"r").read()
  412:         logger("MPIWG Web",logging.INFO,"result convert: %s"%ret)
  413:         return 1
  414:     
  415:     def patchProjects(self,RESPONSE):
  416:         """patch"""
  417:         projects=self.ZopeFind(self.projects,obj_metatypes=['MPIWGProject'])
  418:         for project in projects:
  419:                 tmp=project[1].WEB_project_description[0].replace("/CD/projects/","")[0:]
  420:                 setattr(project[1],'WEB_project_description',[tmp[0:]])
  421:                 RESPONSE.write("<p>%s</p>\n"%project[0])
  422:             
  423:     def replaceNotEmpty(self,format,field):
  424:         """replace not empty"""
  425:         if field and (not field.lstrip()==''):
  426:             return self.decode(format%field)
  427:         else:
  428:             return ""
  429:         
  430: 
  431:     def isActiveMember(self,key):
  432:         """tested ob Mitarbeiter key ist aktiv"""
  433:         key=utf8ify(key)
  434:         ret=self.getat(self.ZSQLInlineSearch(_table='personal_www',
  435:                                             _op_key='eq',key=key,
  436:                                             _op_publish_the_data='eq',
  437:                                             publish_the_data='yes'))
  438:         
  439:         logging.info("ACTIVE_MEMBER  %s"%ret)
  440:         if ret:
  441:             return True
  442:         else:
  443:             return False
  444:         
  445:     def isActual(self,project):
  446:         """checke if project is actual"""
  447:         actualTime=time.localtime()
  448:         
  449:         if hasattr(project,'getObject'): #obj ist aus einer catalogTrefferList
  450:             obj=project.getObject()
  451:         else:
  452:             obj=project
  453:             
  454:         if getattr(obj,'archiveTime',actualTime)< actualTime:
  455:             return False
  456:         else:
  457:             return True
  458:         
  459:     def redirectIndex_html(self,request):
  460:         #return request['URL1']+'/index_html'
  461:         
  462:         return urllib.urlopen(request['URL1']+'/index_html').read()
  463: 
  464:     
  465:     def formatBibliography(self,here,found):
  466:         """format"""
  467:         return formatBibliography(here,found)
  468:     
  469:     def getValue(self,fieldStr):
  470:         """Inhalt des Feldes"""
  471:         
  472:         if type(fieldStr)==StringType:
  473:             field=fieldStr
  474:         else:
  475:             field=fieldStr[0]
  476:         try:
  477:             if field[len(field)-1]==";":
  478:                 field=field[0:len(field)-1]
  479:         except:
  480: 
  481:             """nothing"""
  482:         field=re.sub(r';([^\s])','; \g<1>',field)
  483:         return field.encode('utf-8')
  484: 
  485: 
  486:     
  487:     def sortedNames(self,list):
  488:         """sort names"""
  489: 
  490:         def sortLastName(x_c,y_c):
  491:             try:
  492:                 x=urllib.unquote(x_c).encode('utf-8','ignore')
  493:             except:
  494:                 x=urllib.unquote(x_c)
  495: 
  496:             try:
  497:                 y=urllib.unquote(y_c).encode('utf-8','ignore')
  498:             except:
  499:                 x=urllib.unquote(y_c)
  500:                 
  501: 
  502:             
  503:             try:
  504:                 last_x=x.split()[len(x.split())-1]
  505:                 last_y=y.split()[len(y.split())-1]
  506: 
  507:             except:
  508: 
  509:                 last_x=""
  510:                 last_y=""
  511:             
  512:             
  513:             
  514:             if last_x<last_y:
  515:                 return 1
  516:             elif last_x>last_y:
  517:                 return -1
  518:             else:
  519:                 return 0
  520:             
  521:         list.sort(sortLastName)
  522:         list.reverse()
  523:         
  524:         return list
  525:     
  526:     def __init__(self, id, title):
  527:         """init"""
  528:         self.id=id
  529:         self.title=title
  530: 
  531:     def removeStopWords(self,xo):
  532:         """remove stop words from xo"""
  533:         if not hasattr(self,'_v_stopWords'):
  534:             self._v_stopWords=self.stopwords_en.data.split("\n")
  535:     
  536:         x=str(xo)
  537:     
  538:         strx=x.split(" ")
  539:   
  540:         for tmp in strx:
  541:      
  542:             if tmp.lower() in self._v_stopWords:
  543:                 del strx[strx.index(tmp)]
  544: 
  545:         return " ".join(strx)
  546:     
  547:     def urlQuote(self,str):
  548:         """quote"""
  549:         return urllib.quote(str)
  550: 
  551:     def urlUnQuote(self,str):
  552:         """quote"""
  553:         return urllib.unquote(str)
  554:     
  555:         
  556: 
  557:     def getProjectsByFieldContent(self,fieldName,fieldContentsEntry, date=None):
  558:         """gib alle Projekte aus mit Value von field mit fieldName enthaelt ein Element der Liste fieldContents"""
  559:         def sort(x,y):
  560:                 return cmp(x.WEB_title[0],y.WEB_title[0])
  561: 
  562:         if type(fieldContentsEntry) is StringType:
  563:             fieldContentsTmp=[fieldContentsEntry]
  564:         else:
  565:             fieldContentsTmp=fieldContentsEntry
  566: 
  567:         fieldContents=[]
  568:         for x in fieldContentsTmp:
  569:             fieldContents.append(" AND ".join(x.split()))
  570:         projects=self.ProjectCatalog({fieldName:string.join(fieldContents,' AND')})
  571:         #print projects
  572:         #ret=[x for x in projects]
  573:         ret=[]
  574:         for x in projects:
  575:             obj=x.getObject()
  576:             obj=obj.getActualVersion(date)
  577:             if obj and (not getattr(obj,'invisible',None)):
  578:                 #if not (x in ret):
  579:                     ret.append(x)
  580: 
  581:         ret.sort(sort)
  582:         return ret
  583: 
  584:     def changeMPIWGRootForm(self):
  585:         """edit"""
  586:         pt=PageTemplateFile(os.path.join(package_home(globals()),'zpt','changeMPIWGRootForm')).__of__(self)
  587:         return pt()
  588: 
  589:     def changeMPIWGRoot(self,title,disciplineList,themesList,connection_id,lang=None,RESPONSE=None):
  590:         """change"""
  591:         self.title=title
  592:         self.connection_id=connection_id
  593:         self.disciplineList=disciplineList
  594:         self.themesList=themesList
  595:         if lang is not None:
  596:             self.lang = lang
  597: 
  598:         if RESPONSE is not None:
  599:             RESPONSE.redirect('manage_main')
  600: 
  601: 
  602:     def getContexts(self,childs=None,parents=None,depth=None,date=None,onlyActive=True):
  603:         """childs alle childs, alle parents"""
  604:         ret=[]
  605:     
  606:         if parents:
  607:             pnums=parents.split(".")
  608:             while len(pnums) > 1:
  609:                 pnums.pop()
  610:                 parentId=string.join(pnums,".")
  611:         
  612:                 for project in self.getProjectFields('xdata_05',sort='int',date=date):
  613:                     if project[1]==parentId:
  614:                         ret.append(project)
  615:                 
  616:                 if (depth is not None) and (len(ret) >= depth):
  617:                     break
  618: 
  619:         if childs:
  620:             for project in self.getProjectFields('xdata_05',sort='int',date=date):
  621:                 searchStr=childs+"(\..*)"
  622:                
  623:                 if (onlyActive and project[0].isActiveProject()) or (not onlyActive):
  624:                     if re.match(searchStr,project[1]):
  625:                         
  626:                         if depth:
  627:     
  628:                             if int(depth)>=len(project[1].split("."))-len(childs.split(".")):
  629:                         
  630:                                 ret.append(project)
  631:                         else:
  632:                             ret.append(project)
  633:         
  634:         #logging.debug("getContexts: childs=%s parents=%s depth=%s => %s"%(childs,parents,depth,repr(ret)))
  635:      
  636:         return ret
  637: 
  638:     
  639:     def getProjectFields(self,fieldName,date=None,folder=None,sort=None):
  640:         """getListofFieldNames"""
  641:         ret=[]
  642:     
  643:         objects=self.ZopeFind(self.projects,obj_metatypes=['MPIWGProject'],search_sub=0)
  644: 
  645:                 
  646:         for object in objects:
  647:             obj=object[1]
  648:             obj=obj.getActualVersion(date)
  649:             if obj and (not getattr(obj,'invisible',None)):
  650:                 if fieldName=="WEB_title_or_short":
  651: 
  652:                     if len(obj.getContent('xdata_07'))<3: # hack weil z.Z. manchmal noch ein Trennzeichen ; oder , im Feld statt leer
  653:                         fieldNameTmp="WEB_title"
  654:                     else:
  655:                         fieldNameTmp="xdata_07"
  656:                 else:
  657:                     fieldNameTmp=fieldName
  658: 
  659:                 ret.append((obj,obj.getContent(fieldNameTmp)))
  660: 
  661:         
  662:         if sort=="int":
  663:             ret.sort(sortI)
  664:         elif sort=="stopWords":
  665:  
  666:             ret.sort(sortStopWords(self))
  667:             
  668:         else:
  669:             ret.sort(sortF)
  670:         
  671:         return ret
  672: 
  673:     def showNewProjects(self):
  674:         projects=[]
  675:         for objs in self.getProjectFields('WEB_title_or_short'): # Get all Projets
  676:             if objs[0].xdata_05 and (objs[0].xdata_05[0] == ""):
  677:                 
  678:                 projects.append(objs)
  679:                 
  680:         return projects
  681:     
  682:         
  683:     manage_options = Folder.manage_options+(
  684:         {'label':'Update personal homepages','action':'updatePersonalwww_html'},
  685:         {'label':'Reindex catalogs','action':'reindexCatalogs'},
  686:         {'label':'Main config','action':'changeMPIWGRootForm'},
  687:         {'label':'add e-mails','action':'showNewDBEntries'},
  688:         {'label':'update the institutsbibliography','action':'updateInstitutsbiliography'},
  689:         #{'label':'Edit Historical Persons','action':'editHistoricalPersonsForm'},
  690:         #{'label':'Store Historical Persons','action':'storeHistoricalPersons'},
  691:         )
  692:     
  693: 
  694:     def updatePublicationDB(self,personId=None):
  695:         """updates the publication db, i.e. copy year and type into the main table"""
  696:         
  697:         if personId:
  698:             founds = self.ZSQLInlineSearch(_table="publications",key_main=personId)
  699:         else:
  700:             founds = self.ZSQLInlineSearch(_table="publications")
  701:             
  702:         for found in founds:
  703:                         
  704:             if found.id_institutsbibliographie and (not found.id_institutsbibliographie =="") and (not found.id_institutsbibliographie =="0"):
  705:                 
  706:                 entries = self.ZSQLInlineSearch(_table="institutsbiblio",id=found.id_institutsbibliographie)
  707:                 for entry in entries:
  708:                     self.ZSQLChange(_table='publications',_identify='oid=%s' % found.oid,year=entry.year,referencetype=entry.reference_type)
  709:                     
  710:             if found.id_gen_bib and (not found.id_gen_bib ==""):
  711:                 entries = self.ZSQLInlineSearch(_table="bibliography",id=found.id_gen_bib)
  712:                 for entry in entries:
  713:                     self.ZSQLChange(_table='publications',_identify='oid=%s' % found.oid,year=entry.year,referencetype=entry.reference_type)
  714:                     
  715:         return True        
  716:     
  717:     def showNewDBEntries(self):
  718:         """zeige neue Eintraege in der Datenbank ohne e-mail adressen bzw. fuer die noch kein Object angelegt wurde"""
  719:         
  720:         qstr="select * from personal_www where web_object_created='no' and not key=''"
  721:         res=self.ZSQLQuery(qstr)
  722:         
  723:         pt=PageTemplateFile(os.path.join(package_home(globals()),'zpt','showNewDBEntries.zpt')).__of__(self)
  724:         return pt(newEntries=res)
  725:    
  726:     def createNewStaffObjects(self,RESPONSE):
  727:         """create new staff object"""
  728:         
  729:         memberFolder=getattr(self,'members')
  730:         args=self.REQUEST.form
  731:         arg_k=args.keys()
  732:         arg_k.remove("submit")
  733:         ret=""
  734:         for key in arg_k:
  735:             k=self.urlUnQuote(key)
  736:           
  737:             qstr="select * from personal_www where key=%s"%self.ZSQLQuote(k)
  738:             res=self.ZSQLQuery(qstr)[0]
  739:             if args[key]!="": #email-adresse wurde eingetragen
  740:                 #create the object
  741:                 e_mail=args[key]
  742:                 try:
  743:                     newObj=MPIWGStaff.MPIWGStaff(e_mail,res.last_name,res.first_name,k)
  744:                     memberFolder._setObject(e_mail,newObj)
  745:                     obj=getattr(memberFolder,e_mail)
  746:                     obj.reindex_object()
  747:                     ret+="Created %s \n"%e_mail
  748:                     created=True
  749:                 except:
  750:                     msg="Cannot create new user %s (%s %s)"%(e_mail,sys.exc_info()[0],sys.exc_info()[1])
  751:                     logging.error(msg)
  752:                     ret+=msg+"\n"
  753:                     created=False
  754:                 
  755:                 if created:
  756:                     qstr="update personal_www set web_object_created='yes',e_mail='%s@mpiwg-berlin.mpg.de' where key=%s"%(e_mail,self.ZSQLQuote(k))
  757:                     self.ZSQLQuery(qstr)
  758:         
  759:         return ret
  760:                    
  761:         
  762:     def generateNewPersonEntry(self,data):
  763:         """generate a new person entry for data, neue personen werden zunaechst nur in der datenbank angelegt """
  764:         
  765:         #memberFolder=getattr(self,'members')
  766:         #create the object
  767:         
  768: #        try:
  769: #            newObj=MPIWGStaff.MPIWGStaff(urllib.quote(data['key']),data['last_name'].encode('utf-8'),data['first_name'].encode('utf-8')) 
  770: #            memberFolder._setObject(urllib.quote(data['key']),newObj)
  771: #        except:
  772: #            return False, "Cannot create new user %s (%s %s)"%(data['key'],sys.exc_info()[0],sys.exc_info()[1])
  773: #        
  774:         
  775:         #create the new entry in the database
  776:         
  777:         
  778:         result,msg=MPIWGStaff.createNewDBEntry(self,data['publish_the_data'],data['key'],data['last_name'],
  779:                                   data['first_name'],data['title'],data['status'],"",
  780:                                   "",data['date_from'],data['date_to'],
  781:                                   data['department'],data['home_inst'],data['funded_by'],
  782:                                   data['e_mail2'],data['current_work'],"yes",data['date_stay_at_mpiwg'],data['group'],"no",data['current_work'])
  783:         
  784:         return result,msg
  785:  
  786:     def updatePersonEntry(self,data,ignoreEntries=[]):
  787:         """update an person entry from data. but ignore all fields in ignore Entries"""
  788:         
  789:         ignoreEntries.append('current_work') # TODO:updatecurrent work
  790:         
  791:         if data['date_to']=="": # wenn date_to leer
  792:              data['date_to']="date_none"
  793:         
  794:         if data['date_from']=="": # wenn date_fromleer
  795:              data['date_from']="date_none"
  796:         msg=""
  797:    
  798:         
  799:         #eintragen
  800:          
  801:         columns=data.keys()
  802:         for x in ignoreEntries:
  803:             logging.info("ign rem: %s"%x)
  804:             try: #falls in ignore entries felder sind, die nicht in columns sind, fange den fehler ab
  805:              columns.remove(x)
  806:             except:
  807:                 pass
  808: 
  809:         
  810:         insert=[]
  811:         for key in columns:
  812:             if data[key]=="date_none": # date_none eintrag wird zu null uebersetzt
  813:                 insert.append('%s=null'%key)
  814:             else:
  815:                 insert.append(""" "%s"=%s"""%(key,self.ZSQLQuote(data[key])))
  816:             
  817:         insertStr=",".join(insert)
  818:         queryStr="update personal_www SET %s where key='%s'"%(insertStr,data['key'])
  819:         self.ZSQLQuery("SET DATESTYLE TO 'German'")
  820:         self.ZSQLQuery(queryStr)
  821:        
  822:         #currentwork
  823:         #if not (txt==""):
  824:         #    queryStr="INSERT INTO current_work (id_main,current,publish) VALUES ('%s','%s','%s')"%(id,txt,txt_p)
  825:         #
  826:         #    self.ZSQLQuery(queryStr)
  827:         
  828:         return True,msg
  829: 
  830: 
  831:     def updatePersonalwww_doIt(self):
  832:         """do the update"""
  833:         args=self.REQUEST.form
  834:         resultSet=self.REQUEST.SESSION['personal_www']['resultSet']
  835:         news=self.REQUEST.SESSION['personal_www']['news']
  836:         conflicts=self.REQUEST.SESSION['personal_www']['conflicts']
  837:         ret="<html><body>"
  838:         # generate the new entry
  839:       
  840:         if news and (len(news)>0):
  841:             ret+="<h2>Hinzugef&uuml;gt</h2>"
  842:             ret+="<p>Neueintr&auml;ge erscheinen erst auf der Homepage, wenn ihnen eine e-mail Adresse zugeordnet wurde.</p>"
  843:             ret+="<ul>"
  844:         for new in news:
  845:       
  846:             if args.has_key(self.urlQuote(new.encode('utf-8'))): # entry was selected
  847:                 result,msg=self.generateNewPersonEntry(resultSet[new])
  848:                 if not result:
  849:                     logging.error("Error (generateNewPersonEntry) %s"%msg)
  850:                     ret+="<li>ERROR: %s %s"%(new.encode('utf-8'),msg)
  851:                 else:
  852:                     ret+="<li>OK: %s"%(new.encode('utf-8'))
  853:         if news and (len(news)>0):
  854:             ret+="<p>Neueintr&auml;ge erscheinen erst auf der Homepage, wenn ihnen eine e-mail Adresse zugeordnet wurde.</p>"
  855:             ret+="</ul>"     
  856:         
  857:         # update
  858: 
  859:         if len(conflicts.keys())>0:
  860:             ret+="<h2>&Auml;nderung des Benutzers &uuml;bernehmen</h2>"
  861:             ret+="<p>Wenn n&ouml;tig in Filemaker-db &auml;ndern:</p>"
  862:             
  863:         # konflicte   
  864:         for conflict in conflicts.keys():
  865:             ignoreEntries=[]
  866:             displayIgnored=[]
  867:             for cf in conflicts[conflict]:
  868:                 if args[conflict.encode('utf-8')+'_'+cf[0]]=="stored": #use the stored one
  869:                     ignoreEntries.append(cf[0])  #so ignore field cf[0]       
  870:                     displayIgnored.append(cf)
  871:             if len(displayIgnored)>0:
  872:                 ret+="<h3>%s</h3>"%conflict.encode('utf-8')
  873:                 
  874:                 ret+="<table border='1'>"
  875:                 for iE in displayIgnored:
  876:                     ret+="<tr><td>%s</td><td>%s</td><td>%s</td>"%(iE[0].encode('utf-8'),iE[1].encode('utf-8'),iE[2].encode('utf-8'))
  877:                 ret+="</tabel>"
  878:                 
  879:             self.updatePersonEntry(resultSet[conflict],ignoreEntries=ignoreEntries)
  880:          
  881:          # rest
  882:         cl=list(conflicts.keys())
  883:         
  884:         for key in resultSet.keys():
  885:              if key not in cl:
  886:                  self.updatePersonEntry(resultSet[key])
  887:         return ret+"</body></html>"
  888:                      
  889: 
  890:     def updateInstitutsbiliography(self):
  891:         """update the Institutsbibliogrpahy"""
  892:         self.upDateSQL('personalwww.xml')
  893:         return "<html><body>DONE</body></html>"
  894: 
  895: 
  896:     
  897: 
  898:     def updatePersonalwww_html(self):
  899:         """update form for the homepages web form"""
  900:         pt=PageTemplateFile(os.path.join(package_home(globals()),'zpt','updatePersonalwww.zpt')).__of__(self)
  901:         return pt()
  902: 
  903:     
  904:     def updatePersonalwww(self,uploadfile):
  905:         """update personalwww
  906:         @param uploadfile: file handle auf das file
  907:         """
  908:         dsn=self.getConnectionObj().connection_string
  909:         #dsn="dbname=personalwww"
  910:         resultSet=updatePersonalWWW.importFMPXML(uploadfile)
  911:         news,conflicts=updatePersonalWWW.checkImport(dsn, resultSet)
  912: 
  913:         self.REQUEST.SESSION['personal_www']={}
  914:         self.REQUEST.SESSION['personal_www']['resultSet']=resultSet
  915:         self.REQUEST.SESSION['personal_www']['news']=news
  916:         self.REQUEST.SESSION['personal_www']['conflicts']=conflicts
  917:         
  918:         pt=PageTemplateFile(os.path.join(package_home(globals()),'zpt','updatePersonalwww_check.zpt')).__of__(self)
  919:         return pt()
  920:     
  921: 
  922:      
  923:     def reindexCatalogs(self,RESPONSE=None):
  924:         """reindex members and project catalog"""
  925:         
  926:         
  927:         try:
  928:             
  929:             self.ProjectCatalog.manage_catalogReindex(self.REQUEST,RESPONSE,self.REQUEST['URL1'])
  930:             logger("MPIWG Root (reindexCatalog: projects)",logging.INFO,"DONE")
  931:         except:
  932:             logger("MPIWG Root (reindexCatalog: projects)",logging.WARNING," %s %s"%sys.exc_info()[:2])
  933:         
  934:         try:
  935:             
  936:             self.MembersCatalog.manage_catalogReindex(self.REQUEST,RESPONSE,self.REQUEST['URL1'])
  937:             logger("MPIWG Root (reindexCatalog: members)",logging.INFO,"DONE")
  938:         except:
  939:             logger("MPIWG Root (reindexCatalog: members)",logging.WARNING," %s %s"%sys.exc_info()[:2])
  940:         
  941:         try:
  942:             
  943:             self.fulltextProjectsMembers.manage_catalogReindex(self.REQUEST,RESPONSE,self.REQUEST['URL1'])
  944:             logger("MPIWG Root (reindexCatalog: fulltextProjectsMembers)",logging.INFO,"DONE")
  945:         except:
  946:             logger("MPIWG Root (reindexCatalog: fulltextProjectsMembers)",logging.WARNING," %s %s"%sys.exc_info()[:2])
  947:             
  948:         
  949:     
  950:         
  951:            
  952:         if RESPONSE:
  953:             RESPONSE.redirect('manage_main')
  954: 
  955:         
  956:         
  957: 
  958:     def getAllMembers(self):
  959:         #ret=[]
  960:         
  961:         def sorter(x,y):
  962:             return cmp(x[0],y[0])
  963:                     
  964:         results=self.MembersCatalog({'isPublished':True})
  965:        
  966:         ret=[(", ".join([proj.lastName, proj.firstName]).decode('utf-8'),proj.getKey) for proj in results]
  967:         
  968:         ret.sort(sorter)
  969:         return ret
  970:     
  971:     
  972:     def printAllMembers(self):
  973:         """print"""
  974:         members=self.getAllMembers()
  975:         ret=""
  976:         for x in members:
  977:             ret+="<p>%s</p>"%x
  978:         return ret
  979:     
  980:         
  981:     def makeList(self,entry):
  982:         """makes a list out of one entry or repeat a list"""
  983:         if type(entry) is StringType:
  984:             return [entry]
  985:         else:
  986:             return entry
  987: 
  988:     def getTreeRSS(self,dep=None,date=None,onlyActive=1,onlyArchived=0):
  989:         """generateTree"""
  990:         rss="""<?xml version="1.0" encoding="utf-8"?>
  991:                  <rss version="2.0">
  992:                    <channel>"""
  993:         
  994:         for obj in self.getTree(dep, date, onlyActive, onlyArchived):
  995:             linkStr="""<link>http://www.mpiwg-berlin.mpg.de/en/research/projects/%s</link>"""
  996:             rss+="""<item>"""
  997:             rss+=linkStr%obj[3].getId()
  998:             rss+="""</item>"""
  999:             if hasattr(obj[3],'publicationList'):
 1000: 	        rss+="""<item>"""
 1001:                 rss+=linkStr%(obj[3].getId()+"/publicationList");
 1002:                 rss+="""</item>"""
 1003:         rss+="""</channel>
 1004:         </rss>"""
 1005: 
 1006:         
 1007:         return rss
 1008: 
 1009:     def getTree(self,dep=None,date=None,onlyActive=0,onlyArchived=0):
 1010:         """generate Tree from project list
 1011:         als Liste, jeder Eintrag ist ein Tupel ,(Tiefe, ProjektNummer,ProjektObject
 1012:         onlyActive = 0  : alle Projekte
 1013:         onlyActive = 1 : nur active Projekte
 1014:         onlyActive = 2: nur inactive Projekte
 1015:         
 1016:         onlyArchived=0: alle Projekte
 1017:         onlyArchived= 1 : nur aktuelle Projekte
 1018:         onlyArchived = 2: nur archivierte Projekte
 1019:         """
 1020: 
 1021:         returnListTmp=[]
 1022:         returnList=[]
 1023:         
 1024:         for project in self.getProjectFields('xdata_05',sort="int",date=date): # get Projects sorted by xdata_05
 1025: 
 1026:             for idNr in project[1].split(";"): # more than one number
 1027:                 if not idNr=="":
 1028:                     splittedId=idNr.split(".")
 1029:                     depth=len(splittedId)
 1030:                     nr=idNr
 1031:                     #title=project[0].WEB_title
 1032:                     title=[project[0].getContent('WEB_title')]
 1033:                     #print title
 1034:                     
 1035:                     if idNr[0]=="x": # kompatibilitaet mit alter Konvention, x vor der Nummer macht project inactive
 1036:                         project[0].setActiveFlag(False)
 1037:                    
 1038:                     if (not dep) or (idNr[0]==dep): #falls dep gesetzt ist nur dieses hinzufuegen.
 1039:                         
 1040:                         if (onlyActive==0):
 1041:                             returnListTmp.append((depth,nr,title,project[0]))
 1042:                         elif (onlyActive==1) and project[0].isActiveProject(): #nur active projekte
 1043:                             returnListTmp.append((depth,nr,title,project[0]))
 1044:                         elif (onlyActive==2) and (not project[0].isActiveProject()): #nur active projekte
 1045:                             returnListTmp.append((depth,nr,title,project[0]))
 1046:                    
 1047:                    
 1048:         #filter jetzt die Liste nach Archived oder nicht
 1049:         for entry in returnListTmp:
 1050:                     if (onlyArchived==0):
 1051:                             returnList.append(entry)
 1052:                     elif (onlyArchived==1) and (not entry[3].isArchivedProject()): #nur active projekte
 1053:                             returnList.append(entry)
 1054:                     elif (onlyArchived==2) and (entry[3].isArchivedProject()): #nur active projekte
 1055:                             returnList.append(entry)
 1056:                    
 1057:         
 1058:         return returnList
 1059: 
 1060: 
 1061:         
 1062:     def changePosition(self,treeId,select,RESPONSE=None):
 1063:         """Change Postion Entry"""
 1064:         numbers=[]
 1065: 
 1066:         # Suche hoechste bisherige nummer
 1067:         projects=self.getProjectFields('xdata_05') # get Projects sorted by xdata_05
 1068:         #print "pj",projects
 1069:         for project in projects: #suche alle subtrees der treeId
 1070:             #print treeId
 1071:             
 1072:             founds=re.match(treeId+"\.(.*)",project[1].split(";")[0])
 1073:             if founds:
 1074:                 #print "x",founds.group(0),len(founds.group(0).split("."))
 1075:                 if len(founds.group(0).split("."))==len(treeId.split("."))+1: # nur ein punkt mehr, d.h. untere ebene
 1076:                     try:
 1077:                         numbers.append(int(founds.group(0).split(".")[len(founds.group(0).split("."))-1]))
 1078:                     except:
 1079:                         numbers.append(int(0))
 1080: 
 1081:         try:
 1082:             highest=max(numbers)
 1083:         except:
 1084:             highest=0
 1085:         projects=self.showNewProjects()
 1086:         for i in self.makeList(select):
 1087:             highest+=10
 1088:             projects[int(i)][0].xdata_05=treeId+"."+str(highest)
 1089: 
 1090: 
 1091:         if RESPONSE is not None:
 1092:             RESPONSE.redirect('showTree')
 1093:         
 1094:     def changeTree(self,RESPONSE=None):
 1095:         """change the complete tree"""
 1096:         form=self.REQUEST.form
 1097:         hashList={}
 1098:         onlyArchived=int(form.get("onlyArchived",0))
 1099:         onlyActive=int(form.get("onlyActive",0))
 1100:         
 1101:         
 1102:         fields=self.getTree(onlyArchived=onlyArchived,onlyActive=onlyActive)
 1103:         
 1104:         logging.info("GOT TREE!----------------------------------------------------")
 1105:         for field in form.keys():
 1106:             
 1107:             splitted=field.split('_')
 1108:             if (len(splitted)>1) and (splitted[1]=="runningNumber"): #feld hat die Form Nummer_name und runnignNumber
 1109:             
 1110:                 
 1111:                 nr=int(splitted[0]) # nummer des Datensatzes
 1112:                 currentEntry = fields[nr]
 1113:             
 1114:                 if form.has_key(str(nr)+'_active'): # active flag is set
 1115:                     fields[nr][3].setActiveFlag(True)
 1116:                 else:
 1117:                     fields[nr][3].setActiveFlag(False)
 1118:                     
 1119:                 #nummer hat sich geŠndert
 1120:                 
 1121:                 entryChanged = False;
 1122:                 
 1123:                 
 1124:                 if not (fields[nr][3].xdata_05==form[str(nr)+'_number']):
 1125:                     logging.info("Changed!Number+++++++++++++++++++++++++++++++++")
 1126:                     fields[nr][3].xdata_05=form[str(nr)+'_number']
 1127:                     entryChanged = True
 1128:                     
 1129:                 #completed har sich geaendert
 1130:                             
 1131:                 if not (fields[nr][3].getCompletedAt()==fields[nr][3].transformDate(form[str(nr)+'_completed'])):
 1132:                     fields[nr][3].setCompletedAt(form[str(nr)+'_completed'])
 1133:                     logging.info("Changed!Completed+++++++++++++++++++++++++++++++++")
 1134:                     entryChanged = True
 1135:                 
 1136:                 if not (fields[nr][3].getStartedAt()==fields[nr][3].transformDate(form[str(nr)+'_started'])):
 1137:                     fields[nr][3].setStartedAt(form[str(nr)+'_started'])
 1138:                     logging.info("Changed!Started+++++++++++++++++++++++++++++++++")
 1139:                     entryChanged = True
 1140:                 
 1141:                 
 1142:                 if entryChanged:
 1143:                     logging.info("Changed!+++++++++++++++++++++++++++++++++")
 1144:                     fields[nr][3].copyObjectToArchive()
 1145:                 
 1146:                     
 1147:         if RESPONSE is not None:
 1148:             RESPONSE.redirect('showTree')
 1149: 
 1150:     def getProjectWithId(self,id):
 1151:         fields=self.getProjectFields('xdata_05')
 1152:         for field in fields:
 1153:             if field[1]==id:
 1154:                 return field[0]
 1155: 
 1156:         return None
 1157:             
 1158:         
 1159:             
 1160:         
 1161:     def getRelativeUrlFromPerson(self,list):
 1162:         """get urls to person list"""
 1163:         ret=[]
 1164:         persons=list.split(";")
 1165:         for person in persons:
 1166:             
 1167:             if len(person)>1: #nicht nur Trennzeichen
 1168:                 splitted=person.split(",")
 1169:                 if len(splitted)==1:
 1170:                     splitted=person.split(" ")
 1171:                 splittedNew=[re.sub(r'\s(.*)','$1',split) for split in splitted]
 1172:                 if splittedNew[0]=='':
 1173:                     del splittedNew[0]
 1174:                 search=string.join(splittedNew,' AND ')
 1175:                 
 1176:                 if not search=='':
 1177: 
 1178:                     try:
 1179:                         proj=self.MembersCatalog({'title':search})
 1180:                     except:
 1181:                         proj=None
 1182: 
 1183:                 if proj:
 1184:                     #ret.append("<a href=%s >%s</a>"%(proj[0].absolute_url,person.encode('utf-8')))
 1185:                     ret.append("<a href=%s >%s</a>"%('members/'+proj[0].id+'/index.html',person))
 1186:                 else:
 1187:                     #ret.append("%s"%person.encode('utf-8'))
 1188:                     ret.append("%s"%person)
 1189:         return string.join(ret,";")
 1190:         
 1191:     def getMemberIdFromKey(self,key):
 1192:         """gibt die ensprechende id  im members Ordner zum key"""
 1193:         
 1194:         if key=="":
 1195:             return ""
 1196:         try:
 1197:             key=utf8ify(key)
 1198:             catalogged=self.MembersCatalog({'getKey':key})
 1199:             if len(catalogged)==0:
 1200:                 return ""
 1201:             else:
 1202:                 return catalogged[0].getObject().getId()
 1203:         
 1204:         except:
 1205:             return ""
 1206: 
 1207:             
 1208: 
 1209:     def getProjectsOfMembers(self,date=None):
 1210:         """give tuple member /projects"""
 1211:         ret=[]
 1212:         members=self.getAllMembers()
 1213:         logging.error("X %s"%repr(members))
 1214:         #return str(members)
 1215:         for x in members:
 1216:             logging.error("X %s"%repr(x))
 1217:             projects=self.getProjectsOfMember(key=x[1],date=date)
 1218:             if len(projects)>0:
 1219:                 ret.append((x[0],projects))
 1220:             
 1221:         return ret
 1222: 
 1223:     def getProjectsOfMember(self,key=None,date=None,onlyArchived=1,onlyActive=1):
 1224:         """get projects of a member
 1225:     
 1226:         @param key: (optional) Key zur Idenfikation des Benutzer
 1227:         @param date: (optional) Version die zum Zeitpunkt date gueltig war
 1228:         @param onlyArchived: 
 1229:         onlyArchived=0: alle Projekte
 1230:         onlyArchived= 1 : nur aktuelle Projekte
 1231:         onlyArchived = 2: nur archivierte Projekte
 1232:         """
 1233:         # TODO: Die ganze Loesung
 1234:         def sortP(x,y):
 1235:             """sort by sorting number"""
 1236:             return cmp(x.WEB_title,y.WEB_title)
 1237:         
 1238:         ret=[]  
 1239:         if key:     
 1240:             proj=self.ProjectCatalog({'getPersonKeyList':utf8ify(key)})
 1241:         else:
 1242:             return ret # key muss definiert sein
 1243:         
 1244:      
 1245:         if proj:
 1246:             proj2=[]
 1247:             for x in proj:
 1248:                 #logging.error("proj:%s"%repr(x.getPath()))
 1249:                 if (not getattr(x.getObject(),'invisible',None)) and (getattr(x.getObject(),'archiveTime','')==''):   
 1250:                       proj2.append(x)
 1251: 
 1252:         else:
 1253:             proj2=[]
 1254:             
 1255:        
 1256:        
 1257:         proj2.sort(sortP)
 1258: 
 1259:         projectListe=[]
 1260:         #logging.error("getprojectsofmember proj2: %s"%repr(proj2))
 1261:         for proj in proj2:   
 1262:             obj=proj.getObject()
 1263:             add=False
 1264:             if onlyArchived==1: #nur aktuell projecte
 1265:                 if not obj.isArchivedProject():
 1266:                     add=True
 1267:             elif onlyArchived==2: #nur archivierte
 1268:                 if obj.isArchivedProject():
 1269:                     add=True
 1270:             else: #alle
 1271:                add=True 
 1272:                
 1273:             if onlyActive==1: #nur active projecte
 1274:                 if obj.isActiveProject():
 1275:                     add=add & True
 1276:                 else:
 1277:                     add=add & False
 1278:                 
 1279:             elif onlyArchived==2: #nur nicht aktvive
 1280:                 if not obj.isActiveProject():
 1281:                     add=add & True
 1282:             else: #alle
 1283:                add=add & True
 1284:                     
 1285:             if add:
 1286:                 projectListe.append(obj)
 1287:                 
 1288:         #logging.error("getprojectsofmember projectliste: %s"%repr(projectListe))
 1289:         return projectListe
 1290:      
 1291:     def givePersonList(self,name):
 1292:         """check if person is in personfolder and return list of person objects"""
 1293:         
 1294:         splitted=name.split(",")
 1295:         if len(splitted)==1:
 1296:             splitted=name.lstrip().rstrip().split(" ")
 1297:         splittedNew=[split.lstrip() for split in splitted]
 1298:         
 1299:         if splittedNew[0]=='':
 1300:             del splittedNew[0]
 1301:         search=string.join(splittedNew,' AND ')
 1302:         
 1303:         if not search=='':
 1304:             proj=self.MembersCatalog({'title':search})
 1305: 
 1306:         if proj:
 1307:             return [[x.lastName,x.firstName] for x in proj]
 1308:         else:
 1309:             return []
 1310:             
 1311: ##         splitted=name.split(",") # version nachname, vorname...
 1312: ##         if len(splitted)>1:
 1313: ##             lastName=splitted[0] 
 1314: ##             firstName=splitted[1]
 1315: ##         else: 
 1316: ##             splitted=name.split(" ") #version vorname irgenwas nachnamae
 1317:         
 1318: ##             lastName=splitted[len(splitted)-1]
 1319: ##             firstName=string.join(splitted[0:len(splitted)-1])
 1320: 
 1321: ##         objs=[]
 1322: 
 1323:         #print  self.members 
 1324:       ##   for x in self.members.__dict__:
 1325: ##             obj=getattr(self.members,x)
 1326: ##             if hasattr(obj,'lastName') and hasattr(obj,'firstName'):
 1327:                 
 1328: ##                 if (re.match(".*"+obj.lastName+".*",lastName) or re.match(".*"+lastName+".*",obj.lastName)) and (re.match(".*"+obj.firstName+".*",firstName) or re.match(".*"+firstName+".*",obj.firstName)):
 1329:                     
 1330: ##                     objs.append((obj,lastName+", "+firstName))
 1331: 
 1332:         
 1333: ##        return objs
 1334: 
 1335: 
 1336:     def personCheck(self,names):
 1337:         """all persons for list"""
 1338:         #print "names",names
 1339:         splitted=names.split(";")
 1340:         ret={}
 1341:         for name in splitted:
 1342: 
 1343:             if not (name==""):
 1344:                 try:
 1345:                     ret[name]=self.givePersonList(name)
 1346:                 except:
 1347:                     """NOTHIHN"""
 1348:         #print "RET",ret
 1349:         return ret
 1350: 
 1351:     def giveCheckList(self,person,fieldname):
 1352:         """return checklist"""
 1353:         #print "GCL",fieldname
 1354:         if fieldname=='xdata_01':
 1355:             x=self.personCheck(person.getContent(fieldname))
 1356:             #print "GCLBACKX",x
 1357:             return x
 1358:         
 1359: 
 1360:     def isCheckField(self,fieldname):
 1361:         """return chechfield"""
 1362:         
 1363:         return (fieldname in checkFields)
 1364: 
 1365:     
 1366:     def generateNameIndex(self):
 1367:         """erzeuge einen index verwendeter personen"""
 1368:         import psycopg
 1369:         o = psycopg.connect('dbname=authorities user=dwinter password=3333',serialize=0) 
 1370:         results={}
 1371:         print self.fulltext.historicalNames.items()
 1372:         for nameItem in self.fulltext.historicalNames.items(): #gehe durch alle namen des lexikons
 1373:             
 1374:             c = o.cursor() 
 1375:             name=nameItem[0]
 1376:             print "check",name
 1377:             c.execute("select lastname,firstname from persons where lower(lastname) = '%s'"%quote(name))
 1378:             tmpres=c.fetchall()
 1379:             firstnames=[result[1] for result in tmpres] # find all firstnames
 1380:             if tmpres:
 1381:                 lastname=tmpres[0][0]
 1382:                 
 1383:             for found in self.fulltext({'names':name}):
 1384:                 if found.getObject().isActual():
 1385:                     for nh in found.getObject().getGetNeighbourhood(name, length=50,tagging=False): #hole umgebung
 1386:                         #schaue nun ob der vorname hinter oder vor dem name ist
 1387:                         position=nh.find(lastname)
 1388:                         # vorher
 1389:                         #print "NH",nh
 1390:                         bevorS=nh[0:position].split()
 1391:                         #print "BV",bevorS
 1392:                         if len(bevorS)>1:
 1393:                             try:
 1394:                                 bevor=[bevorS[-1],bevorS[-2]]
 1395:                             except:
 1396:                                 bevor=[bevorS[0]]
 1397:                         else:
 1398:                             bevor=[]
 1399:                         #nachher
 1400:                         behindS= re.split("[,|;| ]",nh[position:]) 
 1401:                         #print "BH",behindS
 1402:                         if len(behindS)>2:
 1403:                             try:
 1404:                                 behind=behindS[1:3]
 1405:                             except:
 1406:                                 behind=[bevorS[1]]
 1407:                         else:
 1408:                             behind=[]
 1409:                         for firstname in firstnames:
 1410:                             if firstname in bevor+behind: #Namen wie mit Adelspraedikaten werden so erstmal nich gefunden
 1411:                                 id="%s,%s"%(lastname,firstname)
 1412:                                 if not results.has_key(id):
 1413:                                     results[id]=[]
 1414:                                 objId=found.getObject().getId()
 1415:                                 if not (objId in results[id]):
 1416:                                     print "d %s for %s"%(id,objId)    
 1417:                                     results[id].append(objId)    
 1418:             self.nameIndex=results
 1419:         return results
 1420:                     
 1421:     def editNameIndexHTML(self):
 1422:         """edit the name index"""
 1423:         if not hasattr(self,'nameIndexEdited'): # falls editierter index noch nicht existiert, kopiere automatisch erstellten
 1424:             self.nameIndexEdited=copy.copy(self.nameIndex)
 1425:             print "huh"
 1426:         #self.nameIndexEdited=copy.copy(self.nameIndex)
 1427:         #print self.nameIndexEdited
 1428:         pt=PageTemplateFile(os.path.join(package_home(globals()),'zpt','editHistoricalNames.zpt')).__of__(self)
 1429:         return pt()
 1430:     
 1431:     def getNamesInProject(self,projectId):
 1432:         """get all names ofnameIndexEdited which are references in projec with projectId"""
 1433:         
 1434:         ret=[]
 1435:         for name in self.nameIndexEdited.keys():
 1436:             if projectId in self.nameIndexEdited[name]:
 1437:                 ret.append(name)
 1438:         
 1439:         return ret
 1440:     
 1441:     def editNameIndex(self,RESPONSE=None,name=None,occurrances=None,submit=None):
 1442:         """edit the index"""
 1443:         nI=self.nameIndexEdited # mI introduced to make sure that changes to nameIndexEdited are know to ZODB
 1444:         if submit=="delete":
 1445:            
 1446: 
 1447:             dh=getattr(self,'deletedHistoricalNames',{})
 1448:             
 1449:             if type(dh) is ListType:
 1450:                 dh={}
 1451:             if not dh.has_key(name):
 1452:                 dh[name]=occurrances.split("\n")
 1453:             else:
 1454:                 dh[name]+=occurrances.split("\n")
 1455:             
 1456:             self.deletedHistoricalNames=dh
 1457:             
 1458:             del self.nameIndexEdited[name]
 1459:             
 1460:         
 1461:         elif (submit=="change"):
 1462:             
 1463:             nI[name]=occurrances.split("\n")[0:]
 1464:             
 1465:         elif (submit=="add"):
 1466:             if not nI.has_key(name):
 1467:                 nI[name]=occurrances.split("\n")
 1468:             else:
 1469:                 nI[name]+=occurrances.split("\n")
 1470:     
 1471:         self.nameIndexEdited=nI
 1472:    
 1473:       
 1474:         if RESPONSE is not None:
 1475:             RESPONSE.redirect('editNameIndexHTML')
 1476:         
 1477:     
 1478:     
 1479:     def restoreIndex(self):
 1480:         """restore"""
 1481:         self.nameIndexEdited=self.nameIndex
 1482:         return "done"
 1483:     
 1484: 
 1485:             
 1486: def manage_addMPIWGRootForm(self):
 1487:     """form for adding the root"""
 1488:     pt=PageTemplateFile(os.path.join(package_home(globals()),'zpt','addMPIWGRootForm.zpt')).__of__(self)
 1489:     return pt()
 1490: 
 1491: def manage_addMPIWGRoot(self,id,title,connection_id="",RESPONSE=None):
 1492:     """add a root folder"""
 1493:     newObj=MPIWGRoot(id,title)
 1494:     self._setObject(id,newObj)
 1495:     ob=getattr(self,id)
 1496:     setattr(ob,'connection_id',connection_id)
 1497:     if RESPONSE is not None:
 1498:         RESPONSE.redirect('manage_main')
 1499:         

FreeBSD-CVSweb <freebsd-cvsweb@FreeBSD.org>