Annotation of MPIWGWeb/MPIWGRoot.py, revision 1.1.2.32

1.1.2.1   dwinter     1: from Products.PageTemplates.PageTemplateFile import PageTemplateFile
                      2: from Products.PageTemplates.PageTemplate import PageTemplate
                      3: from Products.PageTemplates.ZopePageTemplate import ZopePageTemplate
                      4: from Products.ZSQLExtend.ZSQLExtend import ZSQLExtendFolder
                      5: from Products.ZCatalog.CatalogPathAwareness import CatalogAware
                      6: from OFS.Image import Image
                      7: from Globals import package_home
                      8: import urllib
                      9: import MPIWGStaff
                     10: import string
                     11: import re
                     12: import os
                     13: from types import *
                     14: import logging
                     15: import xmlhelper # Methoden zur Verwaltung der projekt xml
                     16: from OFS.SimpleItem import SimpleItem
                     17: from OFS.Folder import Folder
                     18: from Products.ZSQLMethods.SQL import SQLConnectionIDs
                     19: from AccessControl import ClassSecurityInfo
                     20: from bibliography import *
                     21: import time
                     22: import xml.dom.minidom
                     23: import sys
                     24: from Ft.Xml.XPath import Evaluate
                     25: from Ft.Xml.XPath.Context import Context
                     26: from Ft.Xml.Domlette import NonvalidatingReader,PrettyPrint, Print
                     27: from Ft.Xml import EMPTY_NAMESPACE
                     28: import copy
                     29: import updatePersonalWWW
                     30: import MPIWGStaff
                     31: from MPIWGHelper import *
                     32: 
1.1.2.6   casties    33: 
                     34: def sortWeight(x,y):
                     35:     x1=int(getattr(x[1],'weight','0'))
                     36:     y1=int(getattr(y[1],'weight','0'))
                     37:     return cmp(x1,y1)
                     38: 
                     39: 
1.1.2.1   dwinter    40: class MPIWGRoot(ZSQLExtendFolder):
                     41:     """Stammordner fuer den Web-Server"""
                     42: 
1.1.2.15  casties    43:     meta_type='MPIWGRoot'
                     44: 
1.1.2.6   casties    45:     fieldLabels={'WEB_title':'WEB_Title',
                     46:                  'xdata_01':'Responsible Scientists',
                     47:                  'xdata_02':'Department',
                     48:                  'xdata_03':'Historical Persons',
                     49:                  'xdata_04':'Time period',
                     50:                  'xdata_05':'Sorting number',
                     51:                  'xdata_06':'Keywords',
                     52:                  'xdata_07':'Short title',
                     53:                  'xdata_08':'Other involved scholars' ,
                     54:                  'xdata_09':'Disciplines',
                     55:                  'xdata_10':'Themes',
                     56:                  'xdata_11':'Object Digitallibrary',
                     57:                  'xdata_12':'Cooperation partners',
                     58:                  'xdata_13':'Funding institutions',
                     59:                  'WEB_project_header':'WEB_project_header',
                     60:                  'WEB_project_description':'WEB_project_description',
                     61:                  'WEB_related_pub':'WEB_related_pub'}
1.1.2.1   dwinter    62:     
1.1.2.18  casties    63:     # (is this used?)
1.1.2.1   dwinter    64:     folders=['MPIWGProject','Folder','ECHO_Navigation']
1.1.2.18  casties    65:     # language of this instance
                     66:     lang = 'en'
1.1.2.15  casties    67:     # types of objects that show up in navigation
                     68:     nav_meta_types = ['MPIWGTemplate','MPIWGLink','MPIWGFolder']
1.1.2.1   dwinter    69: 
1.1.2.29  casties    70:     manage_options = Folder.manage_options+(
                     71:         {'label':'Update personal homepages','action':'updatePersonalwww_html'},
                     72:         {'label':'Reindex catalogs','action':'reindexCatalogs'},
                     73:         {'label':'Main config','action':'changeMPIWGRootForm'},
                     74:         {'label':'add e-mails','action':'showNewDBEntries'},
                     75:         #{'label':'update the institutsbibliography','action':'updateInstitutsbiliography'},
                     76:         #{'label':'Edit Historical Persons','action':'editHistoricalPersonsForm'},
                     77:         #{'label':'Store Historical Persons','action':'storeHistoricalPersons'},
                     78:         )
                     79:     
                     80: 
1.1.2.11  dwinter    81:     def getGetNeighbourhood(self,obj, wordStr, length=100,tagging=True):
                     82:         """finde umgebung um die worte in wordStr, zurueckgegeben wird eine Array mit den Umgebungen von Fundstellen der Worte
                     83:         alle Tags werden entfernt, die Fundstellen werden mit <span class="found">XX</span> getaggt, die Umgebungen werden 
                     84:         case insensitive gesucht
                     85:         @param wordStr: string mit Worten getrennt durch Leerzeichen, Phrasen sind mit " gekennzeichnet
                     86:                         "eine phrase", "*"  bezeichnet wildcards und wird ignoriert"
                     87:         @param length: optional, default wert 100, 2*length ist die groesse der Umgebung
                     88:         @param tagging: optional default wert true, kein span tag wird erzweugt falls tag=false
                     89:         """
                     90:         
                     91:         ret=[] # nimmt das Array auf, dass spaeter zurueckgegeben wird
                     92:         ranges=[] #Array mit tupeln x,y wobei x die Position des Anfang und y des Endes der i-ten Umgebung angiebt
                     93:         
1.1.2.22  dwinter    94:         wordStr=wordStr.lstrip().rstrip()
                     95:         
1.1.2.11  dwinter    96:         def isInRanges(nr,length):
                     97:             """test ob eine gegeben Position nr schon irgendwo in einer Umgebung ist, gibt den Index des ersten Wertes aus ranges zurueck, 
                     98:             -1, wenn kein Treffer
                     99:             
                    100:             @param nr: Position die geprueft werden soll
                    101:             @param length: Laenge des Wortes das geprueft werden soll
                    102:             """
                    103:             for x in ranges:
                    104:                 if (x[0]<=nr) and (nr < (x[1]-length)):
                    105:                     return ranges.index(x)
                    106:             return -1
                    107:                 
                    108:         # deal with phrases, in Phrasen werden die Leerzeichen durch "_" ersetzt.
                    109:         def rep_empty(str):
                    110:             x= re.sub(" ","_",str.group(0))
                    111:             return re.sub("\"","",x)
                    112:             
                    113:         wordStr=re.sub("\".*?\"", rep_empty,wordStr)#ersetze leerzeichen in " " durch "_" und loesche "
                    114:         
                    115:         #deal with wildcards, for our purposes it is enough to delete the wildcard 
                    116:         wordStr=wordStr.replace("*","")
                    117:         
                    118:         words=wordStr.split(" ")
                    119:         #if not words is ListType:
                    120:         #   words=[words]
                    121:             
                    122:         txt=obj.harvest_page()
                    123:         if not txt:
                    124:             return ret
                    125:         txt=re.sub("<.*?>", "", txt) # loesche alle Tags
                    126:         for word in words:
                    127:             word=re.sub("_"," ",word) # ersetze zurueck "_" durch " "
                    128:             pos=0
                    129:             
                    130:             n=txt.lower().count(word.lower()) # wie oft tritt das Wort auf
                    131: 
                    132:             for i in range(n):
                    133:                 pos=txt.lower().find(word.lower(),pos)
                    134: 
                    135:                 if pos > 0:
                    136:                     x=max(0,pos-length)
                    137:                     y=min(len(txt),pos+length)
                    138:                   
                    139:                     
                    140:                     #is word already in one of the results
                    141:                     nr=isInRanges(pos,len(word))
                    142:                     if nr >=0:# word ist in einer schon gefunden Umgebung, dann vergroessere diese
                    143:                         x=min(ranges[nr][0],x)
                    144:                         y=max(ranges[nr][1],y)
                    145:               
                    146:                     str=txt[x:y]
                    147:                 
                    148:                     if nr >=0: # word ist in einer schon gefunden Umgebung
                    149:                         ranges[nr]=(x,y) # neue Position der Umgebung
                    150: 
                    151:                         ret[nr]=str # neue Umgebung
                    152:                     else: # andernfalls neue Umgebung hinzufuegen
                    153:                         ranges.append((x,y))
                    154: 
                    155:                         ret.append(str)
                    156:                     
                    157:                     pos=pos+len(word)
                    158:                 else:
                    159:                     break;
                    160:                 
                    161:         # now highlight everything        
                    162:         if tagging:
                    163:             for x in range(len(ret)):
                    164:                 for word in words:
                    165:                     repl=re.compile(word,re.IGNORECASE)
                    166:                     ret[x]=repl.sub(""" <span class="found">%s</span>"""%word.upper(),ret[x])
                    167: 
                    168:         return ret
1.1.2.9   dwinter   169:     def copyAllImagesToMargin(self):
                    170:         """tranformiere alle Bilder in die Margins"""
                    171:         projects=self.getTree()
                    172:         ret=""
                    173:         for project in projects:
                    174:             proj=project[3]
                    175:             try:
                    176:                 persons=proj.copyImageToMargin();
                    177:             except:
                    178:                 logging.error("Cannnot do: %s"%repr(project))
                    179:                 
1.1.2.1   dwinter   180:     def transformProjectsToId(self):
                    181:         """trnasformiere zu ID, Hilfsfunktion die die alten Templates analysiert und mit der neuen Liste
                    182:         verantwortlicher Personen versieht"""
                    183:         projects=self.getTree()
                    184:         ret=""
                    185:         for project in projects:
1.1.2.11  dwinter   186:             
1.1.2.1   dwinter   187:             proj=project[3]
                    188:             persons=proj.identifyNames(proj.getContent('xdata_01'))
                    189:             if not hasattr(proj,'responsibleScientistsList'):
                    190:                         proj.responsibleScientistsList=[]
                    191:                         
                    192:             for person in persons.items():
1.1.2.2   dwinter   193:               
1.1.2.1   dwinter   194:                 if len(person[1]) >1: #nicht eindeutig
                    195:                     ret+="nicht eindeutig ---  %s:  %s\n"%(proj.getId(),person[0])
                    196:                     
                    197:                 elif len(person[1]) ==0: #kein eintrage
                    198:                     ret+="kein eintrag---  %s:  %s\n"%(proj.getId(),person[0])
                    199:                     proj.responsibleScientistsList.append((person[0],""))
                    200:                 else:           
                    201:                     proj.responsibleScientistsList.append((person[0],person[1][0].getObject().getKey()))
                    202:         
                    203:         return ret
1.1.2.9   dwinter   204:           
1.1.2.1   dwinter   205:                 
                    206:     def harvestProjects(self):
                    207:         """harvest"""
                    208:         folder="/tmp"
                    209:         try:
                    210:             os.mkdir("/tmp/harvest_MPIWG")
                    211:         except:
                    212:             pass
                    213:         founds=self.ZopeFind(self.aq_parent.projects,obj_metatypes=['MPIWGProject'],search_sub=1)
                    214:         for found in founds:
                    215:             txt=found[1].harvest_page()
                    216:         
                    217:             if txt and (txt != ""):
                    218:                 name=found[0].replace("/","_")
                    219:                 fh=file("/tmp/harvest_MPIWG/"+name,"w")
                    220:                 fh.write(txt)
                    221:                 fh.close()
                    222:                 
                    223:     def decode(self,str):
                    224:         """decoder"""
1.1.2.3   dwinter   225: 
1.1.2.1   dwinter   226:         if not str:
                    227:             return ""
                    228:         if type(str) is StringType:
                    229:             try:            
                    230:                 return str.decode('utf-8')
                    231:             except:
                    232:                 return str.decode('latin-1')
                    233:         else:
                    234:             return str
                    235: 
                    236: 
                    237:     def getat(self,array,idx=0,default=None):
                    238:         """return array element idx or default (but no exception)"""
                    239:         if len(array) <= idx:
                    240:             return default
                    241:         else:
                    242:             return array[idx]
                    243:         
1.1.2.18  casties   244:     def getLang(self):
                    245:         """returns the default language"""
                    246:         return self.lang
1.1.2.1   dwinter   247: 
                    248:     def browserCheck(self):
                    249:         """check the browsers request to find out the browser type"""
                    250:         bt = {}
                    251:         ua = self.REQUEST.get_header("HTTP_USER_AGENT")
                    252:         bt['ua'] = ua
                    253:         bt['isIE'] = False
                    254:         bt['isN4'] = False
                    255:         if string.find(ua, 'MSIE') > -1:
                    256:             bt['isIE'] = True
                    257:         else:
                    258:             bt['isN4'] = (string.find(ua, 'Mozilla/4.') > -1)
                    259: 
                    260:         try:
                    261:             nav = ua[string.find(ua, '('):]
                    262:             ie = string.split(nav, "; ")[1]
                    263:             if string.find(ie, "MSIE") > -1:
                    264:                 bt['versIE'] = string.split(ie, " ")[1]
                    265:         except: pass
                    266: 
                    267:         bt['isMac'] = string.find(ua, 'Macintosh') > -1
                    268:         bt['isWin'] = string.find(ua, 'Windows') > -1
                    269:         bt['isIEWin'] = bt['isIE'] and bt['isWin']
                    270:         bt['isIEMac'] = bt['isIE'] and bt['isMac']
                    271:         bt['staticHTML'] = False
                    272: 
                    273:         return bt
                    274: 
                    275: 
                    276:     def versionHeaderEN(self):
                    277:         """version header text"""
                    278:         
                    279:         date= self.REQUEST.get('date',None)
                    280:         if date:
                    281:             txt="""<h2>This pages shows the project which existed at %s</h2>"""%str(date)
                    282:             return txt
                    283:         return ""
                    284: 
                    285:     def versionHeaderDE(self):
                    286:         """version header text"""
                    287:         date= self.REQUEST.get('date',None)
                    288:         if date:
                    289:             txt="""<h2>Auf dieser Seite finden Sie die Projekte mit Stand vom %s</h2>"""%str(date)
                    290:         return ""
                    291:     
                    292:         
                    293:     def createOrUpdateId_raw(self):
                    294:         """create sequence to create ids for bibliography"""
                    295:         debug=None
                    296:         #suche groesste existierende id
                    297:         founds=self.ZSQLQuery("select id from bibliography")
                    298:         
                    299:         if founds:
                    300:             ids=[int(x.id[1:]) for x in founds]
                    301:             maximum=max(ids)
                    302:             
                    303:             id_raw=self.ZSQLQuery("select nextval('id_raw')",debug=debug)
                    304:             
                    305:             if id_raw:
                    306:                 self.ZSQLQuery("drop sequence id_raw",debug=debug)
                    307:             
                    308:             self.ZSQLQuery("create sequence id_raw start %i"%(maximum+1),debug=debug)
                    309:         
                    310:     
                    311:     def queryLink(self,link):
                    312:         """append querystring to the link"""
                    313:         return "%s?%s"%(link,self.REQUEST.get('QUERY_STRING',''))
                    314: 
                    315:     def getKategory(self,url):
                    316:         """kategorie"""
                    317:         splitted=url.split("/")
                    318:         return splitted[4]
                    319: 
                    320:     def generateUrlProject(self,url,project=None):
                    321:         """erzeuge aus absoluter url, relative des Projektes"""
                    322:         if project:
                    323:             splitted=url.split("/")
                    324:             length=len(splitted)
                    325:             short=splitted[length-2:length]
                    326:             
                    327:             base=self.REQUEST['URL3']+"/"+"/".join(short)
                    328: 
                    329:         else:
                    330:             findPart=url.find("/projects/")
                    331:             base=self.REQUEST['URL1']+"/"+url[findPart:]
                    332: 
                    333:                 
                    334:         return base
                    335:     
                    336:     def isNewCapital(self,text=None,reset=None):
                    337:         if reset:
                    338:             self.REQUEST['capital']="A"
                    339:             return True
                    340:         else:
                    341:             if len(text)>0 and not (text[0]==self.REQUEST['capital']):
                    342:                 self.REQUEST['capital']=text[0]
                    343:                 return True
                    344:             else:
                    345:                 return False
                    346:     
                    347:     def subNavStatic(self,obj):
                    348:         """subnav" von self"""
                    349:         subs=self.ZopeFind(obj,obj_metatypes=['MPIWGTemplate','MPIWGLink'])
                    350:         subret=[]
                    351: 
                    352:         for x in subs:
                    353:             if not(x[1].title==""):
                    354:                 subret.append(x)
                    355:         subret.sort(sortWeight)
                    356:         return subret
                    357:     
                    358:     def subNav(self,obj):
1.1.2.19  casties   359:         """return sub-navigation elements i.e. below sections"""
                    360:         # get section -> parent should be MPIWGRoot
                    361:         p = obj
                    362:         sec = None
                    363:         # descend parents to the root (and remember the last id)
                    364:         while p is not None and p.meta_type != 'MPIWGRoot':
                    365:             sec = p
                    366:             p = p.aq_parent
                    367:     
                    368:         subsecs = sec.objectItems(self.nav_meta_types)
                    369:         subsecs = [s for s in subsecs if s[1].title != ""]
                    370:         subsecs.sort(sortWeight)
                    371:         return subsecs
                    372:                 
1.1.2.11  dwinter   373:     def isType(self,object,meta_type):
                    374:         """teste ob ein object vom meta_type ist."""
                    375:         return (object.meta_type==meta_type)
                    376:     
1.1.2.1   dwinter   377:     def isActive(self,name):
                    378:         """teste ob subnavigation aktiv"""
                    379:         for part in self.REQUEST['URL'].split("/"):
                    380:             if part==name:
                    381:                 return True
                    382:         return False
                    383:         
1.1.2.6   casties   384:     
                    385:     def getSections(self):
                    386:         """returns a list of all sections i.e. top-level MPIWGFolders"""
                    387:         secs = self.objectItems(['MPIWGFolder'])
                    388:         secs.sort(sortWeight)
                    389:         #logging.debug("root: %s secs: %s"%(repr(self.absolute_url()), repr(secs)))
1.1.2.13  casties   390:         # return pure list of objects
                    391:         return [s[1] for s in secs]
1.1.2.1   dwinter   392: 
                    393:     def getSectionStyle(self, name, style=""):
                    394:         """returns a string with the given style + '-sel' if the current section == name"""
                    395:         if self.getSection() == name:
                    396:             return style + '-sel'
                    397:         else:
                    398:             return style    
                    399: 
1.1.2.23  casties   400:     def getFeatures(self, num=None):
                    401:         """returns a list of the last num Features"""
1.1.2.13  casties   402:         dir = getattr(self, 'features')
                    403:         features = dir.objectItems(['MPIWGFeature'])
                    404:         features.sort(sortWeight)
1.1.2.23  casties   405:         if num is not None:
                    406:             # take only the last num elements
                    407:             features = features[-num:]
1.1.2.13  casties   408:         # return pure list of objects
                    409:         return [f[1] for f in features]
                    410: 
                    411: 
1.1.2.20  casties   412:     def getMPIWGRoot(self):
                    413:         """returns the MPIWG root"""
                    414:         return self
                    415: 
1.1.2.1   dwinter   416:     def MPIWGrootURL(self):
                    417:         """returns the URL to the root"""
                    418:         return self.absolute_url()
                    419:         
                    420:     def upDateSQL(self,fileName):
                    421:         """updates SQL databases using fm.jar"""
                    422:         fmJarPath=os.path.join(package_home(globals()), 'updateSQL/fm.jar')
                    423:         xmlPath=os.path.join(package_home(globals()), "updateSQL/%s"%fileName)
                    424:         logger("MPIWG Web",logging.INFO,"java -classpath %s -Djava.awt.headless=true Convert %s"%(fmJarPath,xmlPath))
                    425:         ret=os.popen("java -classpath %s -Djava.awt.headless=true Convert %s"%(fmJarPath,xmlPath),"r").read()
                    426:         logger("MPIWG Web",logging.INFO,"result convert: %s"%ret)
                    427:         return 1
                    428:     
                    429:     def patchProjects(self,RESPONSE):
                    430:         """patch"""
                    431:         projects=self.ZopeFind(self.projects,obj_metatypes=['MPIWGProject'])
                    432:         for project in projects:
                    433:                 tmp=project[1].WEB_project_description[0].replace("/CD/projects/","")[0:]
                    434:                 setattr(project[1],'WEB_project_description',[tmp[0:]])
                    435:                 RESPONSE.write("<p>%s</p>\n"%project[0])
                    436:             
                    437:     def replaceNotEmpty(self,format,field):
                    438:         """replace not empty"""
                    439:         if field and (not field.lstrip()==''):
1.1.2.3   dwinter   440:             return self.decode(format%field)
1.1.2.1   dwinter   441:         else:
                    442:             return ""
                    443:         
                    444: 
                    445:     def isActiveMember(self,key):
                    446:         """tested ob Mitarbeiter key ist aktiv"""
1.1.2.10  dwinter   447:         key=utf8ify(key)
1.1.2.1   dwinter   448:         ret=self.getat(self.ZSQLInlineSearch(_table='personal_www',
                    449:                                             _op_key='eq',key=key,
                    450:                                             _op_publish_the_data='eq',
                    451:                                             publish_the_data='yes'))
                    452:         
                    453:         logging.info("ACTIVE_MEMBER  %s"%ret)
                    454:         if ret:
                    455:             return True
                    456:         else:
                    457:             return False
                    458:         
                    459:     def isActual(self,project):
                    460:         """checke if project is actual"""
                    461:         actualTime=time.localtime()
                    462:         
                    463:         if hasattr(project,'getObject'): #obj ist aus einer catalogTrefferList
                    464:             obj=project.getObject()
                    465:         else:
                    466:             obj=project
                    467:             
                    468:         if getattr(obj,'archiveTime',actualTime)< actualTime:
                    469:             return False
                    470:         else:
                    471:             return True
                    472:         
                    473:     def redirectIndex_html(self,request):
                    474:         #return request['URL1']+'/index_html'
                    475:         
                    476:         return urllib.urlopen(request['URL1']+'/index_html').read()
                    477: 
                    478:     
                    479:     def formatBibliography(self,here,found):
                    480:         """format"""
                    481:         return formatBibliography(here,found)
                    482:     
                    483:     def getValue(self,fieldStr):
                    484:         """Inhalt des Feldes"""
                    485:         
                    486:         if type(fieldStr)==StringType:
                    487:             field=fieldStr
                    488:         else:
                    489:             field=fieldStr[0]
                    490:         try:
                    491:             if field[len(field)-1]==";":
                    492:                 field=field[0:len(field)-1]
                    493:         except:
                    494: 
                    495:             """nothing"""
                    496:         field=re.sub(r';([^\s])','; \g<1>',field)
                    497:         return field.encode('utf-8')
                    498: 
                    499: 
                    500:     
                    501:     def sortedNames(self,list):
                    502:         """sort names"""
                    503: 
                    504:         def sortLastName(x_c,y_c):
                    505:             try:
                    506:                 x=urllib.unquote(x_c).encode('utf-8','ignore')
                    507:             except:
                    508:                 x=urllib.unquote(x_c)
                    509: 
                    510:             try:
                    511:                 y=urllib.unquote(y_c).encode('utf-8','ignore')
                    512:             except:
                    513:                 x=urllib.unquote(y_c)
                    514:                 
                    515: 
                    516:             
                    517:             try:
                    518:                 last_x=x.split()[len(x.split())-1]
                    519:                 last_y=y.split()[len(y.split())-1]
                    520: 
                    521:             except:
                    522: 
                    523:                 last_x=""
                    524:                 last_y=""
                    525:             
                    526:             
                    527:             
                    528:             if last_x<last_y:
                    529:                 return 1
                    530:             elif last_x>last_y:
                    531:                 return -1
                    532:             else:
                    533:                 return 0
                    534:             
                    535:         list.sort(sortLastName)
                    536:         list.reverse()
                    537:         
                    538:         return list
                    539:     
                    540:     def __init__(self, id, title):
                    541:         """init"""
                    542:         self.id=id
                    543:         self.title=title
                    544: 
                    545:     def removeStopWords(self,xo):
                    546:         """remove stop words from xo"""
                    547:         if not hasattr(self,'_v_stopWords'):
                    548:             self._v_stopWords=self.stopwords_en.data.split("\n")
                    549:     
                    550:         x=str(xo)
                    551:     
                    552:         strx=x.split(" ")
                    553:   
                    554:         for tmp in strx:
                    555:      
                    556:             if tmp.lower() in self._v_stopWords:
                    557:                 del strx[strx.index(tmp)]
                    558: 
                    559:         return " ".join(strx)
                    560:     
                    561:     def urlQuote(self,str):
                    562:         """quote"""
                    563:         return urllib.quote(str)
                    564: 
                    565:     def urlUnQuote(self,str):
                    566:         """quote"""
                    567:         return urllib.unquote(str)
                    568:     
                    569:         
                    570: 
                    571:     def getProjectsByFieldContent(self,fieldName,fieldContentsEntry, date=None):
                    572:         """gib alle Projekte aus mit Value von field mit fieldName enthaelt ein Element der Liste fieldContents"""
                    573:         def sort(x,y):
                    574:                 return cmp(x.WEB_title[0],y.WEB_title[0])
                    575: 
                    576:         if type(fieldContentsEntry) is StringType:
                    577:             fieldContentsTmp=[fieldContentsEntry]
                    578:         else:
                    579:             fieldContentsTmp=fieldContentsEntry
                    580: 
                    581:         fieldContents=[]
                    582:         for x in fieldContentsTmp:
                    583:             fieldContents.append(" AND ".join(x.split()))
                    584:         projects=self.ProjectCatalog({fieldName:string.join(fieldContents,' AND')})
                    585:         #print projects
                    586:         #ret=[x for x in projects]
                    587:         ret=[]
                    588:         for x in projects:
                    589:             obj=x.getObject()
                    590:             obj=obj.getActualVersion(date)
                    591:             if obj and (not getattr(obj,'invisible',None)):
                    592:                 #if not (x in ret):
                    593:                     ret.append(x)
                    594: 
                    595:         ret.sort(sort)
                    596:         return ret
                    597: 
                    598:     def changeMPIWGRootForm(self):
                    599:         """edit"""
                    600:         pt=PageTemplateFile(os.path.join(package_home(globals()),'zpt','changeMPIWGRootForm')).__of__(self)
                    601:         return pt()
                    602: 
1.1.2.32! dwinter   603:     def changeMPIWGRoot(self,title,connection_id,coneServiceURL,lang=None,autocommit=None,RESPONSE=None):
1.1.2.1   dwinter   604:         """change"""
                    605:         self.title=title
                    606:         self.connection_id=connection_id
1.1.2.32! dwinter   607:         #self.disciplineList=disciplineList
        !           608:         #self.themesList=themesList
        !           609:         self.coneServiceURL=coneServiceURL
        !           610:         
1.1.2.18  casties   611:         if lang is not None:
                    612:             self.lang = lang
1.1.2.1   dwinter   613: 
1.1.2.30  casties   614:         self.autocommit = (autocommit == "on")
1.1.2.1   dwinter   615:         if RESPONSE is not None:
                    616:             RESPONSE.redirect('manage_main')
                    617: 
                    618: 
                    619:     def getContexts(self,childs=None,parents=None,depth=None,date=None,onlyActive=True):
                    620:         """childs alle childs, alle parents"""
                    621:         ret=[]
1.1.2.21  dwinter   622:     
1.1.2.1   dwinter   623:         if parents:
1.1.2.6   casties   624:             pnums=parents.split(".")
                    625:             while len(pnums) > 1:
                    626:                 pnums.pop()
                    627:                 parentId=string.join(pnums,".")
                    628:         
                    629:                 for project in self.getProjectFields('xdata_05',sort='int',date=date):
                    630:                     if project[1]==parentId:
                    631:                         ret.append(project)
                    632:                 
                    633:                 if (depth is not None) and (len(ret) >= depth):
                    634:                     break
1.1.2.1   dwinter   635: 
                    636:         if childs:
                    637:             for project in self.getProjectFields('xdata_05',sort='int',date=date):
                    638:                 searchStr=childs+"(\..*)"
                    639:                
                    640:                 if (onlyActive and project[0].isActiveProject()) or (not onlyActive):
                    641:                     if re.match(searchStr,project[1]):
                    642:                         
                    643:                         if depth:
                    644:     
                    645:                             if int(depth)>=len(project[1].split("."))-len(childs.split(".")):
                    646:                         
                    647:                                 ret.append(project)
                    648:                         else:
                    649:                             ret.append(project)
1.1.2.6   casties   650:         
1.1.2.10  dwinter   651:         #logging.debug("getContexts: childs=%s parents=%s depth=%s => %s"%(childs,parents,depth,repr(ret)))
1.1.2.21  dwinter   652:      
1.1.2.1   dwinter   653:         return ret
1.1.2.6   casties   654: 
1.1.2.1   dwinter   655:     
                    656:     def getProjectFields(self,fieldName,date=None,folder=None,sort=None):
                    657:         """getListofFieldNames"""
                    658:         ret=[]
                    659:     
                    660:         objects=self.ZopeFind(self.projects,obj_metatypes=['MPIWGProject'],search_sub=0)
                    661: 
                    662:                 
                    663:         for object in objects:
                    664:             obj=object[1]
                    665:             obj=obj.getActualVersion(date)
                    666:             if obj and (not getattr(obj,'invisible',None)):
                    667:                 if fieldName=="WEB_title_or_short":
                    668: 
                    669:                     if len(obj.getContent('xdata_07'))<3: # hack weil z.Z. manchmal noch ein Trennzeichen ; oder , im Feld statt leer
                    670:                         fieldNameTmp="WEB_title"
                    671:                     else:
                    672:                         fieldNameTmp="xdata_07"
                    673:                 else:
                    674:                     fieldNameTmp=fieldName
                    675: 
                    676:                 ret.append((obj,obj.getContent(fieldNameTmp)))
                    677: 
                    678:         
                    679:         if sort=="int":
                    680:             ret.sort(sortI)
                    681:         elif sort=="stopWords":
                    682:  
                    683:             ret.sort(sortStopWords(self))
                    684:             
                    685:         else:
                    686:             ret.sort(sortF)
                    687:         
                    688:         return ret
                    689: 
                    690:     def showNewProjects(self):
                    691:         projects=[]
                    692:         for objs in self.getProjectFields('WEB_title_or_short'): # Get all Projets
                    693:             if objs[0].xdata_05 and (objs[0].xdata_05[0] == ""):
                    694:                 
                    695:                 projects.append(objs)
                    696:                 
                    697:         return projects
                    698:     
                    699:         
                    700:     def updatePublicationDB(self,personId=None):
                    701:         """updates the publication db, i.e. copy year and type into the main table"""
                    702:         
                    703:         if personId:
                    704:             founds = self.ZSQLInlineSearch(_table="publications",key_main=personId)
                    705:         else:
                    706:             founds = self.ZSQLInlineSearch(_table="publications")
                    707:             
                    708:         for found in founds:
                    709:                         
                    710:             if found.id_institutsbibliographie and (not found.id_institutsbibliographie =="") and (not found.id_institutsbibliographie =="0"):
                    711:                 
                    712:                 entries = self.ZSQLInlineSearch(_table="institutsbiblio",id=found.id_institutsbibliographie)
                    713:                 for entry in entries:
                    714:                     self.ZSQLChange(_table='publications',_identify='oid=%s' % found.oid,year=entry.year,referencetype=entry.reference_type)
                    715:                     
                    716:             if found.id_gen_bib and (not found.id_gen_bib ==""):
                    717:                 entries = self.ZSQLInlineSearch(_table="bibliography",id=found.id_gen_bib)
                    718:                 for entry in entries:
                    719:                     self.ZSQLChange(_table='publications',_identify='oid=%s' % found.oid,year=entry.year,referencetype=entry.reference_type)
                    720:                     
                    721:         return True        
                    722:     
                    723:     def showNewDBEntries(self):
                    724:         """zeige neue Eintraege in der Datenbank ohne e-mail adressen bzw. fuer die noch kein Object angelegt wurde"""
                    725:         
                    726:         qstr="select * from personal_www where web_object_created='no' and not key=''"
                    727:         res=self.ZSQLQuery(qstr)
                    728:         
                    729:         pt=PageTemplateFile(os.path.join(package_home(globals()),'zpt','showNewDBEntries.zpt')).__of__(self)
                    730:         return pt(newEntries=res)
                    731:    
                    732:     def createNewStaffObjects(self,RESPONSE):
                    733:         """create new staff object"""
                    734:         
                    735:         memberFolder=getattr(self,'members')
                    736:         args=self.REQUEST.form
                    737:         arg_k=args.keys()
                    738:         arg_k.remove("submit")
                    739:         ret=""
                    740:         for key in arg_k:
                    741:             k=self.urlUnQuote(key)
                    742:           
                    743:             qstr="select * from personal_www where key=%s"%self.ZSQLQuote(k)
                    744:             res=self.ZSQLQuery(qstr)[0]
                    745:             if args[key]!="": #email-adresse wurde eingetragen
                    746:                 #create the object
                    747:                 e_mail=args[key]
                    748:                 try:
                    749:                     newObj=MPIWGStaff.MPIWGStaff(e_mail,res.last_name,res.first_name,k)
                    750:                     memberFolder._setObject(e_mail,newObj)
                    751:                     obj=getattr(memberFolder,e_mail)
                    752:                     obj.reindex_object()
                    753:                     ret+="Created %s \n"%e_mail
                    754:                     created=True
                    755:                 except:
                    756:                     msg="Cannot create new user %s (%s %s)"%(e_mail,sys.exc_info()[0],sys.exc_info()[1])
                    757:                     logging.error(msg)
                    758:                     ret+=msg+"\n"
                    759:                     created=False
                    760:                 
                    761:                 if created:
                    762:                     qstr="update personal_www set web_object_created='yes',e_mail='%s@mpiwg-berlin.mpg.de' where key=%s"%(e_mail,self.ZSQLQuote(k))
                    763:                     self.ZSQLQuery(qstr)
                    764:         
                    765:         return ret
                    766:                    
                    767:         
                    768:     def generateNewPersonEntry(self,data):
                    769:         """generate a new person entry for data, neue personen werden zunaechst nur in der datenbank angelegt """
                    770:         
                    771:         #memberFolder=getattr(self,'members')
                    772:         #create the object
                    773:         
                    774: #        try:
                    775: #            newObj=MPIWGStaff.MPIWGStaff(urllib.quote(data['key']),data['last_name'].encode('utf-8'),data['first_name'].encode('utf-8')) 
                    776: #            memberFolder._setObject(urllib.quote(data['key']),newObj)
                    777: #        except:
                    778: #            return False, "Cannot create new user %s (%s %s)"%(data['key'],sys.exc_info()[0],sys.exc_info()[1])
                    779: #        
                    780:         
                    781:         #create the new entry in the database
                    782:         
                    783:         
                    784:         result,msg=MPIWGStaff.createNewDBEntry(self,data['publish_the_data'],data['key'],data['last_name'],
1.1.2.24  dwinter   785:                                   data['first_name'],data['titles_new'],data['status'],"",
1.1.2.1   dwinter   786:                                   "",data['date_from'],data['date_to'],
1.1.2.24  dwinter   787:                                   data['department'],'',data['funded_by'],
1.1.2.1   dwinter   788:                                   data['e_mail2'],data['current_work'],"yes",data['date_stay_at_mpiwg'],data['group'],"no",data['current_work'])
                    789:         
                    790:         return result,msg
                    791:  
1.1.2.28  casties   792:     def updatePersonEntry(self,data,ignoreEntries=None):
1.1.2.1   dwinter   793:         """update an person entry from data. but ignore all fields in ignore Entries"""
1.1.2.28  casties   794:         if ignoreEntries is None:
                    795:             ignoreEntries = []
                    796:             
1.1.2.31  dwinter   797:         #ignoreEntries.append('current_work') # TODO:updatecurrent work
1.1.2.28  casties   798:         logging.debug("updatePersonEntry: data=%s ignoreEntries=%s"%(repr(data),repr(ignoreEntries)))
1.1.2.1   dwinter   799:         
                    800:         if data['date_to']=="": # wenn date_to leer
                    801:              data['date_to']="date_none"
                    802:         
                    803:         if data['date_from']=="": # wenn date_fromleer
                    804:              data['date_from']="date_none"
                    805:         msg=""
                    806:    
                    807:         
                    808:         #eintragen
                    809:          
                    810:         columns=data.keys()
                    811:         for x in ignoreEntries:
1.1.2.28  casties   812:             logging.debug("updatePersonEntry: ignoring %s"%x)
1.1.2.1   dwinter   813:             try: #falls in ignore entries felder sind, die nicht in columns sind, fange den fehler ab
1.1.2.28  casties   814:                 columns.remove(x)
1.1.2.1   dwinter   815:             except:
                    816:                 pass
                    817: 
                    818:         
                    819:         insert=[]
                    820:         for key in columns:
                    821:             if data[key]=="date_none": # date_none eintrag wird zu null uebersetzt
                    822:                 insert.append('%s=null'%key)
                    823:             else:
                    824:                 insert.append(""" "%s"=%s"""%(key,self.ZSQLQuote(data[key])))
                    825:             
                    826:         insertStr=",".join(insert)
                    827:         queryStr="update personal_www SET %s where key='%s'"%(insertStr,data['key'])
                    828:         self.ZSQLQuery("SET DATESTYLE TO 'German'")
                    829:         self.ZSQLQuery(queryStr)
                    830:        
                    831:         #currentwork
                    832:         #if not (txt==""):
                    833:         #    queryStr="INSERT INTO current_work (id_main,current,publish) VALUES ('%s','%s','%s')"%(id,txt,txt_p)
                    834:         #
                    835:         #    self.ZSQLQuery(queryStr)
                    836:         
                    837:         return True,msg
                    838: 
                    839: 
                    840:     def updatePersonalwww_doIt(self):
                    841:         """do the update"""
                    842:         args=self.REQUEST.form
                    843:         resultSet=self.REQUEST.SESSION['personal_www']['resultSet']
                    844:         news=self.REQUEST.SESSION['personal_www']['news']
                    845:         conflicts=self.REQUEST.SESSION['personal_www']['conflicts']
1.1.2.28  casties   846:         logging.debug("updatePersonalwww_doIt: args=%s\n  resultSet=%s\n  news=%s\n  conflicts=%s"%(args,resultSet,news,conflicts))
                    847:         
1.1.2.1   dwinter   848:         ret="<html><body>"
                    849:         # generate the new entry
                    850:       
                    851:         if news and (len(news)>0):
                    852:             ret+="<h2>Hinzugef&uuml;gt</h2>"
                    853:             ret+="<p>Neueintr&auml;ge erscheinen erst auf der Homepage, wenn ihnen eine e-mail Adresse zugeordnet wurde.</p>"
                    854:             ret+="<ul>"
1.1.2.28  casties   855:             
1.1.2.1   dwinter   856:         for new in news:
                    857:             if args.has_key(self.urlQuote(new.encode('utf-8'))): # entry was selected
                    858:                 result,msg=self.generateNewPersonEntry(resultSet[new])
                    859:                 if not result:
                    860:                     logging.error("Error (generateNewPersonEntry) %s"%msg)
                    861:                     ret+="<li>ERROR: %s %s"%(new.encode('utf-8'),msg)
                    862:                 else:
                    863:                     ret+="<li>OK: %s"%(new.encode('utf-8'))
1.1.2.28  casties   864:                     
1.1.2.1   dwinter   865:         if news and (len(news)>0):
                    866:             ret+="<p>Neueintr&auml;ge erscheinen erst auf der Homepage, wenn ihnen eine e-mail Adresse zugeordnet wurde.</p>"
                    867:             ret+="</ul>"     
                    868:         
                    869:         # update
                    870: 
                    871:         if len(conflicts.keys())>0:
                    872:             ret+="<h2>&Auml;nderung des Benutzers &uuml;bernehmen</h2>"
                    873:             ret+="<p>Wenn n&ouml;tig in Filemaker-db &auml;ndern:</p>"
                    874:             
                    875:         # konflicte   
                    876:         for conflict in conflicts.keys():
                    877:             ignoreEntries=[]
                    878:             displayIgnored=[]
                    879:             for cf in conflicts[conflict]:
                    880:                 if args[conflict.encode('utf-8')+'_'+cf[0]]=="stored": #use the stored one
                    881:                     ignoreEntries.append(cf[0])  #so ignore field cf[0]       
                    882:                     displayIgnored.append(cf)
1.1.2.28  casties   883:                     
1.1.2.1   dwinter   884:             if len(displayIgnored)>0:
                    885:                 ret+="<h3>%s</h3>"%conflict.encode('utf-8')
                    886:                 ret+="<table border='1'>"
                    887:                 for iE in displayIgnored:
                    888:                     ret+="<tr><td>%s</td><td>%s</td><td>%s</td>"%(iE[0].encode('utf-8'),iE[1].encode('utf-8'),iE[2].encode('utf-8'))
1.1.2.31  dwinter   889:                 ret+="</table>"
1.1.2.1   dwinter   890:                 
                    891:             self.updatePersonEntry(resultSet[conflict],ignoreEntries=ignoreEntries)
                    892:          
                    893:          # rest
                    894:         cl=list(conflicts.keys())
                    895:         
                    896:         for key in resultSet.keys():
                    897:              if key not in cl:
                    898:                  self.updatePersonEntry(resultSet[key])
                    899:         return ret+"</body></html>"
                    900:                      
                    901: 
                    902:     def updateInstitutsbiliography(self):
                    903:         """update the Institutsbibliogrpahy"""
                    904:         self.upDateSQL('personalwww.xml')
                    905:         return "<html><body>DONE</body></html>"
                    906: 
                    907: 
1.1.2.11  dwinter   908:     
                    909: 
1.1.2.1   dwinter   910:     def updatePersonalwww_html(self):
                    911:         """update form for the homepages web form"""
                    912:         pt=PageTemplateFile(os.path.join(package_home(globals()),'zpt','updatePersonalwww.zpt')).__of__(self)
                    913:         return pt()
                    914: 
                    915:     
                    916:     def updatePersonalwww(self,uploadfile):
                    917:         """update personalwww
                    918:         @param uploadfile: file handle auf das file
                    919:         """
                    920:         dsn=self.getConnectionObj().connection_string
                    921:         #dsn="dbname=personalwww"
                    922:         resultSet=updatePersonalWWW.importFMPXML(uploadfile)
                    923:         news,conflicts=updatePersonalWWW.checkImport(dsn, resultSet)
                    924: 
                    925:         self.REQUEST.SESSION['personal_www']={}
                    926:         self.REQUEST.SESSION['personal_www']['resultSet']=resultSet
                    927:         self.REQUEST.SESSION['personal_www']['news']=news
                    928:         self.REQUEST.SESSION['personal_www']['conflicts']=conflicts
                    929:         
                    930:         pt=PageTemplateFile(os.path.join(package_home(globals()),'zpt','updatePersonalwww_check.zpt')).__of__(self)
                    931:         return pt()
                    932:     
                    933: 
                    934:      
                    935:     def reindexCatalogs(self,RESPONSE=None):
                    936:         """reindex members and project catalog"""
                    937:         
                    938:         
                    939:         try:
                    940:             
                    941:             self.ProjectCatalog.manage_catalogReindex(self.REQUEST,RESPONSE,self.REQUEST['URL1'])
1.1.2.22  dwinter   942:             logger("MPIWG Root (reindexCatalog: projects)",logging.INFO,"DONE")
                    943:         except:
                    944:             logger("MPIWG Root (reindexCatalog: projects)",logging.WARNING," %s %s"%sys.exc_info()[:2])
                    945:         
                    946:         try:
                    947:             
                    948:             self.MembersCatalog.manage_catalogReindex(self.REQUEST,RESPONSE,self.REQUEST['URL1'])
                    949:             logger("MPIWG Root (reindexCatalog: members)",logging.INFO,"DONE")
                    950:         except:
                    951:             logger("MPIWG Root (reindexCatalog: members)",logging.WARNING," %s %s"%sys.exc_info()[:2])
                    952:         
                    953:         try:
                    954:             
                    955:             self.fulltextProjectsMembers.manage_catalogReindex(self.REQUEST,RESPONSE,self.REQUEST['URL1'])
                    956:             logger("MPIWG Root (reindexCatalog: fulltextProjectsMembers)",logging.INFO,"DONE")
1.1.2.1   dwinter   957:         except:
1.1.2.22  dwinter   958:             logger("MPIWG Root (reindexCatalog: fulltextProjectsMembers)",logging.WARNING," %s %s"%sys.exc_info()[:2])
1.1.2.1   dwinter   959:             
                    960:         
                    961:     
                    962:         
                    963:            
                    964:         if RESPONSE:
                    965:             RESPONSE.redirect('manage_main')
                    966: 
                    967:         
                    968:         
                    969: 
                    970:     def getAllMembers(self):
                    971:         #ret=[]
                    972:         
                    973:         def sorter(x,y):
                    974:             return cmp(x[0],y[0])
                    975:                     
                    976:         results=self.MembersCatalog({'isPublished':True})
1.1.2.12  dwinter   977:        
1.1.2.25  casties   978:         ret=[(unicodify(", ".join([proj.lastName, proj.firstName])), proj.getKey) for proj in results]
1.1.2.1   dwinter   979:         
                    980:         ret.sort(sorter)
                    981:         return ret
                    982:     
                    983:     
                    984:     def printAllMembers(self):
                    985:         """print"""
                    986:         members=self.getAllMembers()
                    987:         ret=""
                    988:         for x in members:
                    989:             ret+="<p>%s</p>"%x
                    990:         return ret
                    991:     
                    992:         
                    993:     def makeList(self,entry):
                    994:         """makes a list out of one entry or repeat a list"""
                    995:         if type(entry) is StringType:
                    996:             return [entry]
                    997:         else:
                    998:             return entry
                    999: 
1.1.2.7   dwinter  1000:     def getTreeRSS(self,dep=None,date=None,onlyActive=1,onlyArchived=0):
1.1.2.5   dwinter  1001:         """generateTree"""
                   1002:         rss="""<?xml version="1.0" encoding="utf-8"?>
                   1003:                  <rss version="2.0">
                   1004:                    <channel>"""
                   1005:         
                   1006:         for obj in self.getTree(dep, date, onlyActive, onlyArchived):
1.1.2.17  casties  1007:             linkStr="""<link>http://www.mpiwg-berlin.mpg.de/en/research/projects/%s</link>"""
1.1.2.5   dwinter  1008:             rss+="""<item>"""
1.1.2.7   dwinter  1009:             rss+=linkStr%obj[3].getId()
1.1.2.5   dwinter  1010:             rss+="""</item>"""
1.1.2.8   dwinter  1011:             if hasattr(obj[3],'publicationList'):
                   1012:            rss+="""<item>"""
                   1013:                 rss+=linkStr%(obj[3].getId()+"/publicationList");
                   1014:                 rss+="""</item>"""
1.1.2.5   dwinter  1015:         rss+="""</channel>
                   1016:         </rss>"""
                   1017: 
                   1018:         
                   1019:         return rss
1.1.2.1   dwinter  1020: 
                   1021:     def getTree(self,dep=None,date=None,onlyActive=0,onlyArchived=0):
                   1022:         """generate Tree from project list
                   1023:         als Liste, jeder Eintrag ist ein Tupel ,(Tiefe, ProjektNummer,ProjektObject
                   1024:         onlyActive = 0  : alle Projekte
                   1025:         onlyActive = 1 : nur active Projekte
                   1026:         onlyActive = 2: nur inactive Projekte
                   1027:         
                   1028:         onlyArchived=0: alle Projekte
                   1029:         onlyArchived= 1 : nur aktuelle Projekte
                   1030:         onlyArchived = 2: nur archivierte Projekte
1.1.2.27  dwinter  1031:         
                   1032:         department fuer das Tree geholt werden soll
1.1.2.1   dwinter  1033:         """
                   1034: 
                   1035:         returnListTmp=[]
                   1036:         returnList=[]
                   1037:         
                   1038:         for project in self.getProjectFields('xdata_05',sort="int",date=date): # get Projects sorted by xdata_05
                   1039: 
                   1040:             for idNr in project[1].split(";"): # more than one number
                   1041:                 if not idNr=="":
                   1042:                     splittedId=idNr.split(".")
                   1043:                     depth=len(splittedId)
                   1044:                     nr=idNr
                   1045:                     #title=project[0].WEB_title
                   1046:                     title=[project[0].getContent('WEB_title')]
                   1047:                     #print title
                   1048:                     
                   1049:                     if idNr[0]=="x": # kompatibilitaet mit alter Konvention, x vor der Nummer macht project inactive
                   1050:                         project[0].setActiveFlag(False)
                   1051:                    
1.1.2.27  dwinter  1052:                     if (not dep) or (splittedId[0]==dep): #falls dep gesetzt ist nur dieses hinzufuegen.
1.1.2.1   dwinter  1053:                         
                   1054:                         if (onlyActive==0):
                   1055:                             returnListTmp.append((depth,nr,title,project[0]))
                   1056:                         elif (onlyActive==1) and project[0].isActiveProject(): #nur active projekte
                   1057:                             returnListTmp.append((depth,nr,title,project[0]))
                   1058:                         elif (onlyActive==2) and (not project[0].isActiveProject()): #nur active projekte
                   1059:                             returnListTmp.append((depth,nr,title,project[0]))
                   1060:                    
                   1061:                    
                   1062:         #filter jetzt die Liste nach Archived oder nicht
                   1063:         for entry in returnListTmp:
                   1064:                     if (onlyArchived==0):
                   1065:                             returnList.append(entry)
                   1066:                     elif (onlyArchived==1) and (not entry[3].isArchivedProject()): #nur active projekte
                   1067:                             returnList.append(entry)
                   1068:                     elif (onlyArchived==2) and (entry[3].isArchivedProject()): #nur active projekte
                   1069:                             returnList.append(entry)
                   1070:                    
                   1071:         
                   1072:         return returnList
                   1073: 
                   1074: 
                   1075:         
                   1076:     def changePosition(self,treeId,select,RESPONSE=None):
                   1077:         """Change Postion Entry"""
                   1078:         numbers=[]
                   1079: 
                   1080:         # Suche hoechste bisherige nummer
                   1081:         projects=self.getProjectFields('xdata_05') # get Projects sorted by xdata_05
                   1082:         #print "pj",projects
                   1083:         for project in projects: #suche alle subtrees der treeId
                   1084:             #print treeId
                   1085:             
                   1086:             founds=re.match(treeId+"\.(.*)",project[1].split(";")[0])
                   1087:             if founds:
                   1088:                 #print "x",founds.group(0),len(founds.group(0).split("."))
                   1089:                 if len(founds.group(0).split("."))==len(treeId.split("."))+1: # nur ein punkt mehr, d.h. untere ebene
                   1090:                     try:
                   1091:                         numbers.append(int(founds.group(0).split(".")[len(founds.group(0).split("."))-1]))
                   1092:                     except:
                   1093:                         numbers.append(int(0))
                   1094: 
                   1095:         try:
                   1096:             highest=max(numbers)
                   1097:         except:
                   1098:             highest=0
                   1099:         projects=self.showNewProjects()
                   1100:         for i in self.makeList(select):
                   1101:             highest+=10
                   1102:             projects[int(i)][0].xdata_05=treeId+"."+str(highest)
                   1103: 
                   1104: 
                   1105:         if RESPONSE is not None:
                   1106:             RESPONSE.redirect('showTree')
                   1107:         
                   1108:     def changeTree(self,RESPONSE=None):
                   1109:         """change the complete tree"""
                   1110:         form=self.REQUEST.form
                   1111:         hashList={}
                   1112:         onlyArchived=int(form.get("onlyArchived",0))
                   1113:         onlyActive=int(form.get("onlyActive",0))
1.1.2.27  dwinter  1114:         dep=form.get("dep",None)
1.1.2.1   dwinter  1115:         
1.1.2.27  dwinter  1116:         fields=self.getTree(dep=dep,onlyArchived=onlyArchived,onlyActive=onlyActive)
1.1.2.1   dwinter  1117:         
                   1118:         logging.info("GOT TREE!----------------------------------------------------")
                   1119:         for field in form.keys():
                   1120:             
                   1121:             splitted=field.split('_')
                   1122:             if (len(splitted)>1) and (splitted[1]=="runningNumber"): #feld hat die Form Nummer_name und runnignNumber
                   1123:             
                   1124:                 
                   1125:                 nr=int(splitted[0]) # nummer des Datensatzes
                   1126:                 currentEntry = fields[nr]
                   1127:             
                   1128:                 if form.has_key(str(nr)+'_active'): # active flag is set
                   1129:                     fields[nr][3].setActiveFlag(True)
                   1130:                 else:
                   1131:                     fields[nr][3].setActiveFlag(False)
                   1132:                     
1.1.2.26  casties  1133:                 #nummer hat sich geaendert
1.1.2.1   dwinter  1134:                 
                   1135:                 entryChanged = False;
                   1136:                 
1.1.2.27  dwinter  1137:                 if isinstance(fields[nr][3].xdata_05,list): #for some reasons somtimes the content of the field is a list with one entry.
                   1138:                     fields[nr][3].xdata_05=fields[nr][3].xdata_05[0]
                   1139:                     
1.1.2.1   dwinter  1140:                 if not (fields[nr][3].xdata_05==form[str(nr)+'_number']):
                   1141:                     logging.info("Changed!Number+++++++++++++++++++++++++++++++++")
1.1.2.27  dwinter  1142:                     logging.info(repr(fields[nr][3].xdata_05)+" ---> "+ repr(form[str(nr)+'_number']))
1.1.2.1   dwinter  1143:                     fields[nr][3].xdata_05=form[str(nr)+'_number']
                   1144:                     entryChanged = True
                   1145:                     
                   1146:                 #completed har sich geaendert
1.1.2.27  dwinter  1147:                           
                   1148:                 td = fields[nr][3].transformDate # hole die funktion zum transformieren des datums
                   1149:                   
                   1150:                 if not (td(fields[nr][3].getCompletedAt())==td(form[str(nr)+'_completed'])):
1.1.2.1   dwinter  1151:                     fields[nr][3].setCompletedAt(form[str(nr)+'_completed'])
1.1.2.27  dwinter  1152:                     logging.info(repr(td(fields[nr][3].getCompletedAt()))+" ---> "+ repr(td(form[str(nr)+'_completed'])))
1.1.2.1   dwinter  1153:                     logging.info("Changed!Completed+++++++++++++++++++++++++++++++++")
                   1154:                     entryChanged = True
                   1155:                 
1.1.2.27  dwinter  1156:                 if not (td(fields[nr][3].getStartedAt())==td(form[str(nr)+'_started'])):
1.1.2.4   dwinter  1157:                     fields[nr][3].setStartedAt(form[str(nr)+'_started'])
1.1.2.27  dwinter  1158:             
                   1159:                     logging.info(repr(td(fields[nr][3].getStartedAt()))+" ---> "+ repr(td(form[str(nr)+'_started'])))
1.1.2.4   dwinter  1160:                     logging.info("Changed!Started+++++++++++++++++++++++++++++++++")
                   1161:                     entryChanged = True
                   1162:                 
1.1.2.1   dwinter  1163:                 
                   1164:                 if entryChanged:
                   1165:                     logging.info("Changed!+++++++++++++++++++++++++++++++++")
                   1166:                     fields[nr][3].copyObjectToArchive()
                   1167:                 
                   1168:                     
                   1169:         if RESPONSE is not None:
                   1170:             RESPONSE.redirect('showTree')
                   1171: 
                   1172:     def getProjectWithId(self,id):
                   1173:         fields=self.getProjectFields('xdata_05')
                   1174:         for field in fields:
                   1175:             if field[1]==id:
                   1176:                 return field[0]
                   1177: 
                   1178:         return None
                   1179:             
                   1180:         
                   1181:             
                   1182:         
                   1183:     def getRelativeUrlFromPerson(self,list):
                   1184:         """get urls to person list"""
                   1185:         ret=[]
                   1186:         persons=list.split(";")
                   1187:         for person in persons:
                   1188:             
                   1189:             if len(person)>1: #nicht nur Trennzeichen
                   1190:                 splitted=person.split(",")
                   1191:                 if len(splitted)==1:
                   1192:                     splitted=person.split(" ")
                   1193:                 splittedNew=[re.sub(r'\s(.*)','$1',split) for split in splitted]
                   1194:                 if splittedNew[0]=='':
                   1195:                     del splittedNew[0]
                   1196:                 search=string.join(splittedNew,' AND ')
                   1197:                 
                   1198:                 if not search=='':
                   1199: 
                   1200:                     try:
                   1201:                         proj=self.MembersCatalog({'title':search})
                   1202:                     except:
                   1203:                         proj=None
                   1204: 
                   1205:                 if proj:
                   1206:                     #ret.append("<a href=%s >%s</a>"%(proj[0].absolute_url,person.encode('utf-8')))
                   1207:                     ret.append("<a href=%s >%s</a>"%('members/'+proj[0].id+'/index.html',person))
                   1208:                 else:
                   1209:                     #ret.append("%s"%person.encode('utf-8'))
                   1210:                     ret.append("%s"%person)
                   1211:         return string.join(ret,";")
                   1212:         
                   1213:     def getMemberIdFromKey(self,key):
                   1214:         """gibt die ensprechende id  im members Ordner zum key"""
                   1215:         
                   1216:         if key=="":
                   1217:             return ""
1.1.2.14  dwinter  1218:         try:
                   1219:             key=utf8ify(key)
                   1220:             catalogged=self.MembersCatalog({'getKey':key})
                   1221:             if len(catalogged)==0:
                   1222:                 return ""
                   1223:             else:
                   1224:                 return catalogged[0].getObject().getId()
1.1.2.1   dwinter  1225:         
1.1.2.14  dwinter  1226:         except:
                   1227:             return ""
1.1.2.1   dwinter  1228: 
                   1229:             
1.1.2.2   dwinter  1230: 
1.1.2.1   dwinter  1231:     def getProjectsOfMembers(self,date=None):
                   1232:         """give tuple member /projects"""
                   1233:         ret=[]
                   1234:         members=self.getAllMembers()
1.1.2.12  dwinter  1235:         logging.error("X %s"%repr(members))
1.1.2.1   dwinter  1236:         #return str(members)
                   1237:         for x in members:
1.1.2.12  dwinter  1238:             logging.error("X %s"%repr(x))
1.1.2.1   dwinter  1239:             projects=self.getProjectsOfMember(key=x[1],date=date)
                   1240:             if len(projects)>0:
                   1241:                 ret.append((x[0],projects))
                   1242:             
                   1243:         return ret
                   1244: 
                   1245:     def getProjectsOfMember(self,key=None,date=None,onlyArchived=1,onlyActive=1):
                   1246:         """get projects of a member
                   1247:     
                   1248:         @param key: (optional) Key zur Idenfikation des Benutzer
                   1249:         @param date: (optional) Version die zum Zeitpunkt date gueltig war
                   1250:         @param onlyArchived: 
                   1251:         onlyArchived=0: alle Projekte
                   1252:         onlyArchived= 1 : nur aktuelle Projekte
                   1253:         onlyArchived = 2: nur archivierte Projekte
                   1254:         """
                   1255:         # TODO: Die ganze Loesung
                   1256:         def sortP(x,y):
                   1257:             """sort by sorting number"""
                   1258:             return cmp(x.WEB_title,y.WEB_title)
                   1259:         
                   1260:         ret=[]  
                   1261:         if key:     
1.1.2.12  dwinter  1262:             proj=self.ProjectCatalog({'getPersonKeyList':utf8ify(key)})
1.1.2.1   dwinter  1263:         else:
                   1264:             return ret # key muss definiert sein
                   1265:         
                   1266:      
                   1267:         if proj:
                   1268:             proj2=[]
                   1269:             for x in proj:
1.1.2.10  dwinter  1270:                 #logging.error("proj:%s"%repr(x.getPath()))
1.1.2.1   dwinter  1271:                 if (not getattr(x.getObject(),'invisible',None)) and (getattr(x.getObject(),'archiveTime','')==''):   
                   1272:                       proj2.append(x)
                   1273: 
                   1274:         else:
                   1275:             proj2=[]
                   1276:             
                   1277:        
                   1278:        
                   1279:         proj2.sort(sortP)
                   1280: 
                   1281:         projectListe=[]
1.1.2.10  dwinter  1282:         #logging.error("getprojectsofmember proj2: %s"%repr(proj2))
1.1.2.1   dwinter  1283:         for proj in proj2:   
                   1284:             obj=proj.getObject()
                   1285:             add=False
                   1286:             if onlyArchived==1: #nur aktuell projecte
                   1287:                 if not obj.isArchivedProject():
                   1288:                     add=True
                   1289:             elif onlyArchived==2: #nur archivierte
                   1290:                 if obj.isArchivedProject():
                   1291:                     add=True
                   1292:             else: #alle
1.1.2.10  dwinter  1293:                add=True 
1.1.2.1   dwinter  1294:                
                   1295:             if onlyActive==1: #nur active projecte
                   1296:                 if obj.isActiveProject():
                   1297:                     add=add & True
                   1298:                 else:
                   1299:                     add=add & False
                   1300:                 
                   1301:             elif onlyArchived==2: #nur nicht aktvive
                   1302:                 if not obj.isActiveProject():
                   1303:                     add=add & True
                   1304:             else: #alle
                   1305:                add=add & True
                   1306:                     
                   1307:             if add:
                   1308:                 projectListe.append(obj)
                   1309:                 
1.1.2.10  dwinter  1310:         #logging.error("getprojectsofmember projectliste: %s"%repr(projectListe))
1.1.2.1   dwinter  1311:         return projectListe
                   1312:      
                   1313:     def givePersonList(self,name):
                   1314:         """check if person is in personfolder and return list of person objects"""
                   1315:         
                   1316:         splitted=name.split(",")
                   1317:         if len(splitted)==1:
                   1318:             splitted=name.lstrip().rstrip().split(" ")
                   1319:         splittedNew=[split.lstrip() for split in splitted]
                   1320:         
                   1321:         if splittedNew[0]=='':
                   1322:             del splittedNew[0]
                   1323:         search=string.join(splittedNew,' AND ')
                   1324:         
                   1325:         if not search=='':
                   1326:             proj=self.MembersCatalog({'title':search})
                   1327: 
                   1328:         if proj:
                   1329:             return [[x.lastName,x.firstName] for x in proj]
                   1330:         else:
                   1331:             return []
                   1332:             
                   1333: ##         splitted=name.split(",") # version nachname, vorname...
                   1334: ##         if len(splitted)>1:
                   1335: ##             lastName=splitted[0] 
                   1336: ##             firstName=splitted[1]
                   1337: ##         else: 
                   1338: ##             splitted=name.split(" ") #version vorname irgenwas nachnamae
                   1339:         
                   1340: ##             lastName=splitted[len(splitted)-1]
                   1341: ##             firstName=string.join(splitted[0:len(splitted)-1])
                   1342: 
                   1343: ##         objs=[]
                   1344: 
                   1345:         #print  self.members 
                   1346:       ##   for x in self.members.__dict__:
                   1347: ##             obj=getattr(self.members,x)
                   1348: ##             if hasattr(obj,'lastName') and hasattr(obj,'firstName'):
                   1349:                 
                   1350: ##                 if (re.match(".*"+obj.lastName+".*",lastName) or re.match(".*"+lastName+".*",obj.lastName)) and (re.match(".*"+obj.firstName+".*",firstName) or re.match(".*"+firstName+".*",obj.firstName)):
                   1351:                     
                   1352: ##                     objs.append((obj,lastName+", "+firstName))
                   1353: 
                   1354:         
                   1355: ##        return objs
                   1356: 
                   1357: 
                   1358:     def personCheck(self,names):
                   1359:         """all persons for list"""
                   1360:         #print "names",names
                   1361:         splitted=names.split(";")
                   1362:         ret={}
                   1363:         for name in splitted:
                   1364: 
                   1365:             if not (name==""):
                   1366:                 try:
                   1367:                     ret[name]=self.givePersonList(name)
                   1368:                 except:
                   1369:                     """NOTHIHN"""
                   1370:         #print "RET",ret
                   1371:         return ret
                   1372: 
                   1373:     def giveCheckList(self,person,fieldname):
                   1374:         """return checklist"""
                   1375:         #print "GCL",fieldname
                   1376:         if fieldname=='xdata_01':
                   1377:             x=self.personCheck(person.getContent(fieldname))
                   1378:             #print "GCLBACKX",x
                   1379:             return x
                   1380:         
                   1381: 
                   1382:     def isCheckField(self,fieldname):
                   1383:         """return chechfield"""
                   1384:         
                   1385:         return (fieldname in checkFields)
                   1386: 
                   1387:     
                   1388:     def generateNameIndex(self):
                   1389:         """erzeuge einen index verwendeter personen"""
                   1390:         import psycopg
                   1391:         o = psycopg.connect('dbname=authorities user=dwinter password=3333',serialize=0) 
                   1392:         results={}
                   1393:         print self.fulltext.historicalNames.items()
                   1394:         for nameItem in self.fulltext.historicalNames.items(): #gehe durch alle namen des lexikons
                   1395:             
                   1396:             c = o.cursor() 
                   1397:             name=nameItem[0]
                   1398:             print "check",name
                   1399:             c.execute("select lastname,firstname from persons where lower(lastname) = '%s'"%quote(name))
                   1400:             tmpres=c.fetchall()
                   1401:             firstnames=[result[1] for result in tmpres] # find all firstnames
                   1402:             if tmpres:
                   1403:                 lastname=tmpres[0][0]
                   1404:                 
                   1405:             for found in self.fulltext({'names':name}):
                   1406:                 if found.getObject().isActual():
                   1407:                     for nh in found.getObject().getGetNeighbourhood(name, length=50,tagging=False): #hole umgebung
                   1408:                         #schaue nun ob der vorname hinter oder vor dem name ist
                   1409:                         position=nh.find(lastname)
                   1410:                         # vorher
                   1411:                         #print "NH",nh
                   1412:                         bevorS=nh[0:position].split()
                   1413:                         #print "BV",bevorS
                   1414:                         if len(bevorS)>1:
                   1415:                             try:
                   1416:                                 bevor=[bevorS[-1],bevorS[-2]]
                   1417:                             except:
                   1418:                                 bevor=[bevorS[0]]
                   1419:                         else:
                   1420:                             bevor=[]
                   1421:                         #nachher
                   1422:                         behindS= re.split("[,|;| ]",nh[position:]) 
                   1423:                         #print "BH",behindS
                   1424:                         if len(behindS)>2:
                   1425:                             try:
                   1426:                                 behind=behindS[1:3]
                   1427:                             except:
                   1428:                                 behind=[bevorS[1]]
                   1429:                         else:
                   1430:                             behind=[]
                   1431:                         for firstname in firstnames:
                   1432:                             if firstname in bevor+behind: #Namen wie mit Adelspraedikaten werden so erstmal nich gefunden
                   1433:                                 id="%s,%s"%(lastname,firstname)
                   1434:                                 if not results.has_key(id):
                   1435:                                     results[id]=[]
                   1436:                                 objId=found.getObject().getId()
                   1437:                                 if not (objId in results[id]):
                   1438:                                     print "d %s for %s"%(id,objId)    
                   1439:                                     results[id].append(objId)    
                   1440:             self.nameIndex=results
                   1441:         return results
                   1442:                     
                   1443:     def editNameIndexHTML(self):
                   1444:         """edit the name index"""
                   1445:         if not hasattr(self,'nameIndexEdited'): # falls editierter index noch nicht existiert, kopiere automatisch erstellten
                   1446:             self.nameIndexEdited=copy.copy(self.nameIndex)
                   1447:             print "huh"
                   1448:         #self.nameIndexEdited=copy.copy(self.nameIndex)
                   1449:         #print self.nameIndexEdited
                   1450:         pt=PageTemplateFile(os.path.join(package_home(globals()),'zpt','editHistoricalNames.zpt')).__of__(self)
                   1451:         return pt()
                   1452:     
                   1453:     def getNamesInProject(self,projectId):
                   1454:         """get all names ofnameIndexEdited which are references in projec with projectId"""
                   1455:         
                   1456:         ret=[]
                   1457:         for name in self.nameIndexEdited.keys():
                   1458:             if projectId in self.nameIndexEdited[name]:
                   1459:                 ret.append(name)
                   1460:         
                   1461:         return ret
                   1462:     
                   1463:     def editNameIndex(self,RESPONSE=None,name=None,occurrances=None,submit=None):
                   1464:         """edit the index"""
                   1465:         nI=self.nameIndexEdited # mI introduced to make sure that changes to nameIndexEdited are know to ZODB
                   1466:         if submit=="delete":
                   1467:            
                   1468: 
                   1469:             dh=getattr(self,'deletedHistoricalNames',{})
                   1470:             
                   1471:             if type(dh) is ListType:
                   1472:                 dh={}
                   1473:             if not dh.has_key(name):
                   1474:                 dh[name]=occurrances.split("\n")
                   1475:             else:
                   1476:                 dh[name]+=occurrances.split("\n")
                   1477:             
                   1478:             self.deletedHistoricalNames=dh
                   1479:             
                   1480:             del self.nameIndexEdited[name]
                   1481:             
                   1482:         
                   1483:         elif (submit=="change"):
                   1484:             
                   1485:             nI[name]=occurrances.split("\n")[0:]
                   1486:             
                   1487:         elif (submit=="add"):
                   1488:             if not nI.has_key(name):
                   1489:                 nI[name]=occurrances.split("\n")
                   1490:             else:
                   1491:                 nI[name]+=occurrances.split("\n")
                   1492:     
                   1493:         self.nameIndexEdited=nI
                   1494:    
                   1495:       
                   1496:         if RESPONSE is not None:
                   1497:             RESPONSE.redirect('editNameIndexHTML')
                   1498:         
                   1499:     
                   1500:     
                   1501:     def restoreIndex(self):
                   1502:         """restore"""
                   1503:         self.nameIndexEdited=self.nameIndex
                   1504:         return "done"
                   1505:     
                   1506: 
                   1507:             
                   1508: def manage_addMPIWGRootForm(self):
                   1509:     """form for adding the root"""
                   1510:     pt=PageTemplateFile(os.path.join(package_home(globals()),'zpt','addMPIWGRootForm.zpt')).__of__(self)
                   1511:     return pt()
                   1512: 
                   1513: def manage_addMPIWGRoot(self,id,title,connection_id="",RESPONSE=None):
                   1514:     """add a root folder"""
                   1515:     newObj=MPIWGRoot(id,title)
                   1516:     self._setObject(id,newObj)
                   1517:     ob=getattr(self,id)
                   1518:     setattr(ob,'connection_id',connection_id)
                   1519:     if RESPONSE is not None:
                   1520:         RESPONSE.redirect('manage_main')
1.1.2.25  casties  1521:         

FreeBSD-CVSweb <freebsd-cvsweb@FreeBSD.org>