1: from Products.PageTemplates.PageTemplateFile import PageTemplateFile
2: from Products.PageTemplates.PageTemplate import PageTemplate
3: from Products.PageTemplates.ZopePageTemplate import ZopePageTemplate
4: from Products.ZSQLExtend.ZSQLExtend import ZSQLExtendFolder
5: from Products.ZCatalog.CatalogPathAwareness import CatalogAware
6: from OFS.Image import Image
7: from Globals import package_home
8: import urllib
9: import MPIWGStaff
10: import string
11: import re
12: import os
13: from types import *
14: import logging
15: import xmlhelper # Methoden zur Verwaltung der projekt xml
16: from OFS.SimpleItem import SimpleItem
17: from OFS.Folder import Folder
18: from Products.ZSQLMethods.SQL import SQLConnectionIDs
19: from AccessControl import ClassSecurityInfo
20: from bibliography import *
21: import time
22: import xml.dom.minidom
23: import sys
24: from Ft.Xml.XPath import Evaluate
25: from Ft.Xml.XPath.Context import Context
26: from Ft.Xml.Domlette import NonvalidatingReader,PrettyPrint, Print
27: from Ft.Xml import EMPTY_NAMESPACE
28: import copy
29: import updatePersonalWWW
30: import MPIWGStaff
31: from MPIWGHelper import *
32:
33:
34: def sortWeight(x,y):
35: x1=int(getattr(x[1],'weight','0'))
36: y1=int(getattr(y[1],'weight','0'))
37: return cmp(x1,y1)
38:
39:
40: class MPIWGRoot(ZSQLExtendFolder):
41: """Stammordner fuer den Web-Server"""
42:
43: meta_type='MPIWGRoot'
44:
45: fieldLabels={'WEB_title':'WEB_Title',
46: 'xdata_01':'Responsible Scientists',
47: 'xdata_02':'Department',
48: 'xdata_03':'Historical Persons',
49: 'xdata_04':'Time period',
50: 'xdata_05':'Sorting number',
51: 'xdata_06':'Keywords',
52: 'xdata_07':'Short title',
53: 'xdata_08':'Other involved scholars' ,
54: 'xdata_09':'Disciplines',
55: 'xdata_10':'Themes',
56: 'xdata_11':'Object Digitallibrary',
57: 'xdata_12':'Cooperation partners',
58: 'xdata_13':'Funding institutions',
59: 'WEB_project_header':'WEB_project_header',
60: 'WEB_project_description':'WEB_project_description',
61: 'WEB_related_pub':'WEB_related_pub'}
62:
63: # (is this used?)
64: folders=['MPIWGProject','Folder','ECHO_Navigation']
65: # language of this instance
66: lang = 'en'
67: # types of objects that show up in navigation
68: nav_meta_types = ['MPIWGTemplate','MPIWGLink','MPIWGFolder']
69:
70: manage_options = Folder.manage_options+(
71: {'label':'Update personal homepages','action':'updatePersonalwww_html'},
72: {'label':'Reindex catalogs','action':'reindexCatalogs'},
73: {'label':'Main config','action':'changeMPIWGRootForm'},
74: {'label':'add e-mails','action':'showNewDBEntries'},
75: #{'label':'update the institutsbibliography','action':'updateInstitutsbiliography'},
76: #{'label':'Edit Historical Persons','action':'editHistoricalPersonsForm'},
77: #{'label':'Store Historical Persons','action':'storeHistoricalPersons'},
78: )
79:
80:
81: def getGetNeighbourhood(self,obj, wordStr, length=100,tagging=True):
82: """finde umgebung um die worte in wordStr, zurueckgegeben wird eine Array mit den Umgebungen von Fundstellen der Worte
83: alle Tags werden entfernt, die Fundstellen werden mit <span class="found">XX</span> getaggt, die Umgebungen werden
84: case insensitive gesucht
85: @param wordStr: string mit Worten getrennt durch Leerzeichen, Phrasen sind mit " gekennzeichnet
86: "eine phrase", "*" bezeichnet wildcards und wird ignoriert"
87: @param length: optional, default wert 100, 2*length ist die groesse der Umgebung
88: @param tagging: optional default wert true, kein span tag wird erzweugt falls tag=false
89: """
90:
91: ret=[] # nimmt das Array auf, dass spaeter zurueckgegeben wird
92: ranges=[] #Array mit tupeln x,y wobei x die Position des Anfang und y des Endes der i-ten Umgebung angiebt
93:
94: wordStr=wordStr.lstrip().rstrip()
95:
96: def isInRanges(nr,length):
97: """test ob eine gegeben Position nr schon irgendwo in einer Umgebung ist, gibt den Index des ersten Wertes aus ranges zurueck,
98: -1, wenn kein Treffer
99:
100: @param nr: Position die geprueft werden soll
101: @param length: Laenge des Wortes das geprueft werden soll
102: """
103: for x in ranges:
104: if (x[0]<=nr) and (nr < (x[1]-length)):
105: return ranges.index(x)
106: return -1
107:
108: # deal with phrases, in Phrasen werden die Leerzeichen durch "_" ersetzt.
109: def rep_empty(str):
110: x= re.sub(" ","_",str.group(0))
111: return re.sub("\"","",x)
112:
113: wordStr=re.sub("\".*?\"", rep_empty,wordStr)#ersetze leerzeichen in " " durch "_" und loesche "
114:
115: #deal with wildcards, for our purposes it is enough to delete the wildcard
116: wordStr=wordStr.replace("*","")
117:
118: words=wordStr.split(" ")
119: #if not words is ListType:
120: # words=[words]
121:
122: txt=obj.harvest_page()
123: if not txt:
124: return ret
125: txt=re.sub("<.*?>", "", txt) # loesche alle Tags
126: for word in words:
127: word=re.sub("_"," ",word) # ersetze zurueck "_" durch " "
128: pos=0
129:
130: n=txt.lower().count(word.lower()) # wie oft tritt das Wort auf
131:
132: for i in range(n):
133: pos=txt.lower().find(word.lower(),pos)
134:
135: if pos > 0:
136: x=max(0,pos-length)
137: y=min(len(txt),pos+length)
138:
139:
140: #is word already in one of the results
141: nr=isInRanges(pos,len(word))
142: if nr >=0:# word ist in einer schon gefunden Umgebung, dann vergroessere diese
143: x=min(ranges[nr][0],x)
144: y=max(ranges[nr][1],y)
145:
146: str=txt[x:y]
147:
148: if nr >=0: # word ist in einer schon gefunden Umgebung
149: ranges[nr]=(x,y) # neue Position der Umgebung
150:
151: ret[nr]=str # neue Umgebung
152: else: # andernfalls neue Umgebung hinzufuegen
153: ranges.append((x,y))
154:
155: ret.append(str)
156:
157: pos=pos+len(word)
158: else:
159: break;
160:
161: # now highlight everything
162: if tagging:
163: for x in range(len(ret)):
164: for word in words:
165: repl=re.compile(word,re.IGNORECASE)
166: ret[x]=repl.sub(""" <span class="found">%s</span>"""%word.upper(),ret[x])
167:
168: return ret
169: def copyAllImagesToMargin(self):
170: """tranformiere alle Bilder in die Margins"""
171: projects=self.getTree()
172: ret=""
173: for project in projects:
174: proj=project[3]
175: try:
176: persons=proj.copyImageToMargin();
177: except:
178: logging.error("Cannnot do: %s"%repr(project))
179:
180: def transformProjectsToId(self):
181: """trnasformiere zu ID, Hilfsfunktion die die alten Templates analysiert und mit der neuen Liste
182: verantwortlicher Personen versieht"""
183: projects=self.getTree()
184: ret=""
185: for project in projects:
186:
187: proj=project[3]
188: persons=proj.identifyNames(proj.getContent('xdata_01'))
189: if not hasattr(proj,'responsibleScientistsList'):
190: proj.responsibleScientistsList=[]
191:
192: for person in persons.items():
193:
194: if len(person[1]) >1: #nicht eindeutig
195: ret+="nicht eindeutig --- %s: %s\n"%(proj.getId(),person[0])
196:
197: elif len(person[1]) ==0: #kein eintrage
198: ret+="kein eintrag--- %s: %s\n"%(proj.getId(),person[0])
199: proj.responsibleScientistsList.append((person[0],""))
200: else:
201: proj.responsibleScientistsList.append((person[0],person[1][0].getObject().getKey()))
202:
203: return ret
204:
205:
206: def harvestProjects(self):
207: """harvest"""
208: folder="/tmp"
209: try:
210: os.mkdir("/tmp/harvest_MPIWG")
211: except:
212: pass
213: founds=self.ZopeFind(self.aq_parent.projects,obj_metatypes=['MPIWGProject'],search_sub=1)
214: for found in founds:
215: txt=found[1].harvest_page()
216:
217: if txt and (txt != ""):
218: name=found[0].replace("/","_")
219: fh=file("/tmp/harvest_MPIWG/"+name,"w")
220: fh.write(txt)
221: fh.close()
222:
223: def decode(self,str):
224: """decoder"""
225:
226: if not str:
227: return ""
228: if type(str) is StringType:
229: try:
230: return str.decode('utf-8')
231: except:
232: return str.decode('latin-1')
233: else:
234: return str
235:
236:
237: def getat(self,array,idx=0,default=None):
238: """return array element idx or default (but no exception)"""
239: if len(array) <= idx:
240: return default
241: else:
242: return array[idx]
243:
244: def getLang(self):
245: """returns the default language"""
246: return self.lang
247:
248: def browserCheck(self):
249: """check the browsers request to find out the browser type"""
250: bt = {}
251: ua = self.REQUEST.get_header("HTTP_USER_AGENT")
252: bt['ua'] = ua
253: bt['isIE'] = False
254: bt['isN4'] = False
255: if string.find(ua, 'MSIE') > -1:
256: bt['isIE'] = True
257: else:
258: bt['isN4'] = (string.find(ua, 'Mozilla/4.') > -1)
259:
260: try:
261: nav = ua[string.find(ua, '('):]
262: ie = string.split(nav, "; ")[1]
263: if string.find(ie, "MSIE") > -1:
264: bt['versIE'] = string.split(ie, " ")[1]
265: except: pass
266:
267: bt['isMac'] = string.find(ua, 'Macintosh') > -1
268: bt['isWin'] = string.find(ua, 'Windows') > -1
269: bt['isIEWin'] = bt['isIE'] and bt['isWin']
270: bt['isIEMac'] = bt['isIE'] and bt['isMac']
271: bt['staticHTML'] = False
272:
273: return bt
274:
275:
276: def versionHeaderEN(self):
277: """version header text"""
278:
279: date= self.REQUEST.get('date',None)
280: if date:
281: txt="""<h2>This pages shows the project which existed at %s</h2>"""%str(date)
282: return txt
283: return ""
284:
285: def versionHeaderDE(self):
286: """version header text"""
287: date= self.REQUEST.get('date',None)
288: if date:
289: txt="""<h2>Auf dieser Seite finden Sie die Projekte mit Stand vom %s</h2>"""%str(date)
290: return ""
291:
292:
293: def createOrUpdateId_raw(self):
294: """create sequence to create ids for bibliography"""
295: debug=None
296: #suche groesste existierende id
297: founds=self.ZSQLQuery("select id from bibliography")
298:
299: if founds:
300: ids=[int(x.id[1:]) for x in founds]
301: maximum=max(ids)
302:
303: id_raw=self.ZSQLQuery("select nextval('id_raw')",debug=debug)
304:
305: if id_raw:
306: self.ZSQLQuery("drop sequence id_raw",debug=debug)
307:
308: self.ZSQLQuery("create sequence id_raw start %i"%(maximum+1),debug=debug)
309:
310:
311: def queryLink(self,link):
312: """append querystring to the link"""
313: return "%s?%s"%(link,self.REQUEST.get('QUERY_STRING',''))
314:
315: def getKategory(self,url):
316: """kategorie"""
317: splitted=url.split("/")
318: return splitted[4]
319:
320: def generateUrlProject(self,url,project=None):
321: """erzeuge aus absoluter url, relative des Projektes"""
322: if project:
323: splitted=url.split("/")
324: length=len(splitted)
325: short=splitted[length-2:length]
326:
327: base=self.REQUEST['URL3']+"/"+"/".join(short)
328:
329: else:
330: findPart=url.find("/projects/")
331: base=self.REQUEST['URL1']+"/"+url[findPart:]
332:
333:
334: return base
335:
336: def isNewCapital(self,text=None,reset=None):
337: if reset:
338: self.REQUEST['capital']="A"
339: return True
340: else:
341: if len(text)>0 and not (text[0]==self.REQUEST['capital']):
342: self.REQUEST['capital']=text[0]
343: return True
344: else:
345: return False
346:
347: def subNavStatic(self,obj):
348: """subnav" von self"""
349: subs=self.ZopeFind(obj,obj_metatypes=['MPIWGTemplate','MPIWGLink'])
350: subret=[]
351:
352: for x in subs:
353: if not(x[1].title==""):
354: subret.append(x)
355: subret.sort(sortWeight)
356: return subret
357:
358: def subNav(self,obj):
359: """return sub-navigation elements i.e. below sections"""
360: # get section -> parent should be MPIWGRoot
361: p = obj
362: sec = None
363: # descend parents to the root (and remember the last id)
364: while p is not None and p.meta_type != 'MPIWGRoot':
365: sec = p
366: p = p.aq_parent
367:
368: subsecs = sec.objectItems(self.nav_meta_types)
369: subsecs = [s for s in subsecs if s[1].title != ""]
370: subsecs.sort(sortWeight)
371: return subsecs
372:
373: def isType(self,object,meta_type):
374: """teste ob ein object vom meta_type ist."""
375: return (object.meta_type==meta_type)
376:
377: def isActive(self,name):
378: """teste ob subnavigation aktiv"""
379: for part in self.REQUEST['URL'].split("/"):
380: if part==name:
381: return True
382: return False
383:
384:
385: def getSections(self):
386: """returns a list of all sections i.e. top-level MPIWGFolders"""
387: secs = self.objectItems(['MPIWGFolder'])
388: secs.sort(sortWeight)
389: #logging.debug("root: %s secs: %s"%(repr(self.absolute_url()), repr(secs)))
390: # return pure list of objects
391: return [s[1] for s in secs]
392:
393: def getSectionStyle(self, name, style=""):
394: """returns a string with the given style + '-sel' if the current section == name"""
395: if self.getSection() == name:
396: return style + '-sel'
397: else:
398: return style
399:
400: def getFeatures(self, num=None):
401: """returns a list of the last num Features"""
402: dir = getattr(self, 'features')
403: features = dir.objectItems(['MPIWGFeature'])
404: features.sort(sortWeight)
405: if num is not None:
406: # take only the last num elements
407: features = features[-num:]
408: # return pure list of objects
409: return [f[1] for f in features]
410:
411:
412: def getMPIWGRoot(self):
413: """returns the MPIWG root"""
414: return self
415:
416: def MPIWGrootURL(self):
417: """returns the URL to the root"""
418: return self.absolute_url()
419:
420: def upDateSQL(self,fileName):
421: """updates SQL databases using fm.jar"""
422: fmJarPath=os.path.join(package_home(globals()), 'updateSQL/fm.jar')
423: xmlPath=os.path.join(package_home(globals()), "updateSQL/%s"%fileName)
424: logger("MPIWG Web",logging.INFO,"java -classpath %s -Djava.awt.headless=true Convert %s"%(fmJarPath,xmlPath))
425: ret=os.popen("java -classpath %s -Djava.awt.headless=true Convert %s"%(fmJarPath,xmlPath),"r").read()
426: logger("MPIWG Web",logging.INFO,"result convert: %s"%ret)
427: return 1
428:
429: def patchProjects(self,RESPONSE):
430: """patch"""
431: projects=self.ZopeFind(self.projects,obj_metatypes=['MPIWGProject'])
432: for project in projects:
433: tmp=project[1].WEB_project_description[0].replace("/CD/projects/","")[0:]
434: setattr(project[1],'WEB_project_description',[tmp[0:]])
435: RESPONSE.write("<p>%s</p>\n"%project[0])
436:
437: def replaceNotEmpty(self,format,field):
438: """replace not empty"""
439: if field and (not field.lstrip()==''):
440: return self.decode(format%field)
441: else:
442: return ""
443:
444:
445: def isActiveMember(self,key):
446: """tested ob Mitarbeiter key ist aktiv"""
447: key=utf8ify(key)
448: ret=self.getat(self.ZSQLInlineSearch(_table='personal_www',
449: _op_key='eq',key=key,
450: _op_publish_the_data='eq',
451: publish_the_data='yes'))
452:
453: logging.info("ACTIVE_MEMBER %s"%ret)
454: if ret:
455: return True
456: else:
457: return False
458:
459: def isActual(self,project):
460: """checke if project is actual"""
461: actualTime=time.localtime()
462:
463: if hasattr(project,'getObject'): #obj ist aus einer catalogTrefferList
464: obj=project.getObject()
465: else:
466: obj=project
467:
468: if getattr(obj,'archiveTime',actualTime)< actualTime:
469: return False
470: else:
471: return True
472:
473: def redirectIndex_html(self,request):
474: #return request['URL1']+'/index_html'
475:
476: return urllib.urlopen(request['URL1']+'/index_html').read()
477:
478:
479: def formatBibliography(self,here,found):
480: """format"""
481: return formatBibliography(here,found)
482:
483: def getValue(self,fieldStr):
484: """Inhalt des Feldes"""
485:
486: if type(fieldStr)==StringType:
487: field=fieldStr
488: else:
489: field=fieldStr[0]
490: try:
491: if field[len(field)-1]==";":
492: field=field[0:len(field)-1]
493: except:
494:
495: """nothing"""
496: field=re.sub(r';([^\s])','; \g<1>',field)
497: return field.encode('utf-8')
498:
499:
500:
501: def sortedNames(self,list):
502: """sort names"""
503:
504: def sortLastName(x_c,y_c):
505: try:
506: x=urllib.unquote(x_c).encode('utf-8','ignore')
507: except:
508: x=urllib.unquote(x_c)
509:
510: try:
511: y=urllib.unquote(y_c).encode('utf-8','ignore')
512: except:
513: x=urllib.unquote(y_c)
514:
515:
516:
517: try:
518: last_x=x.split()[len(x.split())-1]
519: last_y=y.split()[len(y.split())-1]
520:
521: except:
522:
523: last_x=""
524: last_y=""
525:
526:
527:
528: if last_x<last_y:
529: return 1
530: elif last_x>last_y:
531: return -1
532: else:
533: return 0
534:
535: list.sort(sortLastName)
536: list.reverse()
537:
538: return list
539:
540: def __init__(self, id, title):
541: """init"""
542: self.id=id
543: self.title=title
544:
545: def removeStopWords(self,xo):
546: """remove stop words from xo"""
547: if not hasattr(self,'_v_stopWords'):
548: self._v_stopWords=self.stopwords_en.data.split("\n")
549:
550: x=str(xo)
551:
552: strx=x.split(" ")
553:
554: for tmp in strx:
555:
556: if tmp.lower() in self._v_stopWords:
557: del strx[strx.index(tmp)]
558:
559: return " ".join(strx)
560:
561: def urlQuote(self,str):
562: """quote"""
563: return urllib.quote(str)
564:
565: def urlUnQuote(self,str):
566: """quote"""
567: return urllib.unquote(str)
568:
569:
570:
571: def getProjectsByFieldContent(self,fieldName,fieldContentsEntry, date=None):
572: """gib alle Projekte aus mit Value von field mit fieldName enthaelt ein Element der Liste fieldContents"""
573: def sort(x,y):
574: return cmp(x.WEB_title[0],y.WEB_title[0])
575:
576: if type(fieldContentsEntry) is StringType:
577: fieldContentsTmp=[fieldContentsEntry]
578: else:
579: fieldContentsTmp=fieldContentsEntry
580:
581: fieldContents=[]
582: for x in fieldContentsTmp:
583: fieldContents.append(" AND ".join(x.split()))
584: projects=self.ProjectCatalog({fieldName:string.join(fieldContents,' AND')})
585: #print projects
586: #ret=[x for x in projects]
587: ret=[]
588: for x in projects:
589: obj=x.getObject()
590: obj=obj.getActualVersion(date)
591: if obj and (not getattr(obj,'invisible',None)):
592: #if not (x in ret):
593: ret.append(x)
594:
595: ret.sort(sort)
596: return ret
597:
598: def changeMPIWGRootForm(self):
599: """edit"""
600: pt=PageTemplateFile(os.path.join(package_home(globals()),'zpt','changeMPIWGRootForm')).__of__(self)
601: return pt()
602:
603: def changeMPIWGRoot(self,title,connection_id,coneServiceURL,lang=None,autocommit=None,RESPONSE=None):
604: """change"""
605: self.title=title
606: self.connection_id=connection_id
607: #self.disciplineList=disciplineList
608: #self.themesList=themesList
609: self.coneServiceURL=coneServiceURL
610:
611: if lang is not None:
612: self.lang = lang
613:
614: self.autocommit = (autocommit == "on")
615: if RESPONSE is not None:
616: RESPONSE.redirect('manage_main')
617:
618:
619: def getContexts(self,childs=None,parents=None,depth=None,date=None,onlyActive=True):
620: """childs alle childs, alle parents"""
621: ret=[]
622:
623: if parents:
624: pnums=parents.split(".")
625: while len(pnums) > 1:
626: pnums.pop()
627: parentId=string.join(pnums,".")
628:
629: for project in self.getProjectFields('xdata_05',sort='int',date=date):
630: if project[1]==parentId:
631: ret.append(project)
632:
633: if (depth is not None) and (len(ret) >= depth):
634: break
635:
636: if childs:
637: for project in self.getProjectFields('xdata_05',sort='int',date=date):
638: searchStr=childs+"(\..*)"
639:
640: if (onlyActive and project[0].isActiveProject()) or (not onlyActive):
641: if re.match(searchStr,project[1]):
642:
643: if depth:
644:
645: if int(depth)>=len(project[1].split("."))-len(childs.split(".")):
646:
647: ret.append(project)
648: else:
649: ret.append(project)
650:
651: #logging.debug("getContexts: childs=%s parents=%s depth=%s => %s"%(childs,parents,depth,repr(ret)))
652:
653: return ret
654:
655:
656: def getProjectFields(self,fieldName,date=None,folder=None,sort=None):
657: """getListofFieldNames"""
658: ret=[]
659:
660: objects=self.ZopeFind(self.projects,obj_metatypes=['MPIWGProject'],search_sub=0)
661:
662:
663: for object in objects:
664: obj=object[1]
665: obj=obj.getActualVersion(date)
666: if obj and (not getattr(obj,'invisible',None)):
667: if fieldName=="WEB_title_or_short":
668:
669: if len(obj.getContent('xdata_07'))<3: # hack weil z.Z. manchmal noch ein Trennzeichen ; oder , im Feld statt leer
670: fieldNameTmp="WEB_title"
671: else:
672: fieldNameTmp="xdata_07"
673: else:
674: fieldNameTmp=fieldName
675:
676: ret.append((obj,obj.getContent(fieldNameTmp)))
677:
678:
679: if sort=="int":
680: ret.sort(sortI)
681: elif sort=="stopWords":
682:
683: ret.sort(sortStopWords(self))
684:
685: else:
686: ret.sort(sortF)
687:
688: return ret
689:
690: def showNewProjects(self):
691: projects=[]
692: for objs in self.getProjectFields('WEB_title_or_short'): # Get all Projets
693: if objs[0].xdata_05 and (objs[0].xdata_05[0] == ""):
694:
695: projects.append(objs)
696:
697: return projects
698:
699:
700: def updatePublicationDB(self,personId=None):
701: """updates the publication db, i.e. copy year and type into the main table"""
702:
703: if personId:
704: founds = self.ZSQLInlineSearch(_table="publications",key_main=personId)
705: else:
706: founds = self.ZSQLInlineSearch(_table="publications")
707:
708: for found in founds:
709:
710: if found.id_institutsbibliographie and (not found.id_institutsbibliographie =="") and (not found.id_institutsbibliographie =="0"):
711:
712: entries = self.ZSQLInlineSearch(_table="institutsbiblio",id=found.id_institutsbibliographie)
713: for entry in entries:
714: self.ZSQLChange(_table='publications',_identify='oid=%s' % found.oid,year=entry.year,referencetype=entry.reference_type)
715:
716: if found.id_gen_bib and (not found.id_gen_bib ==""):
717: entries = self.ZSQLInlineSearch(_table="bibliography",id=found.id_gen_bib)
718: for entry in entries:
719: self.ZSQLChange(_table='publications',_identify='oid=%s' % found.oid,year=entry.year,referencetype=entry.reference_type)
720:
721: return True
722:
723: def showNewDBEntries(self):
724: """zeige neue Eintraege in der Datenbank ohne e-mail adressen bzw. fuer die noch kein Object angelegt wurde"""
725:
726: qstr="select * from personal_www where web_object_created='no' and not key=''"
727: res=self.ZSQLQuery(qstr)
728:
729: pt=PageTemplateFile(os.path.join(package_home(globals()),'zpt','showNewDBEntries.zpt')).__of__(self)
730: return pt(newEntries=res)
731:
732: def createNewStaffObjects(self,RESPONSE):
733: """create new staff object"""
734:
735: memberFolder=getattr(self,'members')
736: args=self.REQUEST.form
737: arg_k=args.keys()
738: arg_k.remove("submit")
739: ret=""
740: for key in arg_k:
741: k=self.urlUnQuote(key)
742:
743: qstr="select * from personal_www where key=%s"%self.ZSQLQuote(k)
744: res=self.ZSQLQuery(qstr)[0]
745: if args[key]!="": #email-adresse wurde eingetragen
746: #create the object
747: e_mail=args[key]
748: try:
749: newObj=MPIWGStaff.MPIWGStaff(e_mail,res.last_name,res.first_name,k)
750: memberFolder._setObject(e_mail,newObj)
751: obj=getattr(memberFolder,e_mail)
752: obj.reindex_object()
753: ret+="Created %s \n"%e_mail
754: created=True
755: except:
756: msg="Cannot create new user %s (%s %s)"%(e_mail,sys.exc_info()[0],sys.exc_info()[1])
757: logging.error(msg)
758: ret+=msg+"\n"
759: created=False
760:
761: if created:
762: qstr="update personal_www set web_object_created='yes',e_mail='%s@mpiwg-berlin.mpg.de' where key=%s"%(e_mail,self.ZSQLQuote(k))
763: self.ZSQLQuery(qstr)
764:
765: return ret
766:
767:
768: def generateNewPersonEntry(self,data):
769: """generate a new person entry for data, neue personen werden zunaechst nur in der datenbank angelegt """
770:
771: #memberFolder=getattr(self,'members')
772: #create the object
773:
774: # try:
775: # newObj=MPIWGStaff.MPIWGStaff(urllib.quote(data['key']),data['last_name'].encode('utf-8'),data['first_name'].encode('utf-8'))
776: # memberFolder._setObject(urllib.quote(data['key']),newObj)
777: # except:
778: # return False, "Cannot create new user %s (%s %s)"%(data['key'],sys.exc_info()[0],sys.exc_info()[1])
779: #
780:
781: #create the new entry in the database
782:
783:
784: result,msg=MPIWGStaff.createNewDBEntry(self,data['publish_the_data'],data['key'],data['last_name'],
785: data['first_name'],data['titles_new'],data['status'],"",
786: "",data['date_from'],data['date_to'],
787: data['department'],'',data['funded_by'],
788: data['e_mail2'],data['current_work'],"yes",data['date_stay_at_mpiwg'],data['group'],"no",data['current_work'])
789:
790: return result,msg
791:
792: def updatePersonEntry(self,data,ignoreEntries=None):
793: """update an person entry from data. but ignore all fields in ignore Entries"""
794: if ignoreEntries is None:
795: ignoreEntries = []
796:
797: #ignoreEntries.append('current_work') # TODO:updatecurrent work
798: logging.debug("updatePersonEntry: data=%s ignoreEntries=%s"%(repr(data),repr(ignoreEntries)))
799:
800: if data['date_to']=="": # wenn date_to leer
801: data['date_to']="date_none"
802:
803: if data['date_from']=="": # wenn date_fromleer
804: data['date_from']="date_none"
805: msg=""
806:
807:
808: #eintragen
809:
810: columns=data.keys()
811: for x in ignoreEntries:
812: logging.debug("updatePersonEntry: ignoring %s"%x)
813: try: #falls in ignore entries felder sind, die nicht in columns sind, fange den fehler ab
814: columns.remove(x)
815: except:
816: pass
817:
818:
819: insert=[]
820: for key in columns:
821: if data[key]=="date_none": # date_none eintrag wird zu null uebersetzt
822: insert.append('%s=null'%key)
823: else:
824: insert.append(""" "%s"=%s"""%(key,self.ZSQLQuote(data[key])))
825:
826: insertStr=",".join(insert)
827: queryStr="update personal_www SET %s where key='%s'"%(insertStr,data['key'])
828: self.ZSQLQuery("SET DATESTYLE TO 'German'")
829: self.ZSQLQuery(queryStr)
830:
831: #currentwork
832: #if not (txt==""):
833: # queryStr="INSERT INTO current_work (id_main,current,publish) VALUES ('%s','%s','%s')"%(id,txt,txt_p)
834: #
835: # self.ZSQLQuery(queryStr)
836:
837: return True,msg
838:
839:
840: def updatePersonalwww_doIt(self):
841: """do the update"""
842: args=self.REQUEST.form
843: resultSet=self.REQUEST.SESSION['personal_www']['resultSet']
844: news=self.REQUEST.SESSION['personal_www']['news']
845: conflicts=self.REQUEST.SESSION['personal_www']['conflicts']
846: logging.debug("updatePersonalwww_doIt: args=%s\n resultSet=%s\n news=%s\n conflicts=%s"%(args,resultSet,news,conflicts))
847:
848: ret="<html><body>"
849: # generate the new entry
850:
851: if news and (len(news)>0):
852: ret+="<h2>Hinzugefügt</h2>"
853: ret+="<p>Neueinträge erscheinen erst auf der Homepage, wenn ihnen eine e-mail Adresse zugeordnet wurde.</p>"
854: ret+="<ul>"
855:
856: for new in news:
857: if args.has_key(self.urlQuote(new.encode('utf-8'))): # entry was selected
858: result,msg=self.generateNewPersonEntry(resultSet[new])
859: if not result:
860: logging.error("Error (generateNewPersonEntry) %s"%msg)
861: ret+="<li>ERROR: %s %s"%(new.encode('utf-8'),msg)
862: else:
863: ret+="<li>OK: %s"%(new.encode('utf-8'))
864:
865: if news and (len(news)>0):
866: ret+="<p>Neueinträge erscheinen erst auf der Homepage, wenn ihnen eine e-mail Adresse zugeordnet wurde.</p>"
867: ret+="</ul>"
868:
869: # update
870:
871: if len(conflicts.keys())>0:
872: ret+="<h2>Änderung des Benutzers übernehmen</h2>"
873: ret+="<p>Wenn nötig in Filemaker-db ändern:</p>"
874:
875: # konflicte
876: for conflict in conflicts.keys():
877: ignoreEntries=[]
878: displayIgnored=[]
879: for cf in conflicts[conflict]:
880: if args[conflict.encode('utf-8')+'_'+cf[0]]=="stored": #use the stored one
881: ignoreEntries.append(cf[0]) #so ignore field cf[0]
882: displayIgnored.append(cf)
883:
884: if len(displayIgnored)>0:
885: ret+="<h3>%s</h3>"%conflict.encode('utf-8')
886: ret+="<table border='1'>"
887: for iE in displayIgnored:
888: ret+="<tr><td>%s</td><td>%s</td><td>%s</td>"%(iE[0].encode('utf-8'),iE[1].encode('utf-8'),iE[2].encode('utf-8'))
889: ret+="</table>"
890:
891: self.updatePersonEntry(resultSet[conflict],ignoreEntries=ignoreEntries)
892:
893: # rest
894: cl=list(conflicts.keys())
895:
896: for key in resultSet.keys():
897: if key not in cl:
898: self.updatePersonEntry(resultSet[key])
899: return ret+"</body></html>"
900:
901:
902: def updateInstitutsbiliography(self):
903: """update the Institutsbibliogrpahy"""
904: self.upDateSQL('personalwww.xml')
905: return "<html><body>DONE</body></html>"
906:
907:
908:
909:
910: def updatePersonalwww_html(self):
911: """update form for the homepages web form"""
912: pt=PageTemplateFile(os.path.join(package_home(globals()),'zpt','updatePersonalwww.zpt')).__of__(self)
913: return pt()
914:
915:
916: def updatePersonalwww(self,uploadfile):
917: """update personalwww
918: @param uploadfile: file handle auf das file
919: """
920: dsn=self.getConnectionObj().connection_string
921: #dsn="dbname=personalwww"
922: resultSet=updatePersonalWWW.importFMPXML(uploadfile)
923: news,conflicts=updatePersonalWWW.checkImport(dsn, resultSet)
924:
925: self.REQUEST.SESSION['personal_www']={}
926: self.REQUEST.SESSION['personal_www']['resultSet']=resultSet
927: self.REQUEST.SESSION['personal_www']['news']=news
928: self.REQUEST.SESSION['personal_www']['conflicts']=conflicts
929:
930: pt=PageTemplateFile(os.path.join(package_home(globals()),'zpt','updatePersonalwww_check.zpt')).__of__(self)
931: return pt()
932:
933:
934:
935: def reindexCatalogs(self,RESPONSE=None):
936: """reindex members and project catalog"""
937:
938:
939: try:
940:
941: self.ProjectCatalog.manage_catalogReindex(self.REQUEST,RESPONSE,self.REQUEST['URL1'])
942: logger("MPIWG Root (reindexCatalog: projects)",logging.INFO,"DONE")
943: except:
944: logger("MPIWG Root (reindexCatalog: projects)",logging.WARNING," %s %s"%sys.exc_info()[:2])
945:
946: try:
947:
948: self.MembersCatalog.manage_catalogReindex(self.REQUEST,RESPONSE,self.REQUEST['URL1'])
949: logger("MPIWG Root (reindexCatalog: members)",logging.INFO,"DONE")
950: except:
951: logger("MPIWG Root (reindexCatalog: members)",logging.WARNING," %s %s"%sys.exc_info()[:2])
952:
953: try:
954:
955: self.fulltextProjectsMembers.manage_catalogReindex(self.REQUEST,RESPONSE,self.REQUEST['URL1'])
956: logger("MPIWG Root (reindexCatalog: fulltextProjectsMembers)",logging.INFO,"DONE")
957: except:
958: logger("MPIWG Root (reindexCatalog: fulltextProjectsMembers)",logging.WARNING," %s %s"%sys.exc_info()[:2])
959:
960:
961:
962:
963:
964: if RESPONSE:
965: RESPONSE.redirect('manage_main')
966:
967:
968:
969:
970: def getAllMembers(self):
971: #ret=[]
972:
973: def sorter(x,y):
974: return cmp(x[0],y[0])
975:
976: results=self.MembersCatalog({'isPublished':True})
977:
978: ret=[(unicodify(", ".join([proj.lastName, proj.firstName])), proj.getKey) for proj in results]
979:
980: ret.sort(sorter)
981: return ret
982:
983:
984: def printAllMembers(self):
985: """print"""
986: members=self.getAllMembers()
987: ret=""
988: for x in members:
989: ret+="<p>%s</p>"%x
990: return ret
991:
992:
993: def makeList(self,entry):
994: """makes a list out of one entry or repeat a list"""
995: if type(entry) is StringType:
996: return [entry]
997: else:
998: return entry
999:
1000: def getTreeRSS(self,dep=None,date=None,onlyActive=1,onlyArchived=0):
1001: """generateTree"""
1002: rss="""<?xml version="1.0" encoding="utf-8"?>
1003: <rss version="2.0">
1004: <channel>"""
1005:
1006: for obj in self.getTree(dep, date, onlyActive, onlyArchived):
1007: linkStr="""<link>http://www.mpiwg-berlin.mpg.de/en/research/projects/%s</link>"""
1008: rss+="""<item>"""
1009: rss+=linkStr%obj[3].getId()
1010: rss+="""</item>"""
1011: if hasattr(obj[3],'publicationList'):
1012: rss+="""<item>"""
1013: rss+=linkStr%(obj[3].getId()+"/publicationList");
1014: rss+="""</item>"""
1015: rss+="""</channel>
1016: </rss>"""
1017:
1018:
1019: return rss
1020:
1021: def getTree(self,dep=None,date=None,onlyActive=0,onlyArchived=0):
1022: """generate Tree from project list
1023: als Liste, jeder Eintrag ist ein Tupel ,(Tiefe, ProjektNummer,ProjektObject
1024: onlyActive = 0 : alle Projekte
1025: onlyActive = 1 : nur active Projekte
1026: onlyActive = 2: nur inactive Projekte
1027:
1028: onlyArchived=0: alle Projekte
1029: onlyArchived= 1 : nur aktuelle Projekte
1030: onlyArchived = 2: nur archivierte Projekte
1031:
1032: department fuer das Tree geholt werden soll
1033: """
1034:
1035: returnListTmp=[]
1036: returnList=[]
1037:
1038: for project in self.getProjectFields('xdata_05',sort="int",date=date): # get Projects sorted by xdata_05
1039:
1040: for idNr in project[1].split(";"): # more than one number
1041: if not idNr=="":
1042: splittedId=idNr.split(".")
1043: depth=len(splittedId)
1044: nr=idNr
1045: #title=project[0].WEB_title
1046: title=[project[0].getContent('WEB_title')]
1047: #print title
1048:
1049: if idNr[0]=="x": # kompatibilitaet mit alter Konvention, x vor der Nummer macht project inactive
1050: project[0].setActiveFlag(False)
1051:
1052: if (not dep) or (splittedId[0]==dep): #falls dep gesetzt ist nur dieses hinzufuegen.
1053:
1054: if (onlyActive==0):
1055: returnListTmp.append((depth,nr,title,project[0]))
1056: elif (onlyActive==1) and project[0].isActiveProject(): #nur active projekte
1057: returnListTmp.append((depth,nr,title,project[0]))
1058: elif (onlyActive==2) and (not project[0].isActiveProject()): #nur active projekte
1059: returnListTmp.append((depth,nr,title,project[0]))
1060:
1061:
1062: #filter jetzt die Liste nach Archived oder nicht
1063: for entry in returnListTmp:
1064: if (onlyArchived==0):
1065: returnList.append(entry)
1066: elif (onlyArchived==1) and (not entry[3].isArchivedProject()): #nur active projekte
1067: returnList.append(entry)
1068: elif (onlyArchived==2) and (entry[3].isArchivedProject()): #nur active projekte
1069: returnList.append(entry)
1070:
1071:
1072: return returnList
1073:
1074:
1075:
1076: def changePosition(self,treeId,select,RESPONSE=None):
1077: """Change Postion Entry"""
1078: numbers=[]
1079:
1080: # Suche hoechste bisherige nummer
1081: projects=self.getProjectFields('xdata_05') # get Projects sorted by xdata_05
1082: #print "pj",projects
1083: for project in projects: #suche alle subtrees der treeId
1084: #print treeId
1085:
1086: founds=re.match(treeId+"\.(.*)",project[1].split(";")[0])
1087: if founds:
1088: #print "x",founds.group(0),len(founds.group(0).split("."))
1089: if len(founds.group(0).split("."))==len(treeId.split("."))+1: # nur ein punkt mehr, d.h. untere ebene
1090: try:
1091: numbers.append(int(founds.group(0).split(".")[len(founds.group(0).split("."))-1]))
1092: except:
1093: numbers.append(int(0))
1094:
1095: try:
1096: highest=max(numbers)
1097: except:
1098: highest=0
1099: projects=self.showNewProjects()
1100: for i in self.makeList(select):
1101: highest+=10
1102: projects[int(i)][0].xdata_05=treeId+"."+str(highest)
1103:
1104:
1105: if RESPONSE is not None:
1106: RESPONSE.redirect('showTree')
1107:
1108: def changeTree(self,RESPONSE=None):
1109: """change the complete tree"""
1110: form=self.REQUEST.form
1111: hashList={}
1112: onlyArchived=int(form.get("onlyArchived",0))
1113: onlyActive=int(form.get("onlyActive",0))
1114: dep=form.get("dep",None)
1115:
1116: fields=self.getTree(dep=dep,onlyArchived=onlyArchived,onlyActive=onlyActive)
1117:
1118: logging.info("GOT TREE!----------------------------------------------------")
1119: for field in form.keys():
1120:
1121: splitted=field.split('_')
1122: if (len(splitted)>1) and (splitted[1]=="runningNumber"): #feld hat die Form Nummer_name und runnignNumber
1123:
1124:
1125: nr=int(splitted[0]) # nummer des Datensatzes
1126: currentEntry = fields[nr]
1127:
1128: if form.has_key(str(nr)+'_active'): # active flag is set
1129: fields[nr][3].setActiveFlag(True)
1130: else:
1131: fields[nr][3].setActiveFlag(False)
1132:
1133: #nummer hat sich geaendert
1134:
1135: entryChanged = False;
1136:
1137: if isinstance(fields[nr][3].xdata_05,list): #for some reasons somtimes the content of the field is a list with one entry.
1138: fields[nr][3].xdata_05=fields[nr][3].xdata_05[0]
1139:
1140: if not (fields[nr][3].xdata_05==form[str(nr)+'_number']):
1141: logging.info("Changed!Number+++++++++++++++++++++++++++++++++")
1142: logging.info(repr(fields[nr][3].xdata_05)+" ---> "+ repr(form[str(nr)+'_number']))
1143: fields[nr][3].xdata_05=form[str(nr)+'_number']
1144: entryChanged = True
1145:
1146: #completed har sich geaendert
1147:
1148: td = fields[nr][3].transformDate # hole die funktion zum transformieren des datums
1149:
1150: if not (td(fields[nr][3].getCompletedAt())==td(form[str(nr)+'_completed'])):
1151: fields[nr][3].setCompletedAt(form[str(nr)+'_completed'])
1152: logging.info(repr(td(fields[nr][3].getCompletedAt()))+" ---> "+ repr(td(form[str(nr)+'_completed'])))
1153: logging.info("Changed!Completed+++++++++++++++++++++++++++++++++")
1154: entryChanged = True
1155:
1156: if not (td(fields[nr][3].getStartedAt())==td(form[str(nr)+'_started'])):
1157: fields[nr][3].setStartedAt(form[str(nr)+'_started'])
1158:
1159: logging.info(repr(td(fields[nr][3].getStartedAt()))+" ---> "+ repr(td(form[str(nr)+'_started'])))
1160: logging.info("Changed!Started+++++++++++++++++++++++++++++++++")
1161: entryChanged = True
1162:
1163:
1164: if entryChanged:
1165: logging.info("Changed!+++++++++++++++++++++++++++++++++")
1166: fields[nr][3].copyObjectToArchive()
1167:
1168:
1169: if RESPONSE is not None:
1170: RESPONSE.redirect('showTree')
1171:
1172: def getProjectWithId(self,id):
1173: fields=self.getProjectFields('xdata_05')
1174: for field in fields:
1175: if field[1]==id:
1176: return field[0]
1177:
1178: return None
1179:
1180:
1181:
1182:
1183: def getRelativeUrlFromPerson(self,list):
1184: """get urls to person list"""
1185: ret=[]
1186: persons=list.split(";")
1187: for person in persons:
1188:
1189: if len(person)>1: #nicht nur Trennzeichen
1190: splitted=person.split(",")
1191: if len(splitted)==1:
1192: splitted=person.split(" ")
1193: splittedNew=[re.sub(r'\s(.*)','$1',split) for split in splitted]
1194: if splittedNew[0]=='':
1195: del splittedNew[0]
1196: search=string.join(splittedNew,' AND ')
1197:
1198: if not search=='':
1199:
1200: try:
1201: proj=self.MembersCatalog({'title':search})
1202: except:
1203: proj=None
1204:
1205: if proj:
1206: #ret.append("<a href=%s >%s</a>"%(proj[0].absolute_url,person.encode('utf-8')))
1207: ret.append("<a href=%s >%s</a>"%('members/'+proj[0].id+'/index.html',person))
1208: else:
1209: #ret.append("%s"%person.encode('utf-8'))
1210: ret.append("%s"%person)
1211: return string.join(ret,";")
1212:
1213: def getMemberIdFromKey(self,key):
1214: """gibt die ensprechende id im members Ordner zum key"""
1215:
1216: if key=="":
1217: return ""
1218: try:
1219: key=utf8ify(key)
1220: catalogged=self.MembersCatalog({'getKey':key})
1221: if len(catalogged)==0:
1222: return ""
1223: else:
1224: return catalogged[0].getObject().getId()
1225:
1226: except:
1227: return ""
1228:
1229:
1230:
1231: def getProjectsOfMembers(self,date=None):
1232: """give tuple member /projects"""
1233: ret=[]
1234: members=self.getAllMembers()
1235: logging.error("X %s"%repr(members))
1236: #return str(members)
1237: for x in members:
1238: logging.error("X %s"%repr(x))
1239: projects=self.getProjectsOfMember(key=x[1],date=date)
1240: if len(projects)>0:
1241: ret.append((x[0],projects))
1242:
1243: return ret
1244:
1245: def getProjectsOfMember(self,key=None,date=None,onlyArchived=1,onlyActive=1):
1246: """get projects of a member
1247:
1248: @param key: (optional) Key zur Idenfikation des Benutzer
1249: @param date: (optional) Version die zum Zeitpunkt date gueltig war
1250: @param onlyArchived:
1251: onlyArchived=0: alle Projekte
1252: onlyArchived= 1 : nur aktuelle Projekte
1253: onlyArchived = 2: nur archivierte Projekte
1254: """
1255: # TODO: Die ganze Loesung
1256: def sortP(x,y):
1257: """sort by sorting number"""
1258: return cmp(x.WEB_title,y.WEB_title)
1259:
1260: ret=[]
1261: if key:
1262: proj=self.ProjectCatalog({'getPersonKeyList':utf8ify(key)})
1263: else:
1264: return ret # key muss definiert sein
1265:
1266:
1267: if proj:
1268: proj2=[]
1269: for x in proj:
1270: #logging.error("proj:%s"%repr(x.getPath()))
1271: if (not getattr(x.getObject(),'invisible',None)) and (getattr(x.getObject(),'archiveTime','')==''):
1272: proj2.append(x)
1273:
1274: else:
1275: proj2=[]
1276:
1277:
1278:
1279: proj2.sort(sortP)
1280:
1281: projectListe=[]
1282: #logging.error("getprojectsofmember proj2: %s"%repr(proj2))
1283: for proj in proj2:
1284: obj=proj.getObject()
1285: add=False
1286: if onlyArchived==1: #nur aktuell projecte
1287: if not obj.isArchivedProject():
1288: add=True
1289: elif onlyArchived==2: #nur archivierte
1290: if obj.isArchivedProject():
1291: add=True
1292: else: #alle
1293: add=True
1294:
1295: if onlyActive==1: #nur active projecte
1296: if obj.isActiveProject():
1297: add=add & True
1298: else:
1299: add=add & False
1300:
1301: elif onlyArchived==2: #nur nicht aktvive
1302: if not obj.isActiveProject():
1303: add=add & True
1304: else: #alle
1305: add=add & True
1306:
1307: if add:
1308: projectListe.append(obj)
1309:
1310: #logging.error("getprojectsofmember projectliste: %s"%repr(projectListe))
1311: return projectListe
1312:
1313: def givePersonList(self,name):
1314: """check if person is in personfolder and return list of person objects"""
1315:
1316: splitted=name.split(",")
1317: if len(splitted)==1:
1318: splitted=name.lstrip().rstrip().split(" ")
1319: splittedNew=[split.lstrip() for split in splitted]
1320:
1321: if splittedNew[0]=='':
1322: del splittedNew[0]
1323: search=string.join(splittedNew,' AND ')
1324:
1325: if not search=='':
1326: proj=self.MembersCatalog({'title':search})
1327:
1328: if proj:
1329: return [[x.lastName,x.firstName] for x in proj]
1330: else:
1331: return []
1332:
1333: ## splitted=name.split(",") # version nachname, vorname...
1334: ## if len(splitted)>1:
1335: ## lastName=splitted[0]
1336: ## firstName=splitted[1]
1337: ## else:
1338: ## splitted=name.split(" ") #version vorname irgenwas nachnamae
1339:
1340: ## lastName=splitted[len(splitted)-1]
1341: ## firstName=string.join(splitted[0:len(splitted)-1])
1342:
1343: ## objs=[]
1344:
1345: #print self.members
1346: ## for x in self.members.__dict__:
1347: ## obj=getattr(self.members,x)
1348: ## if hasattr(obj,'lastName') and hasattr(obj,'firstName'):
1349:
1350: ## if (re.match(".*"+obj.lastName+".*",lastName) or re.match(".*"+lastName+".*",obj.lastName)) and (re.match(".*"+obj.firstName+".*",firstName) or re.match(".*"+firstName+".*",obj.firstName)):
1351:
1352: ## objs.append((obj,lastName+", "+firstName))
1353:
1354:
1355: ## return objs
1356:
1357:
1358: def personCheck(self,names):
1359: """all persons for list"""
1360: #print "names",names
1361: splitted=names.split(";")
1362: ret={}
1363: for name in splitted:
1364:
1365: if not (name==""):
1366: try:
1367: ret[name]=self.givePersonList(name)
1368: except:
1369: """NOTHIHN"""
1370: #print "RET",ret
1371: return ret
1372:
1373: def giveCheckList(self,person,fieldname):
1374: """return checklist"""
1375: #print "GCL",fieldname
1376: if fieldname=='xdata_01':
1377: x=self.personCheck(person.getContent(fieldname))
1378: #print "GCLBACKX",x
1379: return x
1380:
1381:
1382: def isCheckField(self,fieldname):
1383: """return chechfield"""
1384:
1385: return (fieldname in checkFields)
1386:
1387:
1388: def generateNameIndex(self):
1389: """erzeuge einen index verwendeter personen"""
1390: import psycopg
1391: o = psycopg.connect('dbname=authorities user=dwinter password=3333',serialize=0)
1392: results={}
1393: print self.fulltext.historicalNames.items()
1394: for nameItem in self.fulltext.historicalNames.items(): #gehe durch alle namen des lexikons
1395:
1396: c = o.cursor()
1397: name=nameItem[0]
1398: print "check",name
1399: c.execute("select lastname,firstname from persons where lower(lastname) = '%s'"%quote(name))
1400: tmpres=c.fetchall()
1401: firstnames=[result[1] for result in tmpres] # find all firstnames
1402: if tmpres:
1403: lastname=tmpres[0][0]
1404:
1405: for found in self.fulltext({'names':name}):
1406: if found.getObject().isActual():
1407: for nh in found.getObject().getGetNeighbourhood(name, length=50,tagging=False): #hole umgebung
1408: #schaue nun ob der vorname hinter oder vor dem name ist
1409: position=nh.find(lastname)
1410: # vorher
1411: #print "NH",nh
1412: bevorS=nh[0:position].split()
1413: #print "BV",bevorS
1414: if len(bevorS)>1:
1415: try:
1416: bevor=[bevorS[-1],bevorS[-2]]
1417: except:
1418: bevor=[bevorS[0]]
1419: else:
1420: bevor=[]
1421: #nachher
1422: behindS= re.split("[,|;| ]",nh[position:])
1423: #print "BH",behindS
1424: if len(behindS)>2:
1425: try:
1426: behind=behindS[1:3]
1427: except:
1428: behind=[bevorS[1]]
1429: else:
1430: behind=[]
1431: for firstname in firstnames:
1432: if firstname in bevor+behind: #Namen wie mit Adelspraedikaten werden so erstmal nich gefunden
1433: id="%s,%s"%(lastname,firstname)
1434: if not results.has_key(id):
1435: results[id]=[]
1436: objId=found.getObject().getId()
1437: if not (objId in results[id]):
1438: print "d %s for %s"%(id,objId)
1439: results[id].append(objId)
1440: self.nameIndex=results
1441: return results
1442:
1443: def editNameIndexHTML(self):
1444: """edit the name index"""
1445: if not hasattr(self,'nameIndexEdited'): # falls editierter index noch nicht existiert, kopiere automatisch erstellten
1446: self.nameIndexEdited=copy.copy(self.nameIndex)
1447: print "huh"
1448: #self.nameIndexEdited=copy.copy(self.nameIndex)
1449: #print self.nameIndexEdited
1450: pt=PageTemplateFile(os.path.join(package_home(globals()),'zpt','editHistoricalNames.zpt')).__of__(self)
1451: return pt()
1452:
1453: def getNamesInProject(self,projectId):
1454: """get all names ofnameIndexEdited which are references in projec with projectId"""
1455:
1456: ret=[]
1457: for name in self.nameIndexEdited.keys():
1458: if projectId in self.nameIndexEdited[name]:
1459: ret.append(name)
1460:
1461: return ret
1462:
1463: def editNameIndex(self,RESPONSE=None,name=None,occurrances=None,submit=None):
1464: """edit the index"""
1465: nI=self.nameIndexEdited # mI introduced to make sure that changes to nameIndexEdited are know to ZODB
1466: if submit=="delete":
1467:
1468:
1469: dh=getattr(self,'deletedHistoricalNames',{})
1470:
1471: if type(dh) is ListType:
1472: dh={}
1473: if not dh.has_key(name):
1474: dh[name]=occurrances.split("\n")
1475: else:
1476: dh[name]+=occurrances.split("\n")
1477:
1478: self.deletedHistoricalNames=dh
1479:
1480: del self.nameIndexEdited[name]
1481:
1482:
1483: elif (submit=="change"):
1484:
1485: nI[name]=occurrances.split("\n")[0:]
1486:
1487: elif (submit=="add"):
1488: if not nI.has_key(name):
1489: nI[name]=occurrances.split("\n")
1490: else:
1491: nI[name]+=occurrances.split("\n")
1492:
1493: self.nameIndexEdited=nI
1494:
1495:
1496: if RESPONSE is not None:
1497: RESPONSE.redirect('editNameIndexHTML')
1498:
1499:
1500:
1501: def restoreIndex(self):
1502: """restore"""
1503: self.nameIndexEdited=self.nameIndex
1504: return "done"
1505:
1506:
1507:
1508: def manage_addMPIWGRootForm(self):
1509: """form for adding the root"""
1510: pt=PageTemplateFile(os.path.join(package_home(globals()),'zpt','addMPIWGRootForm.zpt')).__of__(self)
1511: return pt()
1512:
1513: def manage_addMPIWGRoot(self,id,title,connection_id="",RESPONSE=None):
1514: """add a root folder"""
1515: newObj=MPIWGRoot(id,title)
1516: self._setObject(id,newObj)
1517: ob=getattr(self,id)
1518: setattr(ob,'connection_id',connection_id)
1519: if RESPONSE is not None:
1520: RESPONSE.redirect('manage_main')
1521:
FreeBSD-CVSweb <freebsd-cvsweb@FreeBSD.org>
![[BACK]](/cvs/cvsweb/icons/back.gif){kind=icon}
Return to MPIWGRoot.py CVS log ![[TXT]](/cvs/cvsweb/icons/text.gif){kind=icon}
![[DIR]](/cvs/cvsweb/icons/dir.gif){kind=icon}
Up to [Repository] / MPIWGWeb