~azzar1/unity/add-show-desktop-key

« back to all changes in this revision

Viewing changes to ivle/database.py

  • Committer: Matt Giuca
  • Date: 2009-04-25 15:04:46 UTC
  • Revision ID: matt.giuca@gmail.com-20090425150446-f6z2k8ogs8kgyh1y
Tags: 0.1.9.12
ivle.chat, ivle.database, ivle.makeuser: Replaced use of md5 library with
    hashlib to avoid Python 2.6 producing DeprecationWarnings.
    Also use hexdigest() instead of digest().encode('hex').

Show diffs side-by-side

added added

removed removed

Lines of Context:
17
17
 
18
18
# Author: Matt Giuca, Will Grant
19
19
 
20
 
"""Database utilities and content classes.
 
20
"""
 
21
Database Classes and Utilities for Storm ORM
21
22
 
22
23
This module provides all of the classes which map to database tables.
23
24
It also provides miscellaneous utility functions for database interaction.
25
26
 
26
27
import hashlib
27
28
import datetime
28
 
import os
29
 
import urlparse
30
29
 
31
30
from storm.locals import create_database, Store, Int, Unicode, DateTime, \
32
31
                         Reference, ReferenceSet, Bool, Storm, Desc
33
 
from storm.expr import Select, Max
34
32
from storm.exceptions import NotOneError, IntegrityError
35
33
 
 
34
import ivle.conf
36
35
from ivle.worksheet.rst import rst
37
36
 
38
37
__all__ = ['get_store',
52
51
                % (self.__class__.__name__, k))
53
52
        setattr(self, k, v)
54
53
 
55
 
def get_conn_string(config):
56
 
    """Create a Storm connection string to the IVLE database
57
 
 
58
 
    @param config: The IVLE configuration.
 
54
def get_conn_string():
 
55
    """
 
56
    Returns the Storm connection string, generated from the conf file.
59
57
    """
60
58
 
61
59
    clusterstr = ''
62
 
    if config['database']['username']:
63
 
        clusterstr += config['database']['username']
64
 
        if config['database']['password']:
65
 
            clusterstr += ':' + config['database']['password']
 
60
    if ivle.conf.db_user:
 
61
        clusterstr += ivle.conf.db_user
 
62
        if ivle.conf.db_password:
 
63
            clusterstr += ':' + ivle.conf.db_password
66
64
        clusterstr += '@'
67
65
 
68
 
    host = config['database']['host'] or 'localhost'
69
 
    port = config['database']['port'] or 5432
 
66
    host = ivle.conf.db_host or 'localhost'
 
67
    port = ivle.conf.db_port or 5432
70
68
 
71
69
    clusterstr += '%s:%d' % (host, port)
72
70
 
73
 
    return "postgres://%s/%s" % (clusterstr, config['database']['name'])
74
 
 
75
 
def get_store(config):
76
 
    """Create a Storm store connected to the IVLE database.
77
 
 
78
 
    @param config: The IVLE configuration.
79
 
    """
80
 
    return Store(create_database(get_conn_string(config)))
 
71
    return "postgres://%s/%s" % (clusterstr, ivle.conf.db_dbname)
 
72
 
 
73
def get_store():
 
74
    """
 
75
    Open a database connection and transaction. Return a storm.store.Store
 
76
    instance connected to the configured IVLE database.
 
77
    """
 
78
    return Store(create_database(get_conn_string()))
81
79
 
82
80
# USERS #
83
81
 
84
82
class User(Storm):
85
 
    """An IVLE user account."""
 
83
    """
 
84
    Represents an IVLE user.
 
85
    """
86
86
    __storm_table__ = "login"
87
87
 
88
88
    id = Int(primary=True, name="loginid")
119
119
 
120
120
    @property
121
121
    def display_name(self):
122
 
        """Returns the "nice name" of the user or group."""
123
122
        return self.fullname
124
123
 
125
124
    @property
126
 
    def short_name(self):
127
 
        """Returns the database "identifier" name of the user or group."""
128
 
        return self.login
129
 
 
130
 
    @property
131
125
    def password_expired(self):
132
126
        fieldval = self.pass_exp
133
127
        return fieldval is not None and datetime.datetime.now() > fieldval
170
164
 
171
165
    # TODO: Invitations should be listed too?
172
166
    def get_groups(self, offering=None):
173
 
        """Get groups of which this user is a member.
174
 
 
175
 
        @param offering: An optional offering to restrict the search to.
176
 
        """
177
167
        preds = [
178
168
            ProjectGroupMembership.user_id == self.id,
179
169
            ProjectGroup.id == ProjectGroupMembership.project_group_id,
200
190
        return self._get_enrolments(False) 
201
191
 
202
192
    def get_projects(self, offering=None, active_only=True):
203
 
        """Find projects that the user can submit.
 
193
        '''Return Projects that the user can submit.
204
194
 
205
195
        This will include projects for offerings in which the user is
206
196
        enrolled, as long as the project is not in a project set which has
207
197
        groups (ie. if maximum number of group members is 0).
208
198
 
209
 
        @param active_only: Whether to only search active offerings.
210
 
        @param offering: An optional offering to restrict the search to.
211
 
        """
 
199
        Unless active_only is False, only projects for active offerings will
 
200
        be returned.
 
201
 
 
202
        If an offering is specified, returned projects will be limited to
 
203
        those for that offering.
 
204
        '''
212
205
        return Store.of(self).find(Project,
213
206
            Project.project_set_id == ProjectSet.id,
214
207
            ProjectSet.max_students_per_group == None,
217
210
            Semester.id == Offering.semester_id,
218
211
            (not active_only) or (Semester.state == u'current'),
219
212
            Enrolment.offering_id == Offering.id,
220
 
            Enrolment.user_id == self.id,
221
 
            Enrolment.active == True)
 
213
            Enrolment.user_id == self.id)
222
214
 
223
215
    @staticmethod
224
216
    def hash_password(password):
225
 
        """Hash a password with MD5."""
226
217
        return hashlib.md5(password).hexdigest()
227
218
 
228
219
    @classmethod
229
220
    def get_by_login(cls, store, login):
230
 
        """Find a user in a store by login name."""
 
221
        """
 
222
        Get the User from the db associated with a given store and
 
223
        login.
 
224
        """
231
225
        return store.find(cls, cls.login == unicode(login)).one()
232
226
 
233
 
    def get_svn_url(self, config):
234
 
        """Get the subversion repository URL for this user or group."""
235
 
        path = 'users/%s' % self.login
236
 
        return urlparse.urljoin(config['urls']['svn_addr'], path)
237
 
 
238
 
    def get_permissions(self, user, config):
239
 
        """Determine privileges held by a user over this object.
240
 
 
241
 
        If the user requesting privileges is this user or an admin,
242
 
        they may do everything. Otherwise they may do nothing.
243
 
        """
 
227
    def get_permissions(self, user):
244
228
        if user and user.admin or user is self:
245
 
            return set(['view_public', 'view', 'edit', 'submit_project'])
 
229
            return set(['view', 'edit', 'submit_project'])
246
230
        else:
247
 
            return set(['view_public'])
 
231
            return set()
248
232
 
249
233
# SUBJECTS AND ENROLMENTS #
250
234
 
251
235
class Subject(Storm):
252
 
    """A subject (or course) which is run in some semesters."""
253
 
 
254
236
    __storm_table__ = "subject"
255
237
 
256
238
    id = Int(primary=True, name="subjectid")
257
239
    code = Unicode(name="subj_code")
258
240
    name = Unicode(name="subj_name")
259
241
    short_name = Unicode(name="subj_short_name")
 
242
    url = Unicode()
260
243
 
261
244
    offerings = ReferenceSet(id, 'Offering.subject_id')
262
245
 
265
248
    def __repr__(self):
266
249
        return "<%s '%s'>" % (type(self).__name__, self.short_name)
267
250
 
268
 
    def get_permissions(self, user, config):
269
 
        """Determine privileges held by a user over this object.
270
 
 
271
 
        If the user requesting privileges is an admin, they may edit.
272
 
        Otherwise they may only read.
273
 
        """
 
251
    def get_permissions(self, user):
274
252
        perms = set()
275
253
        if user is not None:
276
254
            perms.add('view')
279
257
        return perms
280
258
 
281
259
    def active_offerings(self):
282
 
        """Find active offerings for this subject.
283
 
 
284
 
        Return a sequence of currently active offerings for this subject
 
260
        """Return a sequence of currently active offerings for this subject
285
261
        (offerings whose semester.state is "current"). There should be 0 or 1
286
262
        elements in this sequence, but it's possible there are more.
287
263
        """
289
265
                                   Semester.state == u'current')
290
266
 
291
267
    def offering_for_semester(self, year, semester):
292
 
        """Get the offering for the given year/semester, or None.
293
 
 
294
 
        @param year: A string representation of the year.
295
 
        @param semester: A string representation of the semester.
296
 
        """
 
268
        """Get the offering for the given year/semester, or None."""
297
269
        return self.offerings.find(Offering.semester_id == Semester.id,
298
270
                               Semester.year == unicode(year),
299
271
                               Semester.semester == unicode(semester)).one()
300
272
 
301
273
class Semester(Storm):
302
 
    """A semester in which subjects can be run."""
303
 
 
304
274
    __storm_table__ = "semester"
305
275
 
306
276
    id = Int(primary=True, name="semesterid")
320
290
        return "<%s %s/%s>" % (type(self).__name__, self.year, self.semester)
321
291
 
322
292
class Offering(Storm):
323
 
    """An offering of a subject in a particular semester."""
324
 
 
325
293
    __storm_table__ = "offering"
326
294
 
327
295
    id = Int(primary=True, name="offeringid")
329
297
    subject = Reference(subject_id, Subject.id)
330
298
    semester_id = Int(name="semesterid")
331
299
    semester = Reference(semester_id, Semester.id)
332
 
    description = Unicode()
333
 
    url = Unicode()
334
 
    show_worksheet_marks = Bool()
335
 
    worksheet_cutoff = DateTime()
336
300
    groups_student_permissions = Unicode()
337
301
 
338
302
    enrolments = ReferenceSet(id, 'Enrolment.offering_id')
341
305
                           'Enrolment.user_id',
342
306
                           'User.id')
343
307
    project_sets = ReferenceSet(id, 'ProjectSet.offering_id')
344
 
    projects = ReferenceSet(id,
345
 
                            'ProjectSet.offering_id',
346
 
                            'ProjectSet.id',
347
 
                            'Project.project_set_id')
348
308
 
349
309
    worksheets = ReferenceSet(id, 
350
310
        'Worksheet.offering_id', 
358
318
                                  self.semester)
359
319
 
360
320
    def enrol(self, user, role=u'student'):
361
 
        """Enrol a user in this offering.
362
 
 
363
 
        Enrolments handle both the staff and student cases. The role controls
364
 
        the privileges granted by this enrolment.
365
 
        """
 
321
        '''Enrol a user in this offering.'''
366
322
        enrolment = Store.of(self).find(Enrolment,
367
323
                               Enrolment.user_id == user.id,
368
324
                               Enrolment.offering_id == self.id).one()
381
337
                               Enrolment.offering_id == self.id).one()
382
338
        Store.of(enrolment).remove(enrolment)
383
339
 
384
 
    def get_permissions(self, user, config):
 
340
    def get_permissions(self, user):
385
341
        perms = set()
386
342
        if user is not None:
387
343
            enrolment = self.get_enrolment(user)
388
344
            if enrolment or user.admin:
389
345
                perms.add('view')
390
 
            if enrolment and enrolment.role == u'tutor':
391
 
                perms.add('view_project_submissions')
392
 
                # Site-specific policy on the role of tutors
393
 
                if config['policy']['tutors_can_enrol_students']:
394
 
                    perms.add('enrol')
395
 
                    perms.add('enrol_student')
396
 
                if config['policy']['tutors_can_edit_worksheets']:
397
 
                    perms.add('edit_worksheets')
398
 
                if config['policy']['tutors_can_admin_groups']:
399
 
                    perms.add('admin_groups')
400
 
            if (enrolment and enrolment.role in (u'lecturer')) or user.admin:
401
 
                perms.add('view_project_submissions')
402
 
                perms.add('admin_groups')
403
 
                perms.add('edit_worksheets')
404
 
                perms.add('view_worksheet_marks')
405
 
                perms.add('edit')           # Can edit projects & details
406
 
                perms.add('enrol')          # Can see enrolment screen at all
407
 
                perms.add('enrol_student')  # Can enrol students
408
 
                perms.add('enrol_tutor')    # Can enrol tutors
409
 
            if user.admin:
410
 
                perms.add('enrol_lecturer') # Can enrol lecturers
 
346
            if (enrolment and enrolment.role in (u'tutor', u'lecturer')) \
 
347
               or user.admin:
 
348
                perms.add('edit')
411
349
        return perms
412
350
 
413
351
    def get_enrolment(self, user):
414
 
        """Find the user's enrolment in this offering."""
415
352
        try:
416
353
            enrolment = self.enrolments.find(user=user).one()
417
354
        except NotOneError:
419
356
 
420
357
        return enrolment
421
358
 
422
 
    def get_members_by_role(self, role):
423
 
        return Store.of(self).find(User,
424
 
                Enrolment.user_id == User.id,
425
 
                Enrolment.offering_id == self.id,
426
 
                Enrolment.role == role
427
 
                ).order_by(User.login)
428
 
 
429
 
    @property
430
 
    def students(self):
431
 
        return self.get_members_by_role(u'student')
432
 
 
433
 
    def get_open_projects_for_user(self, user):
434
 
        """Find all projects currently open to submissions by a user."""
435
 
        # XXX: Respect extensions.
436
 
        return self.projects.find(Project.deadline > datetime.datetime.now())
437
 
 
438
 
    def has_worksheet_cutoff_passed(self, user):
439
 
        """Check whether the worksheet cutoff has passed.
440
 
        A user is required, in case we support extensions.
441
 
        """
442
 
        if self.worksheet_cutoff is None:
443
 
            return False
444
 
        else:
445
 
            return self.worksheet_cutoff < datetime.datetime.now()
446
 
 
447
 
    def clone_worksheets(self, source):
448
 
        """Clone all worksheets from the specified source to this offering."""
449
 
        import ivle.worksheet.utils
450
 
        for worksheet in source.worksheets:
451
 
            newws = Worksheet()
452
 
            newws.seq_no = worksheet.seq_no
453
 
            newws.identifier = worksheet.identifier
454
 
            newws.name = worksheet.name
455
 
            newws.assessable = worksheet.assessable
456
 
            newws.published = worksheet.published
457
 
            newws.data = worksheet.data
458
 
            newws.format = worksheet.format
459
 
            newws.offering = self
460
 
            Store.of(self).add(newws)
461
 
            ivle.worksheet.utils.update_exerciselist(newws)
462
 
 
463
 
 
464
359
class Enrolment(Storm):
465
 
    """An enrolment of a user in an offering.
466
 
 
467
 
    This represents the roles of both staff and students.
468
 
    """
469
 
 
470
360
    __storm_table__ = "enrolment"
471
361
    __storm_primary__ = "user_id", "offering_id"
472
362
 
492
382
        return "<%s %r in %r>" % (type(self).__name__, self.user,
493
383
                                  self.offering)
494
384
 
495
 
    def get_permissions(self, user, config):
496
 
        # A user can edit any enrolment that they could have created.
497
 
        perms = set()
498
 
        if ('enrol_' + str(self.role)) in self.offering.get_permissions(
499
 
            user, config):
500
 
            perms.add('edit')
501
 
        return perms
502
 
 
503
 
    def delete(self):
504
 
        """Delete this enrolment."""
505
 
        Store.of(self).remove(self)
506
 
 
507
 
 
508
385
# PROJECTS #
509
386
 
510
387
class ProjectSet(Storm):
511
 
    """A set of projects that share common groups.
512
 
 
513
 
    Each student project group is attached to a project set. The group is
514
 
    valid for all projects in the group's set.
515
 
    """
516
 
 
517
388
    __storm_table__ = "project_set"
518
389
 
519
390
    id = Int(name="projectsetid", primary=True)
530
401
        return "<%s %d in %r>" % (type(self).__name__, self.id,
531
402
                                  self.offering)
532
403
 
533
 
    def get_permissions(self, user, config):
534
 
        return self.offering.get_permissions(user, config)
535
 
 
536
 
    def get_groups_for_user(self, user):
537
 
        """List all groups in this offering of which the user is a member."""
538
 
        assert self.is_group
539
 
        return Store.of(self).find(
540
 
            ProjectGroup,
541
 
            ProjectGroupMembership.user_id == user.id,
542
 
            ProjectGroupMembership.project_group_id == ProjectGroup.id,
543
 
            ProjectGroup.project_set_id == self.id)
544
 
 
545
 
    def get_submission_principal(self, user):
546
 
        """Get the principal on behalf of which the user can submit.
547
 
 
548
 
        If this is a solo project set, the given user is returned. If
549
 
        the user is a member of exactly one group, all the group is
550
 
        returned. Otherwise, None is returned.
551
 
        """
552
 
        if self.is_group:
553
 
            groups = self.get_groups_for_user(user)
554
 
            if groups.count() == 1:
555
 
                return groups.one()
556
 
            else:
557
 
                return None
558
 
        else:
559
 
            return user
560
 
 
561
 
    @property
562
 
    def is_group(self):
563
 
        return self.max_students_per_group is not None
564
 
 
565
 
    @property
566
 
    def assigned(self):
567
 
        """Get the entities (groups or users) assigned to submit this project.
568
 
 
569
 
        This will be a Storm ResultSet.
570
 
        """
571
 
        #If its a solo project, return everyone in offering
572
 
        if self.is_group:
573
 
            return self.project_groups
574
 
        else:
575
 
            return self.offering.students
576
 
 
577
 
class DeadlinePassed(Exception):
578
 
    """An exception indicating that a project cannot be submitted because the
579
 
    deadline has passed."""
580
 
    def __init__(self):
581
 
        pass
582
 
    def __str__(self):
583
 
        return "The project deadline has passed"
584
 
 
585
404
class Project(Storm):
586
 
    """A student project for which submissions can be made."""
587
 
 
588
405
    __storm_table__ = "project"
589
406
 
590
407
    id = Int(name="projectid", primary=True)
608
425
        return "<%s '%s' in %r>" % (type(self).__name__, self.short_name,
609
426
                                  self.project_set.offering)
610
427
 
611
 
    def can_submit(self, principal, user):
 
428
    def can_submit(self, principal):
612
429
        return (self in principal.get_projects() and
613
 
                not self.has_deadline_passed(user))
 
430
                self.deadline > datetime.datetime.now())
614
431
 
615
432
    def submit(self, principal, path, revision, who):
616
433
        """Submit a Subversion path and revision to a project.
617
434
 
618
 
        @param principal: The owner of the Subversion repository, and the
619
 
                          entity on behalf of whom the submission is being made
620
 
        @param path: A path within that repository to submit.
621
 
        @param revision: The revision of that path to submit.
622
 
        @param who: The user who is actually making the submission.
 
435
        'principal' is the owner of the Subversion repository, and the
 
436
        entity on behalf of whom the submission is being made. 'path' is
 
437
        a path within that repository, and 'revision' specifies which
 
438
        revision of that path. 'who' is the person making the submission.
623
439
        """
624
440
 
625
 
        if not self.can_submit(principal, who):
626
 
            raise DeadlinePassed()
 
441
        if not self.can_submit(principal):
 
442
            raise Exception('cannot submit')
627
443
 
628
444
        a = Assessed.get(Store.of(self), principal, self)
629
445
        ps = ProjectSubmission()
630
 
        # Raise SubmissionError if the path is illegal
631
 
        ps.path = ProjectSubmission.test_and_normalise_path(path)
 
446
        ps.path = path
632
447
        ps.revision = revision
633
448
        ps.date_submitted = datetime.datetime.now()
634
449
        ps.assessed = a
636
451
 
637
452
        return ps
638
453
 
639
 
    def get_permissions(self, user, config):
640
 
        return self.project_set.offering.get_permissions(user, config)
641
 
 
642
 
    @property
643
 
    def latest_submissions(self):
644
 
        """Return the latest submission for each Assessed."""
645
 
        return Store.of(self).find(ProjectSubmission,
646
 
            Assessed.project_id == self.id,
647
 
            ProjectSubmission.assessed_id == Assessed.id,
648
 
            ProjectSubmission.date_submitted == Select(
649
 
                    Max(ProjectSubmission.date_submitted),
650
 
                    ProjectSubmission.assessed_id == Assessed.id,
651
 
                    tables=ProjectSubmission
652
 
            )
653
 
        )
654
 
 
655
 
    def has_deadline_passed(self, user):
656
 
        """Check whether the deadline has passed."""
657
 
        # XXX: Need to respect extensions.
658
 
        return self.deadline < datetime.datetime.now()
659
 
 
660
 
    def get_submissions_for_principal(self, principal):
661
 
        """Fetch a ResultSet of all submissions by a particular principal."""
662
 
        assessed = Assessed.get(Store.of(self), principal, self)
663
 
        if assessed is None:
664
 
            return
665
 
        return assessed.submissions
666
 
 
667
 
    @property
668
 
    def can_delete(self):
669
 
        """Can only delete if there are no submissions."""
670
 
        return self.submissions.count() == 0
671
 
 
672
 
    def delete(self):
673
 
        """Delete the project. Fails if can_delete is False."""
674
 
        if not self.can_delete:
675
 
            raise IntegrityError()
676
 
        for assessed in self.assesseds:
677
 
            assessed.delete()
678
 
        Store.of(self).remove(self)
679
454
 
680
455
class ProjectGroup(Storm):
681
 
    """A group of students working together on a project."""
682
 
 
683
456
    __storm_table__ = "project_group"
684
457
 
685
458
    id = Int(name="groupid", primary=True)
704
477
 
705
478
    @property
706
479
    def display_name(self):
707
 
        """Returns the "nice name" of the user or group."""
708
 
        return self.nick
709
 
 
710
 
    @property
711
 
    def short_name(self):
712
 
        """Returns the database "identifier" name of the user or group."""
713
 
        return self.name
 
480
        return '%s (%s)' % (self.nick, self.name)
714
481
 
715
482
    def get_projects(self, offering=None, active_only=True):
716
 
        '''Find projects that the group can submit.
 
483
        '''Return Projects that the group can submit.
717
484
 
718
485
        This will include projects in the project set which owns this group,
719
486
        unless the project set disallows groups (in which case none will be
720
487
        returned).
721
488
 
722
 
        @param active_only: Whether to only search active offerings.
723
 
        @param offering: An optional offering to restrict the search to.
 
489
        Unless active_only is False, projects will only be returned if the
 
490
        group's offering is active.
 
491
 
 
492
        If an offering is specified, projects will only be returned if it
 
493
        matches the group's.
724
494
        '''
725
495
        return Store.of(self).find(Project,
726
496
            Project.project_set_id == ProjectSet.id,
731
501
            Semester.id == Offering.semester_id,
732
502
            (not active_only) or (Semester.state == u'current'))
733
503
 
734
 
    def get_svn_url(self, config):
735
 
        """Get the subversion repository URL for this user or group."""
736
 
        path = 'groups/%s_%s_%s_%s' % (
737
 
                self.project_set.offering.subject.short_name,
738
 
                self.project_set.offering.semester.year,
739
 
                self.project_set.offering.semester.semester,
740
 
                self.name
741
 
                )
742
 
        return urlparse.urljoin(config['urls']['svn_addr'], path)
743
504
 
744
 
    def get_permissions(self, user, config):
 
505
    def get_permissions(self, user):
745
506
        if user.admin or user in self.members:
746
507
            return set(['submit_project'])
747
508
        else:
748
509
            return set()
749
510
 
750
511
class ProjectGroupMembership(Storm):
751
 
    """A student's membership in a project group."""
752
 
 
753
512
    __storm_table__ = "group_member"
754
513
    __storm_primary__ = "user_id", "project_group_id"
755
514
 
765
524
                                  self.project_group)
766
525
 
767
526
class Assessed(Storm):
768
 
    """A composite of a user or group combined with a project.
769
 
 
770
 
    Each project submission and extension refers to an Assessed. It is the
771
 
    sole specifier of the repository and project.
772
 
    """
773
 
 
774
527
    __storm_table__ = "assessed"
775
528
 
776
529
    id = Int(name="assessedid", primary=True)
783
536
    project = Reference(project_id, Project.id)
784
537
 
785
538
    extensions = ReferenceSet(id, 'ProjectExtension.assessed_id')
786
 
    submissions = ReferenceSet(
787
 
        id, 'ProjectSubmission.assessed_id', order_by='date_submitted')
 
539
    submissions = ReferenceSet(id, 'ProjectSubmission.assessed_id')
788
540
 
789
541
    def __repr__(self):
790
542
        return "<%s %r in %r>" % (type(self).__name__,
791
543
            self.user or self.project_group, self.project)
792
544
 
793
 
    @property
794
 
    def is_group(self):
795
 
        """True if the Assessed is a group, False if it is a user."""
796
 
        return self.project_group is not None
797
 
 
798
 
    @property
799
 
    def principal(self):
800
 
        return self.project_group or self.user
801
 
 
802
 
    @property
803
 
    def checkout_location(self):
804
 
        """Returns the location of the Subversion workspace for this piece of
805
 
        assessment, relative to each group member's home directory."""
806
 
        subjectname = self.project.project_set.offering.subject.short_name
807
 
        if self.is_group:
808
 
            checkout_dir_name = self.principal.short_name
809
 
        else:
810
 
            checkout_dir_name = "mywork"
811
 
        return subjectname + "/" + checkout_dir_name
812
 
 
813
545
    @classmethod
814
546
    def get(cls, store, principal, project):
815
 
        """Find or create an Assessed for the given user or group and project.
816
 
 
817
 
        @param principal: The user or group.
818
 
        @param project: The project.
819
 
        """
820
547
        t = type(principal)
821
548
        if t not in (User, ProjectGroup):
822
549
            raise AssertionError('principal must be User or ProjectGroup')
824
551
        a = store.find(cls,
825
552
            (t is User) or (cls.project_group_id == principal.id),
826
553
            (t is ProjectGroup) or (cls.user_id == principal.id),
827
 
            cls.project_id == project.id).one()
 
554
            Project.id == project.id).one()
828
555
 
829
556
        if a is None:
830
557
            a = cls()
837
564
 
838
565
        return a
839
566
 
840
 
    def delete(self):
841
 
        """Delete the assessed. Fails if there are any submissions. Deletes
842
 
        extensions."""
843
 
        if self.submissions.count() > 0:
844
 
            raise IntegrityError()
845
 
        for extension in self.extensions:
846
 
            extension.delete()
847
 
        Store.of(self).remove(self)
848
567
 
849
568
class ProjectExtension(Storm):
850
 
    """An extension granted to a user or group on a particular project.
851
 
 
852
 
    The user or group and project are specified by the Assessed.
853
 
    """
854
 
 
855
569
    __storm_table__ = "project_extension"
856
570
 
857
571
    id = Int(name="extensionid", primary=True)
862
576
    approver = Reference(approver_id, User.id)
863
577
    notes = Unicode()
864
578
 
865
 
    def delete(self):
866
 
        """Delete the extension."""
867
 
        Store.of(self).remove(self)
868
 
 
869
 
class SubmissionError(Exception):
870
 
    """Denotes a validation error during submission."""
871
 
    pass
872
 
 
873
579
class ProjectSubmission(Storm):
874
 
    """A submission from a user or group repository to a particular project.
875
 
 
876
 
    The content of a submission is a single path and revision inside a
877
 
    repository. The repository is that owned by the submission's user and
878
 
    group, while the path and revision are explicit.
879
 
 
880
 
    The user or group and project are specified by the Assessed.
881
 
    """
882
 
 
883
580
    __storm_table__ = "project_submission"
884
581
 
885
582
    id = Int(name="submissionid", primary=True)
891
588
    submitter = Reference(submitter_id, User.id)
892
589
    date_submitted = DateTime()
893
590
 
894
 
    def get_verify_url(self, user):
895
 
        """Get the URL for verifying this submission, within the account of
896
 
        the given user."""
897
 
        # If this is a solo project, then self.path will be prefixed with the
898
 
        # subject name. Remove the first path segment.
899
 
        submitpath = self.path[1:] if self.path[:1] == '/' else self.path
900
 
        if not self.assessed.is_group:
901
 
            if '/' in submitpath:
902
 
                submitpath = submitpath.split('/', 1)[1]
903
 
            else:
904
 
                submitpath = ''
905
 
        return "/files/%s/%s/%s?r=%d" % (user.login,
906
 
            self.assessed.checkout_location, submitpath, self.revision)
907
 
 
908
 
    @staticmethod
909
 
    def test_and_normalise_path(path):
910
 
        """Test that path is valid, and normalise it. This prevents possible
911
 
        injections using malicious paths.
912
 
        Returns the updated path, if successful.
913
 
        Raises SubmissionError if invalid.
914
 
        """
915
 
        # Ensure the path is absolute to prevent being tacked onto working
916
 
        # directories.
917
 
        # Prevent '\n' because it will break all sorts of things.
918
 
        # Prevent '[' and ']' because they can be used to inject into the
919
 
        # svn.conf.
920
 
        # Normalise to avoid resulting in ".." path segments.
921
 
        if not os.path.isabs(path):
922
 
            raise SubmissionError("Path is not absolute")
923
 
        if any(c in path for c in "\n[]"):
924
 
            raise SubmissionError("Path must not contain '\\n', '[' or ']'")
925
 
        return os.path.normpath(path)
926
591
 
927
592
# WORKSHEETS AND EXERCISES #
928
593
 
929
594
class Exercise(Storm):
930
 
    """An exercise for students to complete in a worksheet.
931
 
 
932
 
    An exercise may be present in any number of worksheets.
933
 
    """
934
 
 
935
595
    __storm_table__ = "exercise"
936
596
    id = Unicode(primary=True, name="identifier")
937
597
    name = Unicode()
938
598
    description = Unicode()
939
 
    _description_xhtml_cache = Unicode(name='description_xhtml_cache')
940
599
    partial = Unicode()
941
600
    solution = Unicode()
942
601
    include = Unicode()
950
609
        'WorksheetExercise.worksheet_id',
951
610
        'Worksheet.id'
952
611
    )
953
 
 
 
612
    
954
613
    test_suites = ReferenceSet(id, 
955
614
        'TestSuite.exercise_id',
956
615
        order_by='seq_no')
960
619
    def __repr__(self):
961
620
        return "<%s %s>" % (type(self).__name__, self.name)
962
621
 
963
 
    def get_permissions(self, user, config):
964
 
        return self.global_permissions(user, config)
965
 
 
966
 
    @staticmethod
967
 
    def global_permissions(user, config):
968
 
        """Gets the set of permissions this user has over *all* exercises.
969
 
        This is used to determine who may view the exercises list, and create
970
 
        new exercises."""
 
622
    def get_permissions(self, user):
971
623
        perms = set()
972
624
        roles = set()
973
625
        if user is not None:
974
626
            if user.admin:
975
627
                perms.add('edit')
976
628
                perms.add('view')
977
 
            elif u'lecturer' in set((e.role for e in user.active_enrolments)):
978
 
                perms.add('edit')
979
 
                perms.add('view')
980
 
            elif (config['policy']['tutors_can_edit_worksheets']
981
 
            and u'tutor' in set((e.role for e in user.active_enrolments))):
982
 
                # Site-specific policy on the role of tutors
983
 
                perms.add('edit')
984
 
                perms.add('view')
985
 
 
 
629
            elif 'lecturer' in set((e.role for e in user.active_enrolments)):
 
630
                perms.add('edit')
 
631
                perms.add('view')
 
632
            
986
633
        return perms
987
 
 
988
 
    def _cache_description_xhtml(self, invalidate=False):
989
 
        # Don't regenerate an existing cache unless forced.
990
 
        if self._description_xhtml_cache is not None and not invalidate:
991
 
            return
992
 
 
993
 
        if self.description:
994
 
            self._description_xhtml_cache = rst(self.description)
995
 
        else:
996
 
            self._description_xhtml_cache = None
997
 
 
998
 
    @property
999
 
    def description_xhtml(self):
1000
 
        """The XHTML exercise description, converted from reStructuredText."""
1001
 
        self._cache_description_xhtml()
1002
 
        return self._description_xhtml_cache
1003
 
 
1004
 
    def set_description(self, description):
1005
 
        self.description = description
1006
 
        self._cache_description_xhtml(invalidate=True)
 
634
    
 
635
    def get_description(self):
 
636
        return rst(self.description)
1007
637
 
1008
638
    def delete(self):
1009
639
        """Deletes the exercise, providing it has no associated worksheets."""
1014
644
        Store.of(self).remove(self)
1015
645
 
1016
646
class Worksheet(Storm):
1017
 
    """A worksheet with exercises for students to complete.
1018
 
 
1019
 
    Worksheets are owned by offerings.
1020
 
    """
1021
 
 
1022
647
    __storm_table__ = "worksheet"
1023
648
 
1024
649
    id = Int(primary=True, name="worksheetid")
1026
651
    identifier = Unicode()
1027
652
    name = Unicode()
1028
653
    assessable = Bool()
1029
 
    published = Bool()
1030
654
    data = Unicode()
1031
 
    _data_xhtml_cache = Unicode(name='data_xhtml_cache')
1032
655
    seq_no = Int()
1033
656
    format = Unicode()
1034
657
 
1052
675
        return "<%s %s>" % (type(self).__name__, self.name)
1053
676
 
1054
677
    def remove_all_exercises(self):
1055
 
        """Remove all exercises from this worksheet.
1056
 
 
 
678
        """
 
679
        Remove all exercises from this worksheet.
1057
680
        This does not delete the exercises themselves. It just removes them
1058
681
        from the worksheet.
1059
682
        """
1063
686
                raise IntegrityError()
1064
687
        store.find(WorksheetExercise,
1065
688
            WorksheetExercise.worksheet == self).remove()
1066
 
 
1067
 
    def get_permissions(self, user, config):
1068
 
        offering_perms = self.offering.get_permissions(user, config)
1069
 
 
1070
 
        perms = set()
1071
 
 
1072
 
        # Anybody who can view an offering can view a published
1073
 
        # worksheet.
1074
 
        if 'view' in offering_perms and self.published:
1075
 
            perms.add('view')
1076
 
 
1077
 
        # Any worksheet editors can both view and edit.
1078
 
        if 'edit_worksheets' in offering_perms:
1079
 
            perms.add('view')
1080
 
            perms.add('edit')
1081
 
 
1082
 
        return perms
1083
 
 
1084
 
    def _cache_data_xhtml(self, invalidate=False):
1085
 
        # Don't regenerate an existing cache unless forced.
1086
 
        if self._data_xhtml_cache is not None and not invalidate:
1087
 
            return
1088
 
 
1089
 
        if self.format == u'rst':
1090
 
            self._data_xhtml_cache = rst(self.data)
1091
 
        else:
1092
 
            self._data_xhtml_cache = None
1093
 
 
1094
 
    @property
1095
 
    def data_xhtml(self):
1096
 
        """The XHTML of this worksheet, converted from rST if required."""
1097
 
        # Update the rST -> XHTML cache, if required.
1098
 
        self._cache_data_xhtml()
1099
 
 
1100
 
        if self.format == u'rst':
1101
 
            return self._data_xhtml_cache
 
689
            
 
690
    def get_permissions(self, user):
 
691
        return self.offering.get_permissions(user)
 
692
    
 
693
    def get_xml(self):
 
694
        """Returns the xml of this worksheet, converts from rst if required."""
 
695
        if self.format == u'rst':
 
696
            ws_xml = rst(self.data)
 
697
            return ws_xml
1102
698
        else:
1103
699
            return self.data
1104
 
 
1105
 
    def set_data(self, data):
1106
 
        self.data = data
1107
 
        self._cache_data_xhtml(invalidate=True)
1108
 
 
 
700
    
1109
701
    def delete(self):
1110
702
        """Deletes the worksheet, provided it has no attempts on any exercises.
1111
 
 
 
703
        
1112
704
        Returns True if delete succeeded, or False if this worksheet has
1113
705
        attempts attached."""
1114
706
        for ws_ex in self.all_worksheet_exercises:
1115
707
            if ws_ex.saves.count() > 0 or ws_ex.attempts.count() > 0:
1116
708
                raise IntegrityError()
1117
 
 
 
709
        
1118
710
        self.remove_all_exercises()
1119
711
        Store.of(self).remove(self)
1120
 
 
 
712
        
1121
713
class WorksheetExercise(Storm):
1122
 
    """A link between a worksheet and one of its exercises.
1123
 
 
1124
 
    These may be marked optional, in which case the exercise does not count
1125
 
    for marking purposes. The sequence number is used to order the worksheet
1126
 
    ToC.
1127
 
    """
1128
 
 
1129
714
    __storm_table__ = "worksheet_exercise"
1130
 
 
 
715
    
1131
716
    id = Int(primary=True, name="ws_ex_id")
1132
717
 
1133
718
    worksheet_id = Int(name="worksheetid")
1137
722
    optional = Bool()
1138
723
    active = Bool()
1139
724
    seq_no = Int()
1140
 
 
 
725
    
1141
726
    saves = ReferenceSet(id, "ExerciseSave.ws_ex_id")
1142
727
    attempts = ReferenceSet(id, "ExerciseAttempt.ws_ex_id")
1143
728
 
1147
732
        return "<%s %s in %s>" % (type(self).__name__, self.exercise.name,
1148
733
                                  self.worksheet.identifier)
1149
734
 
1150
 
    def get_permissions(self, user, config):
1151
 
        return self.worksheet.get_permissions(user, config)
1152
 
 
 
735
    def get_permissions(self, user):
 
736
        return self.worksheet.get_permissions(user)
 
737
    
1153
738
 
1154
739
class ExerciseSave(Storm):
1155
 
    """A potential exercise solution submitted by a user for storage.
1156
 
 
1157
 
    This is not an actual tested attempt at an exercise, it's just a save of
1158
 
    the editing session.
1159
 
    """
1160
 
 
 
740
    """
 
741
    Represents a potential solution to an exercise that a user has submitted
 
742
    to the server for storage.
 
743
    A basic ExerciseSave is just the current saved text for this exercise for
 
744
    this user (doesn't count towards their attempts).
 
745
    ExerciseSave may be extended with additional semantics (such as
 
746
    ExerciseAttempt).
 
747
    """
1161
748
    __storm_table__ = "exercise_save"
1162
749
    __storm_primary__ = "ws_ex_id", "user_id"
1163
750
 
1173
760
 
1174
761
    def __repr__(self):
1175
762
        return "<%s %s by %s at %s>" % (type(self).__name__,
1176
 
            self.worksheet_exercise.exercise.name, self.user.login,
1177
 
            self.date.strftime("%c"))
 
763
            self.exercise.name, self.user.login, self.date.strftime("%c"))
1178
764
 
1179
765
class ExerciseAttempt(ExerciseSave):
1180
 
    """An attempt at solving an exercise.
1181
 
 
1182
 
    This is a special case of ExerciseSave, used when the user submits a
1183
 
    candidate solution. Like an ExerciseSave, it constitutes exercise solution
1184
 
    data.
1185
 
 
1186
 
    In addition, it contains information about the result of the submission:
1187
 
 
1188
 
     - complete - True if this submission was successful, rendering this
1189
 
                  exercise complete for this user in this worksheet.
1190
 
     - active   - True if this submission is "active" (usually true).
1191
 
                  Submissions may be de-activated by privileged users for
1192
 
                  special reasons, and then they won't count (either as a
1193
 
                  penalty or success), but will still be stored.
1194
 
    """
1195
 
 
 
766
    """
 
767
    An ExerciseAttempt is a special case of an ExerciseSave. Like an
 
768
    ExerciseSave, it constitutes exercise solution data that the user has
 
769
    submitted to the server for storage.
 
770
    In addition, it contains additional information about the submission.
 
771
    complete - True if this submission was successful, rendering this exercise
 
772
        complete for this user.
 
773
    active - True if this submission is "active" (usually true). Submissions
 
774
        may be de-activated by privileged users for special reasons, and then
 
775
        they won't count (either as a penalty or success), but will still be
 
776
        stored.
 
777
    """
1196
778
    __storm_table__ = "exercise_attempt"
1197
779
    __storm_primary__ = "ws_ex_id", "user_id", "date"
1198
780
 
1201
783
    text = Unicode(name="attempt")
1202
784
    complete = Bool()
1203
785
    active = Bool()
1204
 
 
1205
 
    def get_permissions(self, user, config):
 
786
    
 
787
    def get_permissions(self, user):
1206
788
        return set(['view']) if user is self.user else set()
1207
 
 
 
789
  
1208
790
class TestSuite(Storm):
1209
 
    """A container to group an exercise's test cases.
1210
 
 
1211
 
    The test suite contains some information on how to test. The function to
1212
 
    test, variables to set and stdin data are stored here.
1213
 
    """
1214
 
 
 
791
    """A Testsuite acts as a container for the test cases of an exercise."""
1215
792
    __storm_table__ = "test_suite"
1216
793
    __storm_primary__ = "exercise_id", "suiteid"
1217
 
 
 
794
    
1218
795
    suiteid = Int()
1219
796
    exercise_id = Unicode(name="exerciseid")
1220
797
    description = Unicode()
1224
801
    exercise = Reference(exercise_id, Exercise.id)
1225
802
    test_cases = ReferenceSet(suiteid, 'TestCase.suiteid', order_by="seq_no")
1226
803
    variables = ReferenceSet(suiteid, 'TestSuiteVar.suiteid', order_by='arg_no')
1227
 
 
 
804
    
1228
805
    def delete(self):
1229
806
        """Delete this suite, without asking questions."""
1230
 
        for variable in self.variables:
 
807
        for vaariable in self.variables:
1231
808
            variable.delete()
1232
809
        for test_case in self.test_cases:
1233
810
            test_case.delete()
1234
811
        Store.of(self).remove(self)
1235
812
 
1236
813
class TestCase(Storm):
1237
 
    """A container for actual tests (see TestCasePart), inside a test suite.
1238
 
 
1239
 
    It is the lowest level shown to students on their pass/fail status."""
1240
 
 
 
814
    """A TestCase is a member of a TestSuite.
 
815
    
 
816
    It contains the data necessary to check if an exercise is correct"""
1241
817
    __storm_table__ = "test_case"
1242
818
    __storm_primary__ = "testid", "suiteid"
1243
 
 
 
819
    
1244
820
    testid = Int()
1245
821
    suiteid = Int()
1246
822
    suite = Reference(suiteid, "TestSuite.suiteid")
1247
823
    passmsg = Unicode()
1248
824
    failmsg = Unicode()
1249
 
    test_default = Unicode() # Currently unused - only used for file matching.
 
825
    test_default = Unicode()
1250
826
    seq_no = Int()
1251
 
 
 
827
    
1252
828
    parts = ReferenceSet(testid, "TestCasePart.testid")
1253
 
 
 
829
    
1254
830
    __init__ = _kwarg_init
1255
 
 
 
831
    
1256
832
    def delete(self):
1257
833
        for part in self.parts:
1258
834
            part.delete()
1259
835
        Store.of(self).remove(self)
1260
836
 
1261
837
class TestSuiteVar(Storm):
1262
 
    """A variable used by an exercise test suite.
1263
 
 
1264
 
    This may represent a function argument or a normal variable.
1265
 
    """
1266
 
 
 
838
    """A container for the arguments of a Test Suite"""
1267
839
    __storm_table__ = "suite_variable"
1268
840
    __storm_primary__ = "varid"
1269
 
 
 
841
    
1270
842
    varid = Int()
1271
843
    suiteid = Int()
1272
844
    var_name = Unicode()
1273
845
    var_value = Unicode()
1274
846
    var_type = Unicode()
1275
847
    arg_no = Int()
1276
 
 
 
848
    
1277
849
    suite = Reference(suiteid, "TestSuite.suiteid")
1278
 
 
 
850
    
1279
851
    __init__ = _kwarg_init
1280
 
 
 
852
    
1281
853
    def delete(self):
1282
854
        Store.of(self).remove(self)
1283
 
 
 
855
    
1284
856
class TestCasePart(Storm):
1285
 
    """An actual piece of code to test an exercise solution."""
1286
 
 
 
857
    """A container for the test elements of a Test Case"""
1287
858
    __storm_table__ = "test_case_part"
1288
859
    __storm_primary__ = "partid"
1289
 
 
 
860
    
1290
861
    partid = Int()
1291
862
    testid = Int()
1292
 
 
 
863
    
1293
864
    part_type = Unicode()
1294
865
    test_type = Unicode()
1295
866
    data = Unicode()
1296
867
    filename = Unicode()
1297
 
 
 
868
    
1298
869
    test = Reference(testid, "TestCase.testid")
1299
 
 
 
870
    
1300
871
    __init__ = _kwarg_init
1301
 
 
 
872
    
1302
873
    def delete(self):
1303
874
        Store.of(self).remove(self)