~azzar1/unity/add-show-desktop-key

« back to all changes in this revision

Viewing changes to ivle/database.py

  • Committer: William Grant
  • Date: 2009-04-02 07:38:03 UTC
  • mto: (1165.3.1 submissions)
  • mto: This revision was merged to the branch mainline in revision 1174.
  • Revision ID: grantw@unimelb.edu.au-20090402073803-5c5ijzhpetsdt0sg
Implement the Submit filebrowser action.

Show diffs side-by-side

added added

removed removed

Lines of Context:
17
17
 
18
18
# Author: Matt Giuca, Will Grant
19
19
 
20
 
"""Database utilities and content classes.
 
20
"""
 
21
Database Classes and Utilities for Storm ORM
21
22
 
22
23
This module provides all of the classes which map to database tables.
23
24
It also provides miscellaneous utility functions for database interaction.
24
25
"""
25
26
 
26
 
import hashlib
 
27
import md5
27
28
import datetime
28
 
import os
29
 
import urlparse
30
 
import urllib
31
29
 
32
30
from storm.locals import create_database, Store, Int, Unicode, DateTime, \
33
31
                         Reference, ReferenceSet, Bool, Storm, Desc
34
 
from storm.expr import Select, Max
35
32
from storm.exceptions import NotOneError, IntegrityError
36
33
 
 
34
import ivle.conf
37
35
from ivle.worksheet.rst import rst
38
36
 
39
37
__all__ = ['get_store',
53
51
                % (self.__class__.__name__, k))
54
52
        setattr(self, k, v)
55
53
 
56
 
def get_conn_string(config):
57
 
    """Create a Storm connection string to the IVLE database
58
 
 
59
 
    @param config: The IVLE configuration.
 
54
def get_conn_string():
 
55
    """
 
56
    Returns the Storm connection string, generated from the conf file.
60
57
    """
61
58
 
62
59
    clusterstr = ''
63
 
    if config['database']['username']:
64
 
        clusterstr += config['database']['username']
65
 
        if config['database']['password']:
66
 
            clusterstr += ':' + config['database']['password']
 
60
    if ivle.conf.db_user:
 
61
        clusterstr += ivle.conf.db_user
 
62
        if ivle.conf.db_password:
 
63
            clusterstr += ':' + ivle.conf.db_password
67
64
        clusterstr += '@'
68
65
 
69
 
    host = config['database']['host'] or 'localhost'
70
 
    port = config['database']['port'] or 5432
 
66
    host = ivle.conf.db_host or 'localhost'
 
67
    port = ivle.conf.db_port or 5432
71
68
 
72
69
    clusterstr += '%s:%d' % (host, port)
73
70
 
74
 
    return "postgres://%s/%s" % (clusterstr, config['database']['name'])
75
 
 
76
 
def get_store(config):
77
 
    """Create a Storm store connected to the IVLE database.
78
 
 
79
 
    @param config: The IVLE configuration.
80
 
    """
81
 
    return Store(create_database(get_conn_string(config)))
 
71
    return "postgres://%s/%s" % (clusterstr, ivle.conf.db_dbname)
 
72
 
 
73
def get_store():
 
74
    """
 
75
    Open a database connection and transaction. Return a storm.store.Store
 
76
    instance connected to the configured IVLE database.
 
77
    """
 
78
    return Store(create_database(get_conn_string()))
82
79
 
83
80
# USERS #
84
81
 
85
82
class User(Storm):
86
 
    """An IVLE user account."""
 
83
    """
 
84
    Represents an IVLE user.
 
85
    """
87
86
    __storm_table__ = "login"
88
87
 
89
88
    id = Int(primary=True, name="loginid")
120
119
 
121
120
    @property
122
121
    def display_name(self):
123
 
        """Returns the "nice name" of the user or group."""
124
122
        return self.fullname
125
123
 
126
124
    @property
127
 
    def short_name(self):
128
 
        """Returns the database "identifier" name of the user or group."""
129
 
        return self.login
130
 
 
131
 
    @property
132
125
    def password_expired(self):
133
126
        fieldval = self.pass_exp
134
127
        return fieldval is not None and datetime.datetime.now() > fieldval
171
164
 
172
165
    # TODO: Invitations should be listed too?
173
166
    def get_groups(self, offering=None):
174
 
        """Get groups of which this user is a member.
175
 
 
176
 
        @param offering: An optional offering to restrict the search to.
177
 
        """
178
167
        preds = [
179
168
            ProjectGroupMembership.user_id == self.id,
180
169
            ProjectGroup.id == ProjectGroupMembership.project_group_id,
201
190
        return self._get_enrolments(False) 
202
191
 
203
192
    def get_projects(self, offering=None, active_only=True):
204
 
        """Find projects that the user can submit.
 
193
        '''Return Projects that the user can submit.
205
194
 
206
195
        This will include projects for offerings in which the user is
207
196
        enrolled, as long as the project is not in a project set which has
208
197
        groups (ie. if maximum number of group members is 0).
209
198
 
210
 
        @param active_only: Whether to only search active offerings.
211
 
        @param offering: An optional offering to restrict the search to.
212
 
        """
 
199
        Unless active_only is False, only projects for active offerings will
 
200
        be returned.
 
201
 
 
202
        If an offering is specified, returned projects will be limited to
 
203
        those for that offering.
 
204
        '''
213
205
        return Store.of(self).find(Project,
214
206
            Project.project_set_id == ProjectSet.id,
215
 
            ProjectSet.max_students_per_group == None,
 
207
            ProjectSet.max_students_per_group == 0,
216
208
            ProjectSet.offering_id == Offering.id,
217
209
            (offering is None) or (Offering.id == offering.id),
218
210
            Semester.id == Offering.semester_id,
219
211
            (not active_only) or (Semester.state == u'current'),
220
212
            Enrolment.offering_id == Offering.id,
221
 
            Enrolment.user_id == self.id,
222
 
            Enrolment.active == True)
 
213
            Enrolment.user_id == self.id)
223
214
 
224
215
    @staticmethod
225
216
    def hash_password(password):
226
 
        """Hash a password with MD5."""
227
 
        return hashlib.md5(password).hexdigest()
 
217
        return md5.md5(password).hexdigest()
228
218
 
229
219
    @classmethod
230
220
    def get_by_login(cls, store, login):
231
 
        """Find a user in a store by login name."""
 
221
        """
 
222
        Get the User from the db associated with a given store and
 
223
        login.
 
224
        """
232
225
        return store.find(cls, cls.login == unicode(login)).one()
233
226
 
234
 
    def get_svn_url(self, config):
235
 
        """Get the subversion repository URL for this user or group."""
236
 
        url = config['urls']['svn_addr']
237
 
        path = 'users/%s' % self.login
238
 
        return urlparse.urljoin(url, path)
239
 
 
240
 
    def get_permissions(self, user, config):
241
 
        """Determine privileges held by a user over this object.
242
 
 
243
 
        If the user requesting privileges is this user or an admin,
244
 
        they may do everything. Otherwise they may do nothing.
245
 
        """
 
227
    def get_permissions(self, user):
246
228
        if user and user.admin or user is self:
247
 
            return set(['view_public', 'view', 'edit', 'submit_project'])
 
229
            return set(['view', 'edit', 'submit_project'])
248
230
        else:
249
 
            return set(['view_public'])
 
231
            return set()
250
232
 
251
233
# SUBJECTS AND ENROLMENTS #
252
234
 
253
235
class Subject(Storm):
254
 
    """A subject (or course) which is run in some semesters."""
255
 
 
256
236
    __storm_table__ = "subject"
257
237
 
258
238
    id = Int(primary=True, name="subjectid")
259
239
    code = Unicode(name="subj_code")
260
240
    name = Unicode(name="subj_name")
261
241
    short_name = Unicode(name="subj_short_name")
 
242
    url = Unicode()
262
243
 
263
244
    offerings = ReferenceSet(id, 'Offering.subject_id')
264
245
 
267
248
    def __repr__(self):
268
249
        return "<%s '%s'>" % (type(self).__name__, self.short_name)
269
250
 
270
 
    def get_permissions(self, user, config):
271
 
        """Determine privileges held by a user over this object.
272
 
 
273
 
        If the user requesting privileges is an admin, they may edit.
274
 
        Otherwise they may only read.
275
 
        """
 
251
    def get_permissions(self, user):
276
252
        perms = set()
277
253
        if user is not None:
278
254
            perms.add('view')
280
256
                perms.add('edit')
281
257
        return perms
282
258
 
283
 
    def active_offerings(self):
284
 
        """Find active offerings for this subject.
285
 
 
286
 
        Return a sequence of currently active offerings for this subject
287
 
        (offerings whose semester.state is "current"). There should be 0 or 1
288
 
        elements in this sequence, but it's possible there are more.
289
 
        """
290
 
        return self.offerings.find(Offering.semester_id == Semester.id,
291
 
                                   Semester.state == u'current')
292
 
 
293
 
    def offering_for_semester(self, year, semester):
294
 
        """Get the offering for the given year/semester, or None.
295
 
 
296
 
        @param year: A string representation of the year.
297
 
        @param semester: A string representation of the semester.
298
 
        """
299
 
        return self.offerings.find(Offering.semester_id == Semester.id,
300
 
                               Semester.year == unicode(year),
301
 
                               Semester.semester == unicode(semester)).one()
302
 
 
303
259
class Semester(Storm):
304
 
    """A semester in which subjects can be run."""
305
 
 
306
260
    __storm_table__ = "semester"
307
261
 
308
262
    id = Int(primary=True, name="semesterid")
322
276
        return "<%s %s/%s>" % (type(self).__name__, self.year, self.semester)
323
277
 
324
278
class Offering(Storm):
325
 
    """An offering of a subject in a particular semester."""
326
 
 
327
279
    __storm_table__ = "offering"
328
280
 
329
281
    id = Int(primary=True, name="offeringid")
331
283
    subject = Reference(subject_id, Subject.id)
332
284
    semester_id = Int(name="semesterid")
333
285
    semester = Reference(semester_id, Semester.id)
334
 
    description = Unicode()
335
 
    url = Unicode()
336
 
    show_worksheet_marks = Bool()
337
 
    worksheet_cutoff = DateTime()
338
286
    groups_student_permissions = Unicode()
339
287
 
340
288
    enrolments = ReferenceSet(id, 'Enrolment.offering_id')
343
291
                           'Enrolment.user_id',
344
292
                           'User.id')
345
293
    project_sets = ReferenceSet(id, 'ProjectSet.offering_id')
346
 
    projects = ReferenceSet(id,
347
 
                            'ProjectSet.offering_id',
348
 
                            'ProjectSet.id',
349
 
                            'Project.project_set_id')
350
294
 
351
295
    worksheets = ReferenceSet(id, 
352
296
        'Worksheet.offering_id', 
360
304
                                  self.semester)
361
305
 
362
306
    def enrol(self, user, role=u'student'):
363
 
        """Enrol a user in this offering.
364
 
 
365
 
        Enrolments handle both the staff and student cases. The role controls
366
 
        the privileges granted by this enrolment.
367
 
        """
 
307
        '''Enrol a user in this offering.'''
368
308
        enrolment = Store.of(self).find(Enrolment,
369
309
                               Enrolment.user_id == user.id,
370
310
                               Enrolment.offering_id == self.id).one()
383
323
                               Enrolment.offering_id == self.id).one()
384
324
        Store.of(enrolment).remove(enrolment)
385
325
 
386
 
    def get_permissions(self, user, config):
 
326
    def get_permissions(self, user):
387
327
        perms = set()
388
328
        if user is not None:
389
329
            enrolment = self.get_enrolment(user)
390
330
            if enrolment or user.admin:
391
331
                perms.add('view')
392
 
            if enrolment and enrolment.role == u'tutor':
393
 
                perms.add('view_project_submissions')
394
 
                # Site-specific policy on the role of tutors
395
 
                if config['policy']['tutors_can_enrol_students']:
396
 
                    perms.add('enrol')
397
 
                    perms.add('enrol_student')
398
 
                if config['policy']['tutors_can_edit_worksheets']:
399
 
                    perms.add('edit_worksheets')
400
 
                if config['policy']['tutors_can_admin_groups']:
401
 
                    perms.add('admin_groups')
402
 
            if (enrolment and enrolment.role in (u'lecturer')) or user.admin:
403
 
                perms.add('view_project_submissions')
404
 
                perms.add('admin_groups')
405
 
                perms.add('edit_worksheets')
406
 
                perms.add('view_worksheet_marks')
407
 
                perms.add('edit')           # Can edit projects & details
408
 
                perms.add('enrol')          # Can see enrolment screen at all
409
 
                perms.add('enrol_student')  # Can enrol students
410
 
                perms.add('enrol_tutor')    # Can enrol tutors
411
 
            if user.admin:
412
 
                perms.add('enrol_lecturer') # Can enrol lecturers
 
332
            if (enrolment and enrolment.role in (u'tutor', u'lecturer')) \
 
333
               or user.admin:
 
334
                perms.add('edit')
413
335
        return perms
414
336
 
415
337
    def get_enrolment(self, user):
416
 
        """Find the user's enrolment in this offering."""
417
338
        try:
418
339
            enrolment = self.enrolments.find(user=user).one()
419
340
        except NotOneError:
421
342
 
422
343
        return enrolment
423
344
 
424
 
    def get_members_by_role(self, role):
425
 
        return Store.of(self).find(User,
426
 
                Enrolment.user_id == User.id,
427
 
                Enrolment.offering_id == self.id,
428
 
                Enrolment.role == role
429
 
                ).order_by(User.login)
430
 
 
431
 
    @property
432
 
    def students(self):
433
 
        return self.get_members_by_role(u'student')
434
 
 
435
 
    def get_open_projects_for_user(self, user):
436
 
        """Find all projects currently open to submissions by a user."""
437
 
        # XXX: Respect extensions.
438
 
        return self.projects.find(Project.deadline > datetime.datetime.now())
439
 
 
440
 
    def has_worksheet_cutoff_passed(self, user):
441
 
        """Check whether the worksheet cutoff has passed.
442
 
        A user is required, in case we support extensions.
443
 
        """
444
 
        if self.worksheet_cutoff is None:
445
 
            return False
446
 
        else:
447
 
            return self.worksheet_cutoff < datetime.datetime.now()
448
 
 
449
 
    def clone_worksheets(self, source):
450
 
        """Clone all worksheets from the specified source to this offering."""
451
 
        import ivle.worksheet.utils
452
 
        for worksheet in source.worksheets:
453
 
            newws = Worksheet()
454
 
            newws.seq_no = worksheet.seq_no
455
 
            newws.identifier = worksheet.identifier
456
 
            newws.name = worksheet.name
457
 
            newws.assessable = worksheet.assessable
458
 
            newws.published = worksheet.published
459
 
            newws.data = worksheet.data
460
 
            newws.format = worksheet.format
461
 
            newws.offering = self
462
 
            Store.of(self).add(newws)
463
 
            ivle.worksheet.utils.update_exerciselist(newws)
464
 
 
465
 
 
466
345
class Enrolment(Storm):
467
 
    """An enrolment of a user in an offering.
468
 
 
469
 
    This represents the roles of both staff and students.
470
 
    """
471
 
 
472
346
    __storm_table__ = "enrolment"
473
347
    __storm_primary__ = "user_id", "offering_id"
474
348
 
494
368
        return "<%s %r in %r>" % (type(self).__name__, self.user,
495
369
                                  self.offering)
496
370
 
497
 
    def get_permissions(self, user, config):
498
 
        # A user can edit any enrolment that they could have created.
499
 
        perms = set()
500
 
        if ('enrol_' + str(self.role)) in self.offering.get_permissions(
501
 
            user, config):
502
 
            perms.add('edit')
503
 
        return perms
504
 
 
505
 
    def delete(self):
506
 
        """Delete this enrolment."""
507
 
        Store.of(self).remove(self)
508
 
 
509
 
 
510
371
# PROJECTS #
511
372
 
512
373
class ProjectSet(Storm):
513
 
    """A set of projects that share common groups.
514
 
 
515
 
    Each student project group is attached to a project set. The group is
516
 
    valid for all projects in the group's set.
517
 
    """
518
 
 
519
374
    __storm_table__ = "project_set"
520
375
 
521
376
    id = Int(name="projectsetid", primary=True)
532
387
        return "<%s %d in %r>" % (type(self).__name__, self.id,
533
388
                                  self.offering)
534
389
 
535
 
    def get_permissions(self, user, config):
536
 
        return self.offering.get_permissions(user, config)
537
 
 
538
 
    def get_groups_for_user(self, user):
539
 
        """List all groups in this offering of which the user is a member."""
540
 
        assert self.is_group
541
 
        return Store.of(self).find(
542
 
            ProjectGroup,
543
 
            ProjectGroupMembership.user_id == user.id,
544
 
            ProjectGroupMembership.project_group_id == ProjectGroup.id,
545
 
            ProjectGroup.project_set_id == self.id)
546
 
 
547
 
    def get_submission_principal(self, user):
548
 
        """Get the principal on behalf of which the user can submit.
549
 
 
550
 
        If this is a solo project set, the given user is returned. If
551
 
        the user is a member of exactly one group, all the group is
552
 
        returned. Otherwise, None is returned.
553
 
        """
554
 
        if self.is_group:
555
 
            groups = self.get_groups_for_user(user)
556
 
            if groups.count() == 1:
557
 
                return groups.one()
558
 
            else:
559
 
                return None
560
 
        else:
561
 
            return user
562
 
 
563
 
    @property
564
 
    def is_group(self):
565
 
        return self.max_students_per_group is not None
566
 
 
567
 
    @property
568
 
    def assigned(self):
569
 
        """Get the entities (groups or users) assigned to submit this project.
570
 
 
571
 
        This will be a Storm ResultSet.
572
 
        """
573
 
        #If its a solo project, return everyone in offering
574
 
        if self.is_group:
575
 
            return self.project_groups
576
 
        else:
577
 
            return self.offering.students
578
 
 
579
 
class DeadlinePassed(Exception):
580
 
    """An exception indicating that a project cannot be submitted because the
581
 
    deadline has passed."""
582
 
    def __init__(self):
583
 
        pass
584
 
    def __str__(self):
585
 
        return "The project deadline has passed"
586
 
 
587
390
class Project(Storm):
588
 
    """A student project for which submissions can be made."""
589
 
 
590
391
    __storm_table__ = "project"
591
392
 
592
393
    id = Int(name="projectid", primary=True)
610
411
        return "<%s '%s' in %r>" % (type(self).__name__, self.short_name,
611
412
                                  self.project_set.offering)
612
413
 
613
 
    def can_submit(self, principal, user, late=False):
614
 
        """
615
 
        @param late: If True, does not take the deadline into account.
616
 
        """
 
414
    def can_submit(self, principal):
617
415
        return (self in principal.get_projects() and
618
 
                (late or not self.has_deadline_passed(user)))
619
 
 
620
 
    def submit(self, principal, path, revision, who, late=False):
621
 
        """Submit a Subversion path and revision to a project.
622
 
 
623
 
        @param principal: The owner of the Subversion repository, and the
624
 
                          entity on behalf of whom the submission is being made
625
 
        @param path: A path within that repository to submit.
626
 
        @param revision: The revision of that path to submit.
627
 
        @param who: The user who is actually making the submission.
628
 
        @param late: If True, will not raise a DeadlinePassed exception even
629
 
            after the deadline. (Default False.)
630
 
        """
631
 
 
632
 
        if not self.can_submit(principal, who, late=late):
633
 
            raise DeadlinePassed()
 
416
                self.deadline > datetime.datetime.now())
 
417
 
 
418
    def submit(self, principal, path, revision):
 
419
        if not self.can_submit(principal):
 
420
            raise Exception('cannot submit')
634
421
 
635
422
        a = Assessed.get(Store.of(self), principal, self)
636
423
        ps = ProjectSubmission()
637
 
        # Raise SubmissionError if the path is illegal
638
 
        ps.path = ProjectSubmission.test_and_normalise_path(path)
 
424
        ps.path = path
639
425
        ps.revision = revision
640
426
        ps.date_submitted = datetime.datetime.now()
641
427
        ps.assessed = a
642
 
        ps.submitter = who
643
428
 
644
429
        return ps
645
430
 
646
 
    def get_permissions(self, user, config):
647
 
        return self.project_set.offering.get_permissions(user, config)
648
 
 
649
 
    @property
650
 
    def latest_submissions(self):
651
 
        """Return the latest submission for each Assessed."""
652
 
        return Store.of(self).find(ProjectSubmission,
653
 
            Assessed.project_id == self.id,
654
 
            ProjectSubmission.assessed_id == Assessed.id,
655
 
            ProjectSubmission.date_submitted == Select(
656
 
                    Max(ProjectSubmission.date_submitted),
657
 
                    ProjectSubmission.assessed_id == Assessed.id,
658
 
                    tables=ProjectSubmission
659
 
            )
660
 
        )
661
 
 
662
 
    def has_deadline_passed(self, user):
663
 
        """Check whether the deadline has passed."""
664
 
        # XXX: Need to respect extensions.
665
 
        return self.deadline < datetime.datetime.now()
666
 
 
667
 
    def get_submissions_for_principal(self, principal):
668
 
        """Fetch a ResultSet of all submissions by a particular principal."""
669
 
        assessed = Assessed.get(Store.of(self), principal, self)
670
 
        if assessed is None:
671
 
            return
672
 
        return assessed.submissions
673
 
 
674
 
    @property
675
 
    def can_delete(self):
676
 
        """Can only delete if there are no submissions."""
677
 
        return self.submissions.count() == 0
678
 
 
679
 
    def delete(self):
680
 
        """Delete the project. Fails if can_delete is False."""
681
 
        if not self.can_delete:
682
 
            raise IntegrityError()
683
 
        for assessed in self.assesseds:
684
 
            assessed.delete()
685
 
        Store.of(self).remove(self)
686
431
 
687
432
class ProjectGroup(Storm):
688
 
    """A group of students working together on a project."""
689
 
 
690
433
    __storm_table__ = "project_group"
691
434
 
692
435
    id = Int(name="groupid", primary=True)
711
454
 
712
455
    @property
713
456
    def display_name(self):
714
 
        """Returns the "nice name" of the user or group."""
715
 
        return self.nick
716
 
 
717
 
    @property
718
 
    def short_name(self):
719
 
        """Returns the database "identifier" name of the user or group."""
720
 
        return self.name
 
457
        return '%s (%s)' % (self.nick, self.name)
721
458
 
722
459
    def get_projects(self, offering=None, active_only=True):
723
 
        '''Find projects that the group can submit.
 
460
        '''Return Projects that the group can submit.
724
461
 
725
462
        This will include projects in the project set which owns this group,
726
463
        unless the project set disallows groups (in which case none will be
727
464
        returned).
728
465
 
729
 
        @param active_only: Whether to only search active offerings.
730
 
        @param offering: An optional offering to restrict the search to.
 
466
        Unless active_only is False, projects will only be returned if the
 
467
        group's offering is active.
 
468
 
 
469
        If an offering is specified, projects will only be returned if it
 
470
        matches the group's.
731
471
        '''
732
472
        return Store.of(self).find(Project,
733
473
            Project.project_set_id == ProjectSet.id,
734
474
            ProjectSet.id == self.project_set.id,
735
 
            ProjectSet.max_students_per_group != None,
 
475
            ProjectSet.max_students_per_group > 0,
736
476
            ProjectSet.offering_id == Offering.id,
737
477
            (offering is None) or (Offering.id == offering.id),
738
478
            Semester.id == Offering.semester_id,
739
479
            (not active_only) or (Semester.state == u'current'))
740
480
 
741
 
    def get_svn_url(self, config):
742
 
        """Get the subversion repository URL for this user or group."""
743
 
        url = config['urls']['svn_addr']
744
 
        path = 'groups/%s_%s_%s_%s' % (
745
 
                self.project_set.offering.subject.short_name,
746
 
                self.project_set.offering.semester.year,
747
 
                self.project_set.offering.semester.semester,
748
 
                self.name
749
 
                )
750
 
        return urlparse.urljoin(url, path)
751
481
 
752
 
    def get_permissions(self, user, config):
 
482
    def get_permissions(self, user):
753
483
        if user.admin or user in self.members:
754
484
            return set(['submit_project'])
755
485
        else:
756
486
            return set()
757
487
 
758
488
class ProjectGroupMembership(Storm):
759
 
    """A student's membership in a project group."""
760
 
 
761
489
    __storm_table__ = "group_member"
762
490
    __storm_primary__ = "user_id", "project_group_id"
763
491
 
773
501
                                  self.project_group)
774
502
 
775
503
class Assessed(Storm):
776
 
    """A composite of a user or group combined with a project.
777
 
 
778
 
    Each project submission and extension refers to an Assessed. It is the
779
 
    sole specifier of the repository and project.
780
 
    """
781
 
 
782
504
    __storm_table__ = "assessed"
783
505
 
784
506
    id = Int(name="assessedid", primary=True)
791
513
    project = Reference(project_id, Project.id)
792
514
 
793
515
    extensions = ReferenceSet(id, 'ProjectExtension.assessed_id')
794
 
    submissions = ReferenceSet(
795
 
        id, 'ProjectSubmission.assessed_id', order_by='date_submitted')
 
516
    submissions = ReferenceSet(id, 'ProjectSubmission.assessed_id')
796
517
 
797
518
    def __repr__(self):
798
519
        return "<%s %r in %r>" % (type(self).__name__,
799
520
            self.user or self.project_group, self.project)
800
521
 
801
 
    @property
802
 
    def is_group(self):
803
 
        """True if the Assessed is a group, False if it is a user."""
804
 
        return self.project_group is not None
805
 
 
806
 
    @property
807
 
    def principal(self):
808
 
        return self.project_group or self.user
809
 
 
810
 
    @property
811
 
    def checkout_location(self):
812
 
        """Returns the location of the Subversion workspace for this piece of
813
 
        assessment, relative to each group member's home directory."""
814
 
        subjectname = self.project.project_set.offering.subject.short_name
815
 
        if self.is_group:
816
 
            checkout_dir_name = self.principal.short_name
817
 
        else:
818
 
            checkout_dir_name = "mywork"
819
 
        return subjectname + "/" + checkout_dir_name
820
 
 
821
522
    @classmethod
822
523
    def get(cls, store, principal, project):
823
 
        """Find or create an Assessed for the given user or group and project.
824
 
 
825
 
        @param principal: The user or group.
826
 
        @param project: The project.
827
 
        """
828
524
        t = type(principal)
829
525
        if t not in (User, ProjectGroup):
830
526
            raise AssertionError('principal must be User or ProjectGroup')
832
528
        a = store.find(cls,
833
529
            (t is User) or (cls.project_group_id == principal.id),
834
530
            (t is ProjectGroup) or (cls.user_id == principal.id),
835
 
            cls.project_id == project.id).one()
 
531
            Project.id == project.id).one()
836
532
 
837
533
        if a is None:
838
534
            a = cls()
845
541
 
846
542
        return a
847
543
 
848
 
    def delete(self):
849
 
        """Delete the assessed. Fails if there are any submissions. Deletes
850
 
        extensions."""
851
 
        if self.submissions.count() > 0:
852
 
            raise IntegrityError()
853
 
        for extension in self.extensions:
854
 
            extension.delete()
855
 
        Store.of(self).remove(self)
856
544
 
857
545
class ProjectExtension(Storm):
858
 
    """An extension granted to a user or group on a particular project.
859
 
 
860
 
    The user or group and project are specified by the Assessed.
861
 
    """
862
 
 
863
546
    __storm_table__ = "project_extension"
864
547
 
865
548
    id = Int(name="extensionid", primary=True)
866
549
    assessed_id = Int(name="assessedid")
867
550
    assessed = Reference(assessed_id, Assessed.id)
868
 
    days = Int()
 
551
    deadline = DateTime()
869
552
    approver_id = Int(name="approver")
870
553
    approver = Reference(approver_id, User.id)
871
554
    notes = Unicode()
872
555
 
873
 
    def delete(self):
874
 
        """Delete the extension."""
875
 
        Store.of(self).remove(self)
876
 
 
877
 
class SubmissionError(Exception):
878
 
    """Denotes a validation error during submission."""
879
 
    pass
880
 
 
881
556
class ProjectSubmission(Storm):
882
 
    """A submission from a user or group repository to a particular project.
883
 
 
884
 
    The content of a submission is a single path and revision inside a
885
 
    repository. The repository is that owned by the submission's user and
886
 
    group, while the path and revision are explicit.
887
 
 
888
 
    The user or group and project are specified by the Assessed.
889
 
    """
890
 
 
891
557
    __storm_table__ = "project_submission"
892
558
 
893
559
    id = Int(name="submissionid", primary=True)
895
561
    assessed = Reference(assessed_id, Assessed.id)
896
562
    path = Unicode()
897
563
    revision = Int()
898
 
    submitter_id = Int(name="submitter")
899
 
    submitter = Reference(submitter_id, User.id)
900
564
    date_submitted = DateTime()
901
565
 
902
 
    def get_verify_url(self, user):
903
 
        """Get the URL for verifying this submission, within the account of
904
 
        the given user."""
905
 
        # If this is a solo project, then self.path will be prefixed with the
906
 
        # subject name. Remove the first path segment.
907
 
        submitpath = self.path[1:] if self.path[:1] == '/' else self.path
908
 
        if not self.assessed.is_group:
909
 
            if '/' in submitpath:
910
 
                submitpath = submitpath.split('/', 1)[1]
911
 
            else:
912
 
                submitpath = ''
913
 
        return "/files/%s/%s/%s?r=%d" % (user.login,
914
 
            self.assessed.checkout_location, submitpath, self.revision)
915
 
 
916
 
    def get_svn_url(self, config):
917
 
        """Get subversion URL for this submission"""
918
 
        princ = self.assessed.principal
919
 
        base = princ.get_svn_url(config)
920
 
        if self.path.startswith(os.sep):
921
 
            return os.path.join(base,
922
 
                    urllib.quote(self.path[1:].encode('utf-8')))
923
 
        else:
924
 
            return os.path.join(base, urllib.quote(self.path.encode('utf-8')))
925
 
 
926
 
    def get_svn_export_command(self, req):
927
 
        """Returns a Unix shell command to export a submission"""
928
 
        svn_url = self.get_svn_url(req.config)
929
 
        username = (req.user.login if req.user.login.isalnum() else
930
 
                "'%s'"%req.user.login)
931
 
        export_dir = self.assessed.principal.short_name
932
 
        return "svn export --username %s -r%d '%s' %s"%(req.user.login,
933
 
                self.revision, svn_url, export_dir)
934
 
 
935
 
    @staticmethod
936
 
    def test_and_normalise_path(path):
937
 
        """Test that path is valid, and normalise it. This prevents possible
938
 
        injections using malicious paths.
939
 
        Returns the updated path, if successful.
940
 
        Raises SubmissionError if invalid.
941
 
        """
942
 
        # Ensure the path is absolute to prevent being tacked onto working
943
 
        # directories.
944
 
        # Prevent '\n' because it will break all sorts of things.
945
 
        # Prevent '[' and ']' because they can be used to inject into the
946
 
        # svn.conf.
947
 
        # Normalise to avoid resulting in ".." path segments.
948
 
        if not os.path.isabs(path):
949
 
            raise SubmissionError("Path is not absolute")
950
 
        if any(c in path for c in "\n[]"):
951
 
            raise SubmissionError("Path must not contain '\\n', '[' or ']'")
952
 
        return os.path.normpath(path)
953
 
 
954
 
    @property
955
 
    def late(self):
956
 
        """True if the project was submitted late."""
957
 
        return self.days_late > 0
958
 
 
959
 
    @property
960
 
    def days_late(self):
961
 
        """The number of days the project was submitted late (rounded up), or
962
 
        0 if on-time."""
963
 
        # XXX: Need to respect extensions.
964
 
        return max(0,
965
 
            (self.date_submitted - self.assessed.project.deadline).days + 1)
966
566
 
967
567
# WORKSHEETS AND EXERCISES #
968
568
 
969
569
class Exercise(Storm):
970
 
    """An exercise for students to complete in a worksheet.
971
 
 
972
 
    An exercise may be present in any number of worksheets.
973
 
    """
974
 
 
975
570
    __storm_table__ = "exercise"
976
571
    id = Unicode(primary=True, name="identifier")
977
572
    name = Unicode()
978
573
    description = Unicode()
979
 
    _description_xhtml_cache = Unicode(name='description_xhtml_cache')
980
574
    partial = Unicode()
981
575
    solution = Unicode()
982
576
    include = Unicode()
990
584
        'WorksheetExercise.worksheet_id',
991
585
        'Worksheet.id'
992
586
    )
993
 
 
 
587
    
994
588
    test_suites = ReferenceSet(id, 
995
589
        'TestSuite.exercise_id',
996
590
        order_by='seq_no')
1000
594
    def __repr__(self):
1001
595
        return "<%s %s>" % (type(self).__name__, self.name)
1002
596
 
1003
 
    def get_permissions(self, user, config):
1004
 
        return self.global_permissions(user, config)
1005
 
 
1006
 
    @staticmethod
1007
 
    def global_permissions(user, config):
1008
 
        """Gets the set of permissions this user has over *all* exercises.
1009
 
        This is used to determine who may view the exercises list, and create
1010
 
        new exercises."""
 
597
    def get_permissions(self, user):
1011
598
        perms = set()
1012
599
        roles = set()
1013
600
        if user is not None:
1014
601
            if user.admin:
1015
602
                perms.add('edit')
1016
603
                perms.add('view')
1017
 
            elif u'lecturer' in set((e.role for e in user.active_enrolments)):
1018
 
                perms.add('edit')
1019
 
                perms.add('view')
1020
 
            elif (config['policy']['tutors_can_edit_worksheets']
1021
 
            and u'tutor' in set((e.role for e in user.active_enrolments))):
1022
 
                # Site-specific policy on the role of tutors
1023
 
                perms.add('edit')
1024
 
                perms.add('view')
1025
 
 
 
604
            elif 'lecturer' in set((e.role for e in user.active_enrolments)):
 
605
                perms.add('edit')
 
606
                perms.add('view')
 
607
            
1026
608
        return perms
1027
 
 
1028
 
    def _cache_description_xhtml(self, invalidate=False):
1029
 
        # Don't regenerate an existing cache unless forced.
1030
 
        if self._description_xhtml_cache is not None and not invalidate:
1031
 
            return
1032
 
 
1033
 
        if self.description:
1034
 
            self._description_xhtml_cache = rst(self.description)
1035
 
        else:
1036
 
            self._description_xhtml_cache = None
1037
 
 
1038
 
    @property
1039
 
    def description_xhtml(self):
1040
 
        """The XHTML exercise description, converted from reStructuredText."""
1041
 
        self._cache_description_xhtml()
1042
 
        return self._description_xhtml_cache
1043
 
 
1044
 
    def set_description(self, description):
1045
 
        self.description = description
1046
 
        self._cache_description_xhtml(invalidate=True)
 
609
    
 
610
    def get_description(self):
 
611
        return rst(self.description)
1047
612
 
1048
613
    def delete(self):
1049
614
        """Deletes the exercise, providing it has no associated worksheets."""
1054
619
        Store.of(self).remove(self)
1055
620
 
1056
621
class Worksheet(Storm):
1057
 
    """A worksheet with exercises for students to complete.
1058
 
 
1059
 
    Worksheets are owned by offerings.
1060
 
    """
1061
 
 
1062
622
    __storm_table__ = "worksheet"
1063
623
 
1064
624
    id = Int(primary=True, name="worksheetid")
1066
626
    identifier = Unicode()
1067
627
    name = Unicode()
1068
628
    assessable = Bool()
1069
 
    published = Bool()
1070
629
    data = Unicode()
1071
 
    _data_xhtml_cache = Unicode(name='data_xhtml_cache')
1072
630
    seq_no = Int()
1073
631
    format = Unicode()
1074
632
 
1091
649
    def __repr__(self):
1092
650
        return "<%s %s>" % (type(self).__name__, self.name)
1093
651
 
 
652
    # XXX Refactor this - make it an instance method of Subject rather than a
 
653
    # class method of Worksheet. Can't do that now because Subject isn't
 
654
    # linked referentially to the Worksheet.
 
655
    @classmethod
 
656
    def get_by_name(cls, store, subjectname, worksheetname):
 
657
        """
 
658
        Get the Worksheet from the db associated with a given store, subject
 
659
        name and worksheet name.
 
660
        """
 
661
        return store.find(cls, cls.subject == unicode(subjectname),
 
662
            cls.name == unicode(worksheetname)).one()
 
663
 
1094
664
    def remove_all_exercises(self):
1095
 
        """Remove all exercises from this worksheet.
1096
 
 
 
665
        """
 
666
        Remove all exercises from this worksheet.
1097
667
        This does not delete the exercises themselves. It just removes them
1098
668
        from the worksheet.
1099
669
        """
1103
673
                raise IntegrityError()
1104
674
        store.find(WorksheetExercise,
1105
675
            WorksheetExercise.worksheet == self).remove()
1106
 
 
1107
 
    def get_permissions(self, user, config):
1108
 
        offering_perms = self.offering.get_permissions(user, config)
1109
 
 
1110
 
        perms = set()
1111
 
 
1112
 
        # Anybody who can view an offering can view a published
1113
 
        # worksheet.
1114
 
        if 'view' in offering_perms and self.published:
1115
 
            perms.add('view')
1116
 
 
1117
 
        # Any worksheet editors can both view and edit.
1118
 
        if 'edit_worksheets' in offering_perms:
1119
 
            perms.add('view')
1120
 
            perms.add('edit')
1121
 
 
1122
 
        return perms
1123
 
 
1124
 
    def _cache_data_xhtml(self, invalidate=False):
1125
 
        # Don't regenerate an existing cache unless forced.
1126
 
        if self._data_xhtml_cache is not None and not invalidate:
1127
 
            return
1128
 
 
1129
 
        if self.format == u'rst':
1130
 
            self._data_xhtml_cache = rst(self.data)
1131
 
        else:
1132
 
            self._data_xhtml_cache = None
1133
 
 
1134
 
    @property
1135
 
    def data_xhtml(self):
1136
 
        """The XHTML of this worksheet, converted from rST if required."""
1137
 
        # Update the rST -> XHTML cache, if required.
1138
 
        self._cache_data_xhtml()
1139
 
 
1140
 
        if self.format == u'rst':
1141
 
            return self._data_xhtml_cache
 
676
            
 
677
    def get_permissions(self, user):
 
678
        return self.offering.get_permissions(user)
 
679
    
 
680
    def get_xml(self):
 
681
        """Returns the xml of this worksheet, converts from rst if required."""
 
682
        if self.format == u'rst':
 
683
            ws_xml = rst(self.data)
 
684
            return ws_xml
1142
685
        else:
1143
686
            return self.data
1144
 
 
1145
 
    def set_data(self, data):
1146
 
        self.data = data
1147
 
        self._cache_data_xhtml(invalidate=True)
1148
 
 
 
687
    
1149
688
    def delete(self):
1150
689
        """Deletes the worksheet, provided it has no attempts on any exercises.
1151
 
 
 
690
        
1152
691
        Returns True if delete succeeded, or False if this worksheet has
1153
692
        attempts attached."""
1154
693
        for ws_ex in self.all_worksheet_exercises:
1155
694
            if ws_ex.saves.count() > 0 or ws_ex.attempts.count() > 0:
1156
695
                raise IntegrityError()
1157
 
 
 
696
        
1158
697
        self.remove_all_exercises()
1159
698
        Store.of(self).remove(self)
1160
 
 
 
699
        
1161
700
class WorksheetExercise(Storm):
1162
 
    """A link between a worksheet and one of its exercises.
1163
 
 
1164
 
    These may be marked optional, in which case the exercise does not count
1165
 
    for marking purposes. The sequence number is used to order the worksheet
1166
 
    ToC.
1167
 
    """
1168
 
 
1169
701
    __storm_table__ = "worksheet_exercise"
1170
 
 
 
702
    
1171
703
    id = Int(primary=True, name="ws_ex_id")
1172
704
 
1173
705
    worksheet_id = Int(name="worksheetid")
1177
709
    optional = Bool()
1178
710
    active = Bool()
1179
711
    seq_no = Int()
1180
 
 
 
712
    
1181
713
    saves = ReferenceSet(id, "ExerciseSave.ws_ex_id")
1182
714
    attempts = ReferenceSet(id, "ExerciseAttempt.ws_ex_id")
1183
715
 
1187
719
        return "<%s %s in %s>" % (type(self).__name__, self.exercise.name,
1188
720
                                  self.worksheet.identifier)
1189
721
 
1190
 
    def get_permissions(self, user, config):
1191
 
        return self.worksheet.get_permissions(user, config)
1192
 
 
 
722
    def get_permissions(self, user):
 
723
        return self.worksheet.get_permissions(user)
 
724
    
1193
725
 
1194
726
class ExerciseSave(Storm):
1195
 
    """A potential exercise solution submitted by a user for storage.
1196
 
 
1197
 
    This is not an actual tested attempt at an exercise, it's just a save of
1198
 
    the editing session.
1199
 
    """
1200
 
 
 
727
    """
 
728
    Represents a potential solution to an exercise that a user has submitted
 
729
    to the server for storage.
 
730
    A basic ExerciseSave is just the current saved text for this exercise for
 
731
    this user (doesn't count towards their attempts).
 
732
    ExerciseSave may be extended with additional semantics (such as
 
733
    ExerciseAttempt).
 
734
    """
1201
735
    __storm_table__ = "exercise_save"
1202
736
    __storm_primary__ = "ws_ex_id", "user_id"
1203
737
 
1213
747
 
1214
748
    def __repr__(self):
1215
749
        return "<%s %s by %s at %s>" % (type(self).__name__,
1216
 
            self.worksheet_exercise.exercise.name, self.user.login,
1217
 
            self.date.strftime("%c"))
 
750
            self.exercise.name, self.user.login, self.date.strftime("%c"))
1218
751
 
1219
752
class ExerciseAttempt(ExerciseSave):
1220
 
    """An attempt at solving an exercise.
1221
 
 
1222
 
    This is a special case of ExerciseSave, used when the user submits a
1223
 
    candidate solution. Like an ExerciseSave, it constitutes exercise solution
1224
 
    data.
1225
 
 
1226
 
    In addition, it contains information about the result of the submission:
1227
 
 
1228
 
     - complete - True if this submission was successful, rendering this
1229
 
                  exercise complete for this user in this worksheet.
1230
 
     - active   - True if this submission is "active" (usually true).
1231
 
                  Submissions may be de-activated by privileged users for
1232
 
                  special reasons, and then they won't count (either as a
1233
 
                  penalty or success), but will still be stored.
1234
 
    """
1235
 
 
 
753
    """
 
754
    An ExerciseAttempt is a special case of an ExerciseSave. Like an
 
755
    ExerciseSave, it constitutes exercise solution data that the user has
 
756
    submitted to the server for storage.
 
757
    In addition, it contains additional information about the submission.
 
758
    complete - True if this submission was successful, rendering this exercise
 
759
        complete for this user.
 
760
    active - True if this submission is "active" (usually true). Submissions
 
761
        may be de-activated by privileged users for special reasons, and then
 
762
        they won't count (either as a penalty or success), but will still be
 
763
        stored.
 
764
    """
1236
765
    __storm_table__ = "exercise_attempt"
1237
766
    __storm_primary__ = "ws_ex_id", "user_id", "date"
1238
767
 
1241
770
    text = Unicode(name="attempt")
1242
771
    complete = Bool()
1243
772
    active = Bool()
1244
 
 
1245
 
    def get_permissions(self, user, config):
 
773
    
 
774
    def get_permissions(self, user):
1246
775
        return set(['view']) if user is self.user else set()
1247
 
 
 
776
  
1248
777
class TestSuite(Storm):
1249
 
    """A container to group an exercise's test cases.
1250
 
 
1251
 
    The test suite contains some information on how to test. The function to
1252
 
    test, variables to set and stdin data are stored here.
1253
 
    """
1254
 
 
 
778
    """A Testsuite acts as a container for the test cases of an exercise."""
1255
779
    __storm_table__ = "test_suite"
1256
780
    __storm_primary__ = "exercise_id", "suiteid"
1257
 
 
 
781
    
1258
782
    suiteid = Int()
1259
783
    exercise_id = Unicode(name="exerciseid")
1260
784
    description = Unicode()
1264
788
    exercise = Reference(exercise_id, Exercise.id)
1265
789
    test_cases = ReferenceSet(suiteid, 'TestCase.suiteid', order_by="seq_no")
1266
790
    variables = ReferenceSet(suiteid, 'TestSuiteVar.suiteid', order_by='arg_no')
1267
 
 
 
791
    
1268
792
    def delete(self):
1269
793
        """Delete this suite, without asking questions."""
1270
 
        for variable in self.variables:
 
794
        for vaariable in self.variables:
1271
795
            variable.delete()
1272
796
        for test_case in self.test_cases:
1273
797
            test_case.delete()
1274
798
        Store.of(self).remove(self)
1275
799
 
1276
800
class TestCase(Storm):
1277
 
    """A container for actual tests (see TestCasePart), inside a test suite.
1278
 
 
1279
 
    It is the lowest level shown to students on their pass/fail status."""
1280
 
 
 
801
    """A TestCase is a member of a TestSuite.
 
802
    
 
803
    It contains the data necessary to check if an exercise is correct"""
1281
804
    __storm_table__ = "test_case"
1282
805
    __storm_primary__ = "testid", "suiteid"
1283
 
 
 
806
    
1284
807
    testid = Int()
1285
808
    suiteid = Int()
1286
809
    suite = Reference(suiteid, "TestSuite.suiteid")
1287
810
    passmsg = Unicode()
1288
811
    failmsg = Unicode()
1289
 
    test_default = Unicode() # Currently unused - only used for file matching.
 
812
    test_default = Unicode()
1290
813
    seq_no = Int()
1291
 
 
 
814
    
1292
815
    parts = ReferenceSet(testid, "TestCasePart.testid")
1293
 
 
 
816
    
1294
817
    __init__ = _kwarg_init
1295
 
 
 
818
    
1296
819
    def delete(self):
1297
820
        for part in self.parts:
1298
821
            part.delete()
1299
822
        Store.of(self).remove(self)
1300
823
 
1301
824
class TestSuiteVar(Storm):
1302
 
    """A variable used by an exercise test suite.
1303
 
 
1304
 
    This may represent a function argument or a normal variable.
1305
 
    """
1306
 
 
 
825
    """A container for the arguments of a Test Suite"""
1307
826
    __storm_table__ = "suite_variable"
1308
827
    __storm_primary__ = "varid"
1309
 
 
 
828
    
1310
829
    varid = Int()
1311
830
    suiteid = Int()
1312
831
    var_name = Unicode()
1313
832
    var_value = Unicode()
1314
833
    var_type = Unicode()
1315
834
    arg_no = Int()
1316
 
 
 
835
    
1317
836
    suite = Reference(suiteid, "TestSuite.suiteid")
1318
 
 
 
837
    
1319
838
    __init__ = _kwarg_init
1320
 
 
 
839
    
1321
840
    def delete(self):
1322
841
        Store.of(self).remove(self)
1323
 
 
 
842
    
1324
843
class TestCasePart(Storm):
1325
 
    """An actual piece of code to test an exercise solution."""
1326
 
 
 
844
    """A container for the test elements of a Test Case"""
1327
845
    __storm_table__ = "test_case_part"
1328
846
    __storm_primary__ = "partid"
1329
 
 
 
847
    
1330
848
    partid = Int()
1331
849
    testid = Int()
1332
 
 
 
850
    
1333
851
    part_type = Unicode()
1334
852
    test_type = Unicode()
1335
853
    data = Unicode()
1336
854
    filename = Unicode()
1337
 
 
 
855
    
1338
856
    test = Reference(testid, "TestCase.testid")
1339
 
 
 
857
    
1340
858
    __init__ = _kwarg_init
1341
 
 
 
859
    
1342
860
    def delete(self):
1343
861
        Store.of(self).remove(self)