~azzar1/unity/add-show-desktop-key

« back to all changes in this revision

Viewing changes to ivle/database.py

  • Committer: chadnickbok
  • Date: 2009-02-02 04:00:25 UTC
  • Revision ID: svn-v4:2b9c9e99-6f39-0410-b283-7f802c844ae2:trunk:1189
Adding the changes from my genshi branch into trunk.

Most apps now use the Genshi templating engine, in preparation
for future changes to dispatch

Show diffs side-by-side

added added

removed removed

Lines of Context:
17
17
 
18
18
# Author: Matt Giuca, Will Grant
19
19
 
20
 
"""Database utilities and content classes.
 
20
"""
 
21
Database Classes and Utilities for Storm ORM
21
22
 
22
23
This module provides all of the classes which map to database tables.
23
24
It also provides miscellaneous utility functions for database interaction.
24
25
"""
25
26
 
26
 
import hashlib
 
27
import md5
27
28
import datetime
28
 
import os
29
29
 
30
30
from storm.locals import create_database, Store, Int, Unicode, DateTime, \
31
31
                         Reference, ReferenceSet, Bool, Storm, Desc
32
 
from storm.expr import Select, Max
33
 
from storm.exceptions import NotOneError, IntegrityError
34
32
 
35
 
from ivle.worksheet.rst import rst
 
33
import ivle.conf
 
34
import ivle.caps
36
35
 
37
36
__all__ = ['get_store',
38
37
            'User',
39
38
            'Subject', 'Semester', 'Offering', 'Enrolment',
40
39
            'ProjectSet', 'Project', 'ProjectGroup', 'ProjectGroupMembership',
41
 
            'Assessed', 'ProjectSubmission', 'ProjectExtension',
42
40
            'Exercise', 'Worksheet', 'WorksheetExercise',
43
41
            'ExerciseSave', 'ExerciseAttempt',
44
 
            'TestCase', 'TestSuite', 'TestSuiteVar'
 
42
            'AlreadyEnrolledError'
45
43
        ]
46
44
 
47
45
def _kwarg_init(self, **kwargs):
51
49
                % (self.__class__.__name__, k))
52
50
        setattr(self, k, v)
53
51
 
54
 
def get_conn_string(config):
55
 
    """Create a Storm connection string to the IVLE database
56
 
 
57
 
    @param config: The IVLE configuration.
58
 
    """
59
 
 
60
 
    clusterstr = ''
61
 
    if config['database']['username']:
62
 
        clusterstr += config['database']['username']
63
 
        if config['database']['password']:
64
 
            clusterstr += ':' + config['database']['password']
65
 
        clusterstr += '@'
66
 
 
67
 
    host = config['database']['host'] or 'localhost'
68
 
    port = config['database']['port'] or 5432
69
 
 
70
 
    clusterstr += '%s:%d' % (host, port)
71
 
 
72
 
    return "postgres://%s/%s" % (clusterstr, config['database']['name'])
73
 
 
74
 
def get_store(config):
75
 
    """Create a Storm store connected to the IVLE database.
76
 
 
77
 
    @param config: The IVLE configuration.
78
 
    """
79
 
    return Store(create_database(get_conn_string(config)))
 
52
def get_conn_string():
 
53
    """
 
54
    Returns the Storm connection string, generated from the conf file.
 
55
    """
 
56
    return "postgres://%s:%s@%s:%d/%s" % (ivle.conf.db_user,
 
57
        ivle.conf.db_password, ivle.conf.db_host, ivle.conf.db_port,
 
58
        ivle.conf.db_dbname)
 
59
 
 
60
def get_store():
 
61
    """
 
62
    Open a database connection and transaction. Return a storm.store.Store
 
63
    instance connected to the configured IVLE database.
 
64
    """
 
65
    return Store(create_database(get_conn_string()))
80
66
 
81
67
# USERS #
82
68
 
83
69
class User(Storm):
84
 
    """An IVLE user account."""
 
70
    """
 
71
    Represents an IVLE user.
 
72
    """
85
73
    __storm_table__ = "login"
86
74
 
87
75
    id = Int(primary=True, name="loginid")
88
76
    login = Unicode()
89
77
    passhash = Unicode()
90
78
    state = Unicode()
91
 
    admin = Bool()
 
79
    rolenm = Unicode()
92
80
    unixid = Int()
93
81
    nick = Unicode()
94
82
    pass_exp = DateTime()
100
88
    studentid = Unicode()
101
89
    settings = Unicode()
102
90
 
 
91
    def _get_role(self):
 
92
        if self.rolenm is None:
 
93
            return None
 
94
        return ivle.caps.Role(self.rolenm)
 
95
    def _set_role(self, value):
 
96
        if not isinstance(value, ivle.caps.Role):
 
97
            raise TypeError("role must be an ivle.caps.Role")
 
98
        self.rolenm = unicode(value)
 
99
    role = property(_get_role, _set_role)
 
100
 
103
101
    __init__ = _kwarg_init
104
102
 
105
103
    def __repr__(self):
116
114
            return None
117
115
        return self.hash_password(password) == self.passhash
118
116
 
119
 
    @property
120
 
    def display_name(self):
121
 
        """Returns the "nice name" of the user or group."""
122
 
        return self.fullname
123
 
 
124
 
    @property
125
 
    def short_name(self):
126
 
        """Returns the database "identifier" name of the user or group."""
127
 
        return self.login
 
117
    def hasCap(self, capability):
 
118
        """Given a capability (which is a Role object), returns True if this
 
119
        User has that capability, False otherwise.
 
120
        """
 
121
        return self.role.hasCap(capability)
128
122
 
129
123
    @property
130
124
    def password_expired(self):
136
130
        fieldval = self.acct_exp
137
131
        return fieldval is not None and datetime.datetime.now() > fieldval
138
132
 
139
 
    @property
140
 
    def valid(self):
141
 
        return self.state == 'enabled' and not self.account_expired
142
 
 
143
133
    def _get_enrolments(self, justactive):
144
134
        return Store.of(self).find(Enrolment,
145
135
            Enrolment.user_id == self.id,
169
159
 
170
160
    # TODO: Invitations should be listed too?
171
161
    def get_groups(self, offering=None):
172
 
        """Get groups of which this user is a member.
173
 
 
174
 
        @param offering: An optional offering to restrict the search to.
175
 
        """
176
162
        preds = [
177
163
            ProjectGroupMembership.user_id == self.id,
178
164
            ProjectGroup.id == ProjectGroupMembership.project_group_id,
198
184
        '''A sanely ordered list of all of the user's enrolments.'''
199
185
        return self._get_enrolments(False) 
200
186
 
201
 
    def get_projects(self, offering=None, active_only=True):
202
 
        """Find projects that the user can submit.
203
 
 
204
 
        This will include projects for offerings in which the user is
205
 
        enrolled, as long as the project is not in a project set which has
206
 
        groups (ie. if maximum number of group members is 0).
207
 
 
208
 
        @param active_only: Whether to only search active offerings.
209
 
        @param offering: An optional offering to restrict the search to.
210
 
        """
211
 
        return Store.of(self).find(Project,
212
 
            Project.project_set_id == ProjectSet.id,
213
 
            ProjectSet.max_students_per_group == None,
214
 
            ProjectSet.offering_id == Offering.id,
215
 
            (offering is None) or (Offering.id == offering.id),
216
 
            Semester.id == Offering.semester_id,
217
 
            (not active_only) or (Semester.state == u'current'),
218
 
            Enrolment.offering_id == Offering.id,
219
 
            Enrolment.user_id == self.id,
220
 
            Enrolment.active == True)
221
 
 
222
187
    @staticmethod
223
188
    def hash_password(password):
224
 
        """Hash a password with MD5."""
225
 
        return hashlib.md5(password).hexdigest()
 
189
        return md5.md5(password).hexdigest()
226
190
 
227
191
    @classmethod
228
192
    def get_by_login(cls, store, login):
229
 
        """Find a user in a store by login name."""
 
193
        """
 
194
        Get the User from the db associated with a given store and
 
195
        login.
 
196
        """
230
197
        return store.find(cls, cls.login == unicode(login)).one()
231
198
 
232
 
    def get_permissions(self, user, config):
233
 
        """Determine privileges held by a user over this object.
234
 
 
235
 
        If the user requesting privileges is this user or an admin,
236
 
        they may do everything. Otherwise they may do nothing.
237
 
        """
238
 
        if user and user.admin or user is self:
239
 
            return set(['view_public', 'view', 'edit', 'submit_project'])
240
 
        else:
241
 
            return set(['view_public'])
242
 
 
243
199
# SUBJECTS AND ENROLMENTS #
244
200
 
245
201
class Subject(Storm):
246
 
    """A subject (or course) which is run in some semesters."""
247
 
 
248
202
    __storm_table__ = "subject"
249
203
 
250
204
    id = Int(primary=True, name="subjectid")
251
205
    code = Unicode(name="subj_code")
252
206
    name = Unicode(name="subj_name")
253
207
    short_name = Unicode(name="subj_short_name")
 
208
    url = Unicode()
254
209
 
255
210
    offerings = ReferenceSet(id, 'Offering.subject_id')
256
211
 
259
214
    def __repr__(self):
260
215
        return "<%s '%s'>" % (type(self).__name__, self.short_name)
261
216
 
262
 
    def get_permissions(self, user, config):
263
 
        """Determine privileges held by a user over this object.
264
 
 
265
 
        If the user requesting privileges is an admin, they may edit.
266
 
        Otherwise they may only read.
267
 
        """
268
 
        perms = set()
269
 
        if user is not None:
270
 
            perms.add('view')
271
 
            if user.admin:
272
 
                perms.add('edit')
273
 
        return perms
274
 
 
275
 
    def active_offerings(self):
276
 
        """Find active offerings for this subject.
277
 
 
278
 
        Return a sequence of currently active offerings for this subject
279
 
        (offerings whose semester.state is "current"). There should be 0 or 1
280
 
        elements in this sequence, but it's possible there are more.
281
 
        """
282
 
        return self.offerings.find(Offering.semester_id == Semester.id,
283
 
                                   Semester.state == u'current')
284
 
 
285
 
    def offering_for_semester(self, year, semester):
286
 
        """Get the offering for the given year/semester, or None.
287
 
 
288
 
        @param year: A string representation of the year.
289
 
        @param semester: A string representation of the semester.
290
 
        """
291
 
        return self.offerings.find(Offering.semester_id == Semester.id,
292
 
                               Semester.year == unicode(year),
293
 
                               Semester.semester == unicode(semester)).one()
294
 
 
295
217
class Semester(Storm):
296
 
    """A semester in which subjects can be run."""
297
 
 
298
218
    __storm_table__ = "semester"
299
219
 
300
220
    id = Int(primary=True, name="semesterid")
301
221
    year = Unicode()
302
222
    semester = Unicode()
303
 
    state = Unicode()
 
223
    active = Bool()
304
224
 
305
225
    offerings = ReferenceSet(id, 'Offering.semester_id')
306
 
    enrolments = ReferenceSet(id,
307
 
                              'Offering.semester_id',
308
 
                              'Offering.id',
309
 
                              'Enrolment.offering_id')
310
226
 
311
227
    __init__ = _kwarg_init
312
228
 
314
230
        return "<%s %s/%s>" % (type(self).__name__, self.year, self.semester)
315
231
 
316
232
class Offering(Storm):
317
 
    """An offering of a subject in a particular semester."""
318
 
 
319
233
    __storm_table__ = "offering"
320
234
 
321
235
    id = Int(primary=True, name="offeringid")
323
237
    subject = Reference(subject_id, Subject.id)
324
238
    semester_id = Int(name="semesterid")
325
239
    semester = Reference(semester_id, Semester.id)
326
 
    description = Unicode()
327
 
    url = Unicode()
328
240
    groups_student_permissions = Unicode()
329
241
 
330
242
    enrolments = ReferenceSet(id, 'Enrolment.offering_id')
333
245
                           'Enrolment.user_id',
334
246
                           'User.id')
335
247
    project_sets = ReferenceSet(id, 'ProjectSet.offering_id')
336
 
    projects = ReferenceSet(id,
337
 
                            'ProjectSet.offering_id',
338
 
                            'ProjectSet.id',
339
 
                            'Project.project_set_id')
340
 
 
341
 
    worksheets = ReferenceSet(id, 
342
 
        'Worksheet.offering_id', 
343
 
        order_by="seq_no"
344
 
    )
345
248
 
346
249
    __init__ = _kwarg_init
347
250
 
349
252
        return "<%s %r in %r>" % (type(self).__name__, self.subject,
350
253
                                  self.semester)
351
254
 
352
 
    def enrol(self, user, role=u'student'):
353
 
        """Enrol a user in this offering.
354
 
 
355
 
        Enrolments handle both the staff and student cases. The role controls
356
 
        the privileges granted by this enrolment.
357
 
        """
358
 
        enrolment = Store.of(self).find(Enrolment,
359
 
                               Enrolment.user_id == user.id,
360
 
                               Enrolment.offering_id == self.id).one()
361
 
 
362
 
        if enrolment is None:
363
 
            enrolment = Enrolment(user=user, offering=self)
364
 
            self.enrolments.add(enrolment)
365
 
 
366
 
        enrolment.active = True
367
 
        enrolment.role = role
368
 
 
369
 
    def unenrol(self, user):
370
 
        '''Unenrol a user from this offering.'''
371
 
        enrolment = Store.of(self).find(Enrolment,
372
 
                               Enrolment.user_id == user.id,
373
 
                               Enrolment.offering_id == self.id).one()
374
 
        Store.of(enrolment).remove(enrolment)
375
 
 
376
 
    def get_permissions(self, user, config):
377
 
        perms = set()
378
 
        if user is not None:
379
 
            enrolment = self.get_enrolment(user)
380
 
            if enrolment or user.admin:
381
 
                perms.add('view')
382
 
            if enrolment and enrolment.role == u'tutor':
383
 
                perms.add('view_project_submissions')
384
 
                # Site-specific policy on the role of tutors
385
 
                if config['policy']['tutors_can_enrol_students']:
386
 
                    perms.add('enrol')
387
 
                    perms.add('enrol_student')
388
 
                if config['policy']['tutors_can_edit_worksheets']:
389
 
                    perms.add('edit_worksheets')
390
 
                if config['policy']['tutors_can_admin_groups']:
391
 
                    perms.add('admin_groups')
392
 
            if (enrolment and enrolment.role in (u'lecturer')) or user.admin:
393
 
                perms.add('view_project_submissions')
394
 
                perms.add('admin_groups')
395
 
                perms.add('edit_worksheets')
396
 
                perms.add('edit')           # Can edit projects & details
397
 
                perms.add('enrol')          # Can see enrolment screen at all
398
 
                perms.add('enrol_student')  # Can enrol students
399
 
                perms.add('enrol_tutor')    # Can enrol tutors
400
 
            if user.admin:
401
 
                perms.add('enrol_lecturer') # Can enrol lecturers
402
 
        return perms
403
 
 
404
 
    def get_enrolment(self, user):
405
 
        """Find the user's enrolment in this offering."""
406
 
        try:
407
 
            enrolment = self.enrolments.find(user=user).one()
408
 
        except NotOneError:
409
 
            enrolment = None
410
 
 
411
 
        return enrolment
412
 
 
413
 
    def get_members_by_role(self, role):
414
 
        return Store.of(self).find(User,
415
 
                Enrolment.user_id == User.id,
416
 
                Enrolment.offering_id == self.id,
417
 
                Enrolment.role == role
418
 
                ).order_by(User.login)
419
 
 
420
 
    @property
421
 
    def students(self):
422
 
        return self.get_members_by_role(u'student')
423
 
 
424
 
    def get_open_projects_for_user(self, user):
425
 
        """Find all projects currently open to submissions by a user."""
426
 
        # XXX: Respect extensions.
427
 
        return self.projects.find(Project.deadline > datetime.datetime.now())
428
 
 
429
 
    def clone_worksheets(self, source):
430
 
        """Clone all worksheets from the specified source to this offering."""
431
 
        import ivle.worksheet.utils
432
 
        for worksheet in source.worksheets:
433
 
            newws = Worksheet()
434
 
            newws.seq_no = worksheet.seq_no
435
 
            newws.identifier = worksheet.identifier
436
 
            newws.name = worksheet.name
437
 
            newws.assessable = worksheet.assessable
438
 
            newws.data = worksheet.data
439
 
            newws.format = worksheet.format
440
 
            newws.offering = self
441
 
            Store.of(self).add(newws)
442
 
            ivle.worksheet.utils.update_exerciselist(newws)
443
 
 
 
255
    def enrol(self, user):
 
256
        '''Enrol a user in this offering.'''
 
257
        # We'll get a horrible database constraint violation error if we try
 
258
        # to add a second enrolment.
 
259
        if Store.of(self).find(Enrolment,
 
260
                               Enrolment.user_id == user.id,
 
261
                               Enrolment.offering_id == self.id).count() == 1:
 
262
            raise AlreadyEnrolledError()
 
263
 
 
264
        e = Enrolment(user=user, offering=self, active=True)
 
265
        self.enrolments.add(e)
444
266
 
445
267
class Enrolment(Storm):
446
 
    """An enrolment of a user in an offering.
447
 
 
448
 
    This represents the roles of both staff and students.
449
 
    """
450
 
 
451
268
    __storm_table__ = "enrolment"
452
269
    __storm_primary__ = "user_id", "offering_id"
453
270
 
455
272
    user = Reference(user_id, User.id)
456
273
    offering_id = Int(name="offeringid")
457
274
    offering = Reference(offering_id, Offering.id)
458
 
    role = Unicode()
459
275
    notes = Unicode()
460
276
    active = Bool()
461
277
 
473
289
        return "<%s %r in %r>" % (type(self).__name__, self.user,
474
290
                                  self.offering)
475
291
 
476
 
    def get_permissions(self, user, config):
477
 
        # A user can edit any enrolment that they could have created.
478
 
        perms = set()
479
 
        if ('enrol_' + str(self.role)) in self.offering.get_permissions(
480
 
            user, config):
481
 
            perms.add('edit')
482
 
        return perms
483
 
 
484
 
    def delete(self):
485
 
        """Delete this enrolment."""
486
 
        Store.of(self).remove(self)
487
 
 
 
292
class AlreadyEnrolledError(Exception):
 
293
    pass
488
294
 
489
295
# PROJECTS #
490
296
 
491
297
class ProjectSet(Storm):
492
 
    """A set of projects that share common groups.
493
 
 
494
 
    Each student project group is attached to a project set. The group is
495
 
    valid for all projects in the group's set.
496
 
    """
497
 
 
498
298
    __storm_table__ = "project_set"
499
299
 
500
300
    id = Int(name="projectsetid", primary=True)
511
311
        return "<%s %d in %r>" % (type(self).__name__, self.id,
512
312
                                  self.offering)
513
313
 
514
 
    def get_permissions(self, user, config):
515
 
        return self.offering.get_permissions(user, config)
516
 
 
517
 
    def get_groups_for_user(self, user):
518
 
        """List all groups in this offering of which the user is a member."""
519
 
        assert self.is_group
520
 
        return Store.of(self).find(
521
 
            ProjectGroup,
522
 
            ProjectGroupMembership.user_id == user.id,
523
 
            ProjectGroupMembership.project_group_id == ProjectGroup.id,
524
 
            ProjectGroup.project_set_id == self.id)
525
 
 
526
 
    def get_submission_principal(self, user):
527
 
        """Get the principal on behalf of which the user can submit.
528
 
 
529
 
        If this is a solo project set, the given user is returned. If
530
 
        the user is a member of exactly one group, all the group is
531
 
        returned. Otherwise, None is returned.
532
 
        """
533
 
        if self.is_group:
534
 
            groups = self.get_groups_for_user(user)
535
 
            if groups.count() == 1:
536
 
                return groups.one()
537
 
            else:
538
 
                return None
539
 
        else:
540
 
            return user
541
 
 
542
 
    @property
543
 
    def is_group(self):
544
 
        return self.max_students_per_group is not None
545
 
 
546
 
    @property
547
 
    def assigned(self):
548
 
        """Get the entities (groups or users) assigned to submit this project.
549
 
 
550
 
        This will be a Storm ResultSet.
551
 
        """
552
 
        #If its a solo project, return everyone in offering
553
 
        if self.is_group:
554
 
            return self.project_groups
555
 
        else:
556
 
            return self.offering.students
557
 
 
558
 
class DeadlinePassed(Exception):
559
 
    """An exception indicating that a project cannot be submitted because the
560
 
    deadline has passed."""
561
 
    def __init__(self):
562
 
        pass
563
 
    def __str__(self):
564
 
        return "The project deadline has passed"
565
 
 
566
314
class Project(Storm):
567
 
    """A student project for which submissions can be made."""
568
 
 
569
315
    __storm_table__ = "project"
570
316
 
571
317
    id = Int(name="projectid", primary=True)
572
 
    name = Unicode()
573
 
    short_name = Unicode()
574
318
    synopsis = Unicode()
575
319
    url = Unicode()
576
320
    project_set_id = Int(name="projectsetid")
577
321
    project_set = Reference(project_set_id, ProjectSet.id)
578
322
    deadline = DateTime()
579
323
 
580
 
    assesseds = ReferenceSet(id, 'Assessed.project_id')
581
 
    submissions = ReferenceSet(id,
582
 
                               'Assessed.project_id',
583
 
                               'Assessed.id',
584
 
                               'ProjectSubmission.assessed_id')
585
 
 
586
324
    __init__ = _kwarg_init
587
325
 
588
326
    def __repr__(self):
589
 
        return "<%s '%s' in %r>" % (type(self).__name__, self.short_name,
 
327
        return "<%s '%s' in %r>" % (type(self).__name__, self.synopsis,
590
328
                                  self.project_set.offering)
591
329
 
592
 
    def can_submit(self, principal, user):
593
 
        return (self in principal.get_projects() and
594
 
                not self.has_deadline_passed(user))
595
 
 
596
 
    def submit(self, principal, path, revision, who):
597
 
        """Submit a Subversion path and revision to a project.
598
 
 
599
 
        @param principal: The owner of the Subversion repository, and the
600
 
                          entity on behalf of whom the submission is being made
601
 
        @param path: A path within that repository to submit.
602
 
        @param revision: The revision of that path to submit.
603
 
        @param who: The user who is actually making the submission.
604
 
        """
605
 
 
606
 
        if not self.can_submit(principal, who):
607
 
            raise DeadlinePassed()
608
 
 
609
 
        a = Assessed.get(Store.of(self), principal, self)
610
 
        ps = ProjectSubmission()
611
 
        # Raise SubmissionError if the path is illegal
612
 
        ps.path = ProjectSubmission.test_and_normalise_path(path)
613
 
        ps.revision = revision
614
 
        ps.date_submitted = datetime.datetime.now()
615
 
        ps.assessed = a
616
 
        ps.submitter = who
617
 
 
618
 
        return ps
619
 
 
620
 
    def get_permissions(self, user, config):
621
 
        return self.project_set.offering.get_permissions(user, config)
622
 
 
623
 
    @property
624
 
    def latest_submissions(self):
625
 
        """Return the latest submission for each Assessed."""
626
 
        return Store.of(self).find(ProjectSubmission,
627
 
            Assessed.project_id == self.id,
628
 
            ProjectSubmission.assessed_id == Assessed.id,
629
 
            ProjectSubmission.date_submitted == Select(
630
 
                    Max(ProjectSubmission.date_submitted),
631
 
                    ProjectSubmission.assessed_id == Assessed.id,
632
 
                    tables=ProjectSubmission
633
 
            )
634
 
        )
635
 
 
636
 
    def has_deadline_passed(self, user):
637
 
        """Check whether the deadline has passed."""
638
 
        # XXX: Need to respect extensions.
639
 
        return self.deadline < datetime.datetime.now()
640
 
 
641
 
    def get_submissions_for_principal(self, principal):
642
 
        """Fetch a ResultSet of all submissions by a particular principal."""
643
 
        assessed = Assessed.get(Store.of(self), principal, self)
644
 
        if assessed is None:
645
 
            return
646
 
        return assessed.submissions
647
 
 
648
 
 
649
 
 
650
330
class ProjectGroup(Storm):
651
 
    """A group of students working together on a project."""
652
 
 
653
331
    __storm_table__ = "project_group"
654
332
 
655
333
    id = Int(name="groupid", primary=True)
672
350
        return "<%s %s in %r>" % (type(self).__name__, self.name,
673
351
                                  self.project_set.offering)
674
352
 
675
 
    @property
676
 
    def display_name(self):
677
 
        """Returns the "nice name" of the user or group."""
678
 
        return self.nick
679
 
 
680
 
    @property
681
 
    def short_name(self):
682
 
        """Returns the database "identifier" name of the user or group."""
683
 
        return self.name
684
 
 
685
 
    def get_projects(self, offering=None, active_only=True):
686
 
        '''Find projects that the group can submit.
687
 
 
688
 
        This will include projects in the project set which owns this group,
689
 
        unless the project set disallows groups (in which case none will be
690
 
        returned).
691
 
 
692
 
        @param active_only: Whether to only search active offerings.
693
 
        @param offering: An optional offering to restrict the search to.
694
 
        '''
695
 
        return Store.of(self).find(Project,
696
 
            Project.project_set_id == ProjectSet.id,
697
 
            ProjectSet.id == self.project_set.id,
698
 
            ProjectSet.max_students_per_group != None,
699
 
            ProjectSet.offering_id == Offering.id,
700
 
            (offering is None) or (Offering.id == offering.id),
701
 
            Semester.id == Offering.semester_id,
702
 
            (not active_only) or (Semester.state == u'current'))
703
 
 
704
 
 
705
 
    def get_permissions(self, user, config):
706
 
        if user.admin or user in self.members:
707
 
            return set(['submit_project'])
708
 
        else:
709
 
            return set()
710
 
 
711
353
class ProjectGroupMembership(Storm):
712
 
    """A student's membership in a project group."""
713
 
 
714
354
    __storm_table__ = "group_member"
715
355
    __storm_primary__ = "user_id", "project_group_id"
716
356
 
725
365
        return "<%s %r in %r>" % (type(self).__name__, self.user,
726
366
                                  self.project_group)
727
367
 
728
 
class Assessed(Storm):
729
 
    """A composite of a user or group combined with a project.
730
 
 
731
 
    Each project submission and extension refers to an Assessed. It is the
732
 
    sole specifier of the repository and project.
733
 
    """
734
 
 
735
 
    __storm_table__ = "assessed"
736
 
 
737
 
    id = Int(name="assessedid", primary=True)
738
 
    user_id = Int(name="loginid")
739
 
    user = Reference(user_id, User.id)
740
 
    project_group_id = Int(name="groupid")
741
 
    project_group = Reference(project_group_id, ProjectGroup.id)
742
 
 
743
 
    project_id = Int(name="projectid")
744
 
    project = Reference(project_id, Project.id)
745
 
 
746
 
    extensions = ReferenceSet(id, 'ProjectExtension.assessed_id')
747
 
    submissions = ReferenceSet(
748
 
        id, 'ProjectSubmission.assessed_id', order_by='date_submitted')
749
 
 
750
 
    def __repr__(self):
751
 
        return "<%s %r in %r>" % (type(self).__name__,
752
 
            self.user or self.project_group, self.project)
753
 
 
754
 
    @property
755
 
    def is_group(self):
756
 
        """True if the Assessed is a group, False if it is a user."""
757
 
        return self.project_group is not None
758
 
 
759
 
    @property
760
 
    def principal(self):
761
 
        return self.project_group or self.user
762
 
 
763
 
    @property
764
 
    def checkout_location(self):
765
 
        """Returns the location of the Subversion workspace for this piece of
766
 
        assessment, relative to each group member's home directory."""
767
 
        subjectname = self.project.project_set.offering.subject.short_name
768
 
        if self.is_group:
769
 
            checkout_dir_name = self.principal.short_name
770
 
        else:
771
 
            checkout_dir_name = "mywork"
772
 
        return subjectname + "/" + checkout_dir_name
773
 
 
774
 
    @classmethod
775
 
    def get(cls, store, principal, project):
776
 
        """Find or create an Assessed for the given user or group and project.
777
 
 
778
 
        @param principal: The user or group.
779
 
        @param project: The project.
780
 
        """
781
 
        t = type(principal)
782
 
        if t not in (User, ProjectGroup):
783
 
            raise AssertionError('principal must be User or ProjectGroup')
784
 
 
785
 
        a = store.find(cls,
786
 
            (t is User) or (cls.project_group_id == principal.id),
787
 
            (t is ProjectGroup) or (cls.user_id == principal.id),
788
 
            cls.project_id == project.id).one()
789
 
 
790
 
        if a is None:
791
 
            a = cls()
792
 
            if t is User:
793
 
                a.user = principal
794
 
            else:
795
 
                a.project_group = principal
796
 
            a.project = project
797
 
            store.add(a)
798
 
 
799
 
        return a
800
 
 
801
 
 
802
 
class ProjectExtension(Storm):
803
 
    """An extension granted to a user or group on a particular project.
804
 
 
805
 
    The user or group and project are specified by the Assessed.
806
 
    """
807
 
 
808
 
    __storm_table__ = "project_extension"
809
 
 
810
 
    id = Int(name="extensionid", primary=True)
811
 
    assessed_id = Int(name="assessedid")
812
 
    assessed = Reference(assessed_id, Assessed.id)
813
 
    deadline = DateTime()
814
 
    approver_id = Int(name="approver")
815
 
    approver = Reference(approver_id, User.id)
816
 
    notes = Unicode()
817
 
 
818
 
class SubmissionError(Exception):
819
 
    """Denotes a validation error during submission."""
820
 
    pass
821
 
 
822
 
class ProjectSubmission(Storm):
823
 
    """A submission from a user or group repository to a particular project.
824
 
 
825
 
    The content of a submission is a single path and revision inside a
826
 
    repository. The repository is that owned by the submission's user and
827
 
    group, while the path and revision are explicit.
828
 
 
829
 
    The user or group and project are specified by the Assessed.
830
 
    """
831
 
 
832
 
    __storm_table__ = "project_submission"
833
 
 
834
 
    id = Int(name="submissionid", primary=True)
835
 
    assessed_id = Int(name="assessedid")
836
 
    assessed = Reference(assessed_id, Assessed.id)
837
 
    path = Unicode()
838
 
    revision = Int()
839
 
    submitter_id = Int(name="submitter")
840
 
    submitter = Reference(submitter_id, User.id)
841
 
    date_submitted = DateTime()
842
 
 
843
 
    def get_verify_url(self, user):
844
 
        """Get the URL for verifying this submission, within the account of
845
 
        the given user."""
846
 
        # If this is a solo project, then self.path will be prefixed with the
847
 
        # subject name. Remove the first path segment.
848
 
        submitpath = self.path[1:] if self.path[:1] == '/' else self.path
849
 
        if not self.assessed.is_group:
850
 
            if '/' in submitpath:
851
 
                submitpath = submitpath.split('/', 1)[1]
852
 
            else:
853
 
                submitpath = ''
854
 
        return "/files/%s/%s/%s?r=%d" % (user.login,
855
 
            self.assessed.checkout_location, submitpath, self.revision)
856
 
 
857
 
    @staticmethod
858
 
    def test_and_normalise_path(path):
859
 
        """Test that path is valid, and normalise it. This prevents possible
860
 
        injections using malicious paths.
861
 
        Returns the updated path, if successful.
862
 
        Raises SubmissionError if invalid.
863
 
        """
864
 
        # Ensure the path is absolute to prevent being tacked onto working
865
 
        # directories.
866
 
        # Prevent '\n' because it will break all sorts of things.
867
 
        # Prevent '[' and ']' because they can be used to inject into the
868
 
        # svn.conf.
869
 
        # Normalise to avoid resulting in ".." path segments.
870
 
        if not os.path.isabs(path):
871
 
            raise SubmissionError("Path is not absolute")
872
 
        if any(c in path for c in "\n[]"):
873
 
            raise SubmissionError("Path must not contain '\\n', '[' or ']'")
874
 
        return os.path.normpath(path)
875
 
 
876
368
# WORKSHEETS AND EXERCISES #
877
369
 
878
370
class Exercise(Storm):
879
 
    """An exercise for students to complete in a worksheet.
880
 
 
881
 
    An exercise may be present in any number of worksheets.
882
 
    """
883
 
 
884
 
    __storm_table__ = "exercise"
885
 
    id = Unicode(primary=True, name="identifier")
886
 
    name = Unicode()
887
 
    description = Unicode()
888
 
    partial = Unicode()
889
 
    solution = Unicode()
890
 
    include = Unicode()
891
 
    num_rows = Int()
892
 
 
893
 
    worksheet_exercises =  ReferenceSet(id,
894
 
        'WorksheetExercise.exercise_id')
 
371
    # Note: Table "problem" is called "Exercise" in the Object layer, since
 
372
    # it's called that everywhere else.
 
373
    __storm_table__ = "problem"
 
374
 
 
375
    id = Int(primary=True, name="problemid")
 
376
    name = Unicode(name="identifier")
 
377
    spec = Unicode()
895
378
 
896
379
    worksheets = ReferenceSet(id,
897
380
        'WorksheetExercise.exercise_id',
899
382
        'Worksheet.id'
900
383
    )
901
384
 
902
 
    test_suites = ReferenceSet(id, 
903
 
        'TestSuite.exercise_id',
904
 
        order_by='seq_no')
905
 
 
906
385
    __init__ = _kwarg_init
907
386
 
908
387
    def __repr__(self):
909
388
        return "<%s %s>" % (type(self).__name__, self.name)
910
389
 
911
 
    def get_permissions(self, user, config):
912
 
        return self.global_permissions(user, config)
913
 
 
914
 
    @staticmethod
915
 
    def global_permissions(user, config):
916
 
        """Gets the set of permissions this user has over *all* exercises.
917
 
        This is used to determine who may view the exercises list, and create
918
 
        new exercises."""
919
 
        perms = set()
920
 
        roles = set()
921
 
        if user is not None:
922
 
            if user.admin:
923
 
                perms.add('edit')
924
 
                perms.add('view')
925
 
            elif u'lecturer' in set((e.role for e in user.active_enrolments)):
926
 
                perms.add('edit')
927
 
                perms.add('view')
928
 
            elif (config['policy']['tutors_can_edit_worksheets']
929
 
            and u'tutor' in set((e.role for e in user.active_enrolments))):
930
 
                # Site-specific policy on the role of tutors
931
 
                perms.add('edit')
932
 
                perms.add('view')
933
 
 
934
 
        return perms
935
 
 
936
 
    def get_description(self):
937
 
        """Return the description interpreted as reStructuredText."""
938
 
        return rst(self.description)
939
 
 
940
 
    def delete(self):
941
 
        """Deletes the exercise, providing it has no associated worksheets."""
942
 
        if (self.worksheet_exercises.count() > 0):
943
 
            raise IntegrityError()
944
 
        for suite in self.test_suites:
945
 
            suite.delete()
946
 
        Store.of(self).remove(self)
 
390
    @classmethod
 
391
    def get_by_name(cls, store, name):
 
392
        """
 
393
        Get the Exercise from the db associated with a given store and name.
 
394
        If the exercise is not in the database, creates it and inserts it
 
395
        automatically.
 
396
        """
 
397
        ex = store.find(cls, cls.name == unicode(name)).one()
 
398
        if ex is not None:
 
399
            return ex
 
400
        ex = Exercise(name=unicode(name))
 
401
        store.add(ex)
 
402
        store.commit()
 
403
        return ex
947
404
 
948
405
class Worksheet(Storm):
949
 
    """A worksheet with exercises for students to complete.
950
 
 
951
 
    Worksheets are owned by offerings.
952
 
    """
953
 
 
954
406
    __storm_table__ = "worksheet"
955
407
 
956
408
    id = Int(primary=True, name="worksheetid")
957
 
    offering_id = Int(name="offeringid")
958
 
    identifier = Unicode()
959
 
    name = Unicode()
 
409
    # XXX subject is not linked to a Subject object. This is a property of
 
410
    # the database, and will be refactored.
 
411
    subject = Unicode()
 
412
    name = Unicode(name="identifier")
960
413
    assessable = Bool()
961
 
    data = Unicode()
962
 
    seq_no = Int()
963
 
    format = Unicode()
964
 
 
965
 
    attempts = ReferenceSet(id, "ExerciseAttempt.worksheetid")
966
 
    offering = Reference(offering_id, 'Offering.id')
967
 
 
968
 
    all_worksheet_exercises = ReferenceSet(id,
 
414
    mtime = DateTime()
 
415
 
 
416
    exercises = ReferenceSet(id,
 
417
        'WorksheetExercise.worksheet_id',
 
418
        'WorksheetExercise.exercise_id',
 
419
        Exercise.id)
 
420
    # Use worksheet_exercises to get access to the WorksheetExercise objects
 
421
    # binding worksheets to exercises. This is required to access the
 
422
    # "optional" field.
 
423
    worksheet_exercises = ReferenceSet(id,
969
424
        'WorksheetExercise.worksheet_id')
970
425
 
971
 
    # Use worksheet_exercises to get access to the *active* WorksheetExercise
972
 
    # objects binding worksheets to exercises. This is required to access the
973
 
    # "optional" field.
974
 
 
975
 
    @property
976
 
    def worksheet_exercises(self):
977
 
        return self.all_worksheet_exercises.find(active=True)
978
 
 
979
426
    __init__ = _kwarg_init
980
427
 
981
428
    def __repr__(self):
982
429
        return "<%s %s>" % (type(self).__name__, self.name)
983
430
 
984
 
    def remove_all_exercises(self):
985
 
        """Remove all exercises from this worksheet.
 
431
    # XXX Refactor this - make it an instance method of Subject rather than a
 
432
    # class method of Worksheet. Can't do that now because Subject isn't
 
433
    # linked referentially to the Worksheet.
 
434
    @classmethod
 
435
    def get_by_name(cls, store, subjectname, worksheetname):
 
436
        """
 
437
        Get the Worksheet from the db associated with a given store, subject
 
438
        name and worksheet name.
 
439
        """
 
440
        return store.find(cls, cls.subject == unicode(subjectname),
 
441
            cls.name == unicode(worksheetname)).one()
986
442
 
 
443
    def remove_all_exercises(self, store):
 
444
        """
 
445
        Remove all exercises from this worksheet.
987
446
        This does not delete the exercises themselves. It just removes them
988
447
        from the worksheet.
989
448
        """
990
 
        store = Store.of(self)
991
 
        for ws_ex in self.all_worksheet_exercises:
992
 
            if ws_ex.saves.count() > 0 or ws_ex.attempts.count() > 0:
993
 
                raise IntegrityError()
994
449
        store.find(WorksheetExercise,
995
450
            WorksheetExercise.worksheet == self).remove()
996
451
 
997
 
    def get_permissions(self, user, config):
998
 
        # Almost the same permissions as for the offering itself
999
 
        perms = self.offering.get_permissions(user, config)
1000
 
        # However, "edit" permission is derived from the "edit_worksheets"
1001
 
        # permission of the offering
1002
 
        if 'edit_worksheets' in perms:
1003
 
            perms.add('edit')
1004
 
        else:
1005
 
            perms.discard('edit')
1006
 
        return perms
1007
 
 
1008
 
    def get_xml(self):
1009
 
        """Returns the xml of this worksheet, converts from rst if required."""
1010
 
        if self.format == u'rst':
1011
 
            ws_xml = rst(self.data)
1012
 
            return ws_xml
1013
 
        else:
1014
 
            return self.data
1015
 
 
1016
 
    def delete(self):
1017
 
        """Deletes the worksheet, provided it has no attempts on any exercises.
1018
 
 
1019
 
        Returns True if delete succeeded, or False if this worksheet has
1020
 
        attempts attached."""
1021
 
        for ws_ex in self.all_worksheet_exercises:
1022
 
            if ws_ex.saves.count() > 0 or ws_ex.attempts.count() > 0:
1023
 
                raise IntegrityError()
1024
 
 
1025
 
        self.remove_all_exercises()
1026
 
        Store.of(self).remove(self)
1027
 
 
1028
452
class WorksheetExercise(Storm):
1029
 
    """A link between a worksheet and one of its exercises.
1030
 
 
1031
 
    These may be marked optional, in which case the exercise does not count
1032
 
    for marking purposes. The sequence number is used to order the worksheet
1033
 
    ToC.
1034
 
    """
1035
 
 
1036
 
    __storm_table__ = "worksheet_exercise"
1037
 
 
1038
 
    id = Int(primary=True, name="ws_ex_id")
 
453
    __storm_table__ = "worksheet_problem"
 
454
    __storm_primary__ = "worksheet_id", "exercise_id"
1039
455
 
1040
456
    worksheet_id = Int(name="worksheetid")
1041
457
    worksheet = Reference(worksheet_id, Worksheet.id)
1042
 
    exercise_id = Unicode(name="exerciseid")
 
458
    exercise_id = Int(name="problemid")
1043
459
    exercise = Reference(exercise_id, Exercise.id)
1044
460
    optional = Bool()
1045
 
    active = Bool()
1046
 
    seq_no = Int()
1047
 
 
1048
 
    saves = ReferenceSet(id, "ExerciseSave.ws_ex_id")
1049
 
    attempts = ReferenceSet(id, "ExerciseAttempt.ws_ex_id")
1050
461
 
1051
462
    __init__ = _kwarg_init
1052
463
 
1053
464
    def __repr__(self):
1054
465
        return "<%s %s in %s>" % (type(self).__name__, self.exercise.name,
1055
 
                                  self.worksheet.identifier)
1056
 
 
1057
 
    def get_permissions(self, user, config):
1058
 
        return self.worksheet.get_permissions(user, config)
1059
 
 
 
466
                                  self.worksheet.name)
1060
467
 
1061
468
class ExerciseSave(Storm):
1062
 
    """A potential exercise solution submitted by a user for storage.
1063
 
 
1064
 
    This is not an actual tested attempt at an exercise, it's just a save of
1065
 
    the editing session.
1066
 
    """
1067
 
 
1068
 
    __storm_table__ = "exercise_save"
1069
 
    __storm_primary__ = "ws_ex_id", "user_id"
1070
 
 
1071
 
    ws_ex_id = Int(name="ws_ex_id")
1072
 
    worksheet_exercise = Reference(ws_ex_id, "WorksheetExercise.id")
1073
 
 
 
469
    """
 
470
    Represents a potential solution to an exercise that a user has submitted
 
471
    to the server for storage.
 
472
    A basic ExerciseSave is just the current saved text for this exercise for
 
473
    this user (doesn't count towards their attempts).
 
474
    ExerciseSave may be extended with additional semantics (such as
 
475
    ExerciseAttempt).
 
476
    """
 
477
    __storm_table__ = "problem_save"
 
478
    __storm_primary__ = "exercise_id", "user_id", "date"
 
479
 
 
480
    exercise_id = Int(name="problemid")
 
481
    exercise = Reference(exercise_id, Exercise.id)
1074
482
    user_id = Int(name="loginid")
1075
483
    user = Reference(user_id, User.id)
1076
484
    date = DateTime()
1083
491
            self.exercise.name, self.user.login, self.date.strftime("%c"))
1084
492
 
1085
493
class ExerciseAttempt(ExerciseSave):
1086
 
    """An attempt at solving an exercise.
1087
 
 
1088
 
    This is a special case of ExerciseSave, used when the user submits a
1089
 
    candidate solution. Like an ExerciseSave, it constitutes exercise solution
1090
 
    data.
1091
 
 
1092
 
    In addition, it contains information about the result of the submission:
1093
 
 
1094
 
     - complete - True if this submission was successful, rendering this
1095
 
                  exercise complete for this user in this worksheet.
1096
 
     - active   - True if this submission is "active" (usually true).
1097
 
                  Submissions may be de-activated by privileged users for
1098
 
                  special reasons, and then they won't count (either as a
1099
 
                  penalty or success), but will still be stored.
1100
 
    """
1101
 
 
1102
 
    __storm_table__ = "exercise_attempt"
1103
 
    __storm_primary__ = "ws_ex_id", "user_id", "date"
 
494
    """
 
495
    An ExerciseAttempt is a special case of an ExerciseSave. Like an
 
496
    ExerciseSave, it constitutes exercise solution data that the user has
 
497
    submitted to the server for storage.
 
498
    In addition, it contains additional information about the submission.
 
499
    complete - True if this submission was successful, rendering this exercise
 
500
        complete for this user.
 
501
    active - True if this submission is "active" (usually true). Submissions
 
502
        may be de-activated by privileged users for special reasons, and then
 
503
        they won't count (either as a penalty or success), but will still be
 
504
        stored.
 
505
    """
 
506
    __storm_table__ = "problem_attempt"
 
507
    __storm_primary__ = "exercise_id", "user_id", "date"
1104
508
 
1105
509
    # The "text" field is the same but has a different name in the DB table
1106
510
    # for some reason.
1107
511
    text = Unicode(name="attempt")
1108
512
    complete = Bool()
1109
513
    active = Bool()
1110
 
 
1111
 
    def get_permissions(self, user, config):
1112
 
        return set(['view']) if user is self.user else set()
1113
 
 
1114
 
class TestSuite(Storm):
1115
 
    """A container to group an exercise's test cases.
1116
 
 
1117
 
    The test suite contains some information on how to test. The function to
1118
 
    test, variables to set and stdin data are stored here.
1119
 
    """
1120
 
 
1121
 
    __storm_table__ = "test_suite"
1122
 
    __storm_primary__ = "exercise_id", "suiteid"
1123
 
 
1124
 
    suiteid = Int()
1125
 
    exercise_id = Unicode(name="exerciseid")
1126
 
    description = Unicode()
1127
 
    seq_no = Int()
1128
 
    function = Unicode()
1129
 
    stdin = Unicode()
1130
 
    exercise = Reference(exercise_id, Exercise.id)
1131
 
    test_cases = ReferenceSet(suiteid, 'TestCase.suiteid', order_by="seq_no")
1132
 
    variables = ReferenceSet(suiteid, 'TestSuiteVar.suiteid', order_by='arg_no')
1133
 
 
1134
 
    def delete(self):
1135
 
        """Delete this suite, without asking questions."""
1136
 
        for variable in self.variables:
1137
 
            variable.delete()
1138
 
        for test_case in self.test_cases:
1139
 
            test_case.delete()
1140
 
        Store.of(self).remove(self)
1141
 
 
1142
 
class TestCase(Storm):
1143
 
    """A container for actual tests (see TestCasePart), inside a test suite.
1144
 
 
1145
 
    It is the lowest level shown to students on their pass/fail status."""
1146
 
 
1147
 
    __storm_table__ = "test_case"
1148
 
    __storm_primary__ = "testid", "suiteid"
1149
 
 
1150
 
    testid = Int()
1151
 
    suiteid = Int()
1152
 
    suite = Reference(suiteid, "TestSuite.suiteid")
1153
 
    passmsg = Unicode()
1154
 
    failmsg = Unicode()
1155
 
    test_default = Unicode() # Currently unused - only used for file matching.
1156
 
    seq_no = Int()
1157
 
 
1158
 
    parts = ReferenceSet(testid, "TestCasePart.testid")
1159
 
 
1160
 
    __init__ = _kwarg_init
1161
 
 
1162
 
    def delete(self):
1163
 
        for part in self.parts:
1164
 
            part.delete()
1165
 
        Store.of(self).remove(self)
1166
 
 
1167
 
class TestSuiteVar(Storm):
1168
 
    """A variable used by an exercise test suite.
1169
 
 
1170
 
    This may represent a function argument or a normal variable.
1171
 
    """
1172
 
 
1173
 
    __storm_table__ = "suite_variable"
1174
 
    __storm_primary__ = "varid"
1175
 
 
1176
 
    varid = Int()
1177
 
    suiteid = Int()
1178
 
    var_name = Unicode()
1179
 
    var_value = Unicode()
1180
 
    var_type = Unicode()
1181
 
    arg_no = Int()
1182
 
 
1183
 
    suite = Reference(suiteid, "TestSuite.suiteid")
1184
 
 
1185
 
    __init__ = _kwarg_init
1186
 
 
1187
 
    def delete(self):
1188
 
        Store.of(self).remove(self)
1189
 
 
1190
 
class TestCasePart(Storm):
1191
 
    """An actual piece of code to test an exercise solution."""
1192
 
 
1193
 
    __storm_table__ = "test_case_part"
1194
 
    __storm_primary__ = "partid"
1195
 
 
1196
 
    partid = Int()
1197
 
    testid = Int()
1198
 
 
1199
 
    part_type = Unicode()
1200
 
    test_type = Unicode()
1201
 
    data = Unicode()
1202
 
    filename = Unicode()
1203
 
 
1204
 
    test = Reference(testid, "TestCase.testid")
1205
 
 
1206
 
    __init__ = _kwarg_init
1207
 
 
1208
 
    def delete(self):
1209
 
        Store.of(self).remove(self)