~azzar1/unity/add-show-desktop-key

« back to all changes in this revision

Viewing changes to ivle/database.py

Replaced Python config files (conf.py) with new config files system, using
    configobj (INI-file style config files).

setup.py config now produces ./etc/ivle.conf, a new-style config file.
ivle/conf/conf.py is now part of the IVLE source code. It reads the new config
file and provides the same legacy interface, so all of IVLE still functions,
including setup.py config.

Added /etc to the source tree (config files will be stored here).
Added configobj as a dependency in doc/setup/install_proc.txt.

setup.py install copies ./etc/ivle.conf into /etc/ivle/ivle.conf.

Removed boilerplate code generation from setup/configure.py (that code is now
part of ivle/conf/conf.py which is now in the source tree).

Show diffs side-by-side

added added

removed removed

Lines of Context:
17
17
 
18
18
# Author: Matt Giuca, Will Grant
19
19
 
20
 
"""Database utilities and content classes.
 
20
"""
 
21
Database Classes and Utilities for Storm ORM
21
22
 
22
23
This module provides all of the classes which map to database tables.
23
24
It also provides miscellaneous utility functions for database interaction.
24
25
"""
25
26
 
26
 
import hashlib
 
27
import md5
27
28
import datetime
28
29
 
29
30
from storm.locals import create_database, Store, Int, Unicode, DateTime, \
30
31
                         Reference, ReferenceSet, Bool, Storm, Desc
31
 
from storm.expr import Select, Max
32
 
from storm.exceptions import NotOneError, IntegrityError
33
32
 
34
 
from ivle.worksheet.rst import rst
 
33
import ivle.conf
 
34
import ivle.caps
35
35
 
36
36
__all__ = ['get_store',
37
37
            'User',
38
38
            'Subject', 'Semester', 'Offering', 'Enrolment',
39
39
            'ProjectSet', 'Project', 'ProjectGroup', 'ProjectGroupMembership',
40
 
            'Assessed', 'ProjectSubmission', 'ProjectExtension',
41
40
            'Exercise', 'Worksheet', 'WorksheetExercise',
42
41
            'ExerciseSave', 'ExerciseAttempt',
43
 
            'TestCase', 'TestSuite', 'TestSuiteVar'
 
42
            'AlreadyEnrolledError'
44
43
        ]
45
44
 
46
45
def _kwarg_init(self, **kwargs):
50
49
                % (self.__class__.__name__, k))
51
50
        setattr(self, k, v)
52
51
 
53
 
def get_conn_string(config):
54
 
    """Create a Storm connection string to the IVLE database
55
 
 
56
 
    @param config: The IVLE configuration.
57
 
    """
58
 
 
59
 
    clusterstr = ''
60
 
    if config['database']['username']:
61
 
        clusterstr += config['database']['username']
62
 
        if config['database']['password']:
63
 
            clusterstr += ':' + config['database']['password']
64
 
        clusterstr += '@'
65
 
 
66
 
    host = config['database']['host'] or 'localhost'
67
 
    port = config['database']['port'] or 5432
68
 
 
69
 
    clusterstr += '%s:%d' % (host, port)
70
 
 
71
 
    return "postgres://%s/%s" % (clusterstr, config['database']['name'])
72
 
 
73
 
def get_store(config):
74
 
    """Create a Storm store connected to the IVLE database.
75
 
 
76
 
    @param config: The IVLE configuration.
77
 
    """
78
 
    return Store(create_database(get_conn_string(config)))
 
52
def get_conn_string():
 
53
    """
 
54
    Returns the Storm connection string, generated from the conf file.
 
55
    """
 
56
    return "postgres://%s:%s@%s:%d/%s" % (ivle.conf.db_user,
 
57
        ivle.conf.db_password, ivle.conf.db_host, ivle.conf.db_port,
 
58
        ivle.conf.db_dbname)
 
59
 
 
60
def get_store():
 
61
    """
 
62
    Open a database connection and transaction. Return a storm.store.Store
 
63
    instance connected to the configured IVLE database.
 
64
    """
 
65
    return Store(create_database(get_conn_string()))
79
66
 
80
67
# USERS #
81
68
 
82
69
class User(Storm):
83
 
    """An IVLE user account."""
 
70
    """
 
71
    Represents an IVLE user.
 
72
    """
84
73
    __storm_table__ = "login"
85
74
 
86
75
    id = Int(primary=True, name="loginid")
87
76
    login = Unicode()
88
77
    passhash = Unicode()
89
78
    state = Unicode()
90
 
    admin = Bool()
 
79
    rolenm = Unicode()
91
80
    unixid = Int()
92
81
    nick = Unicode()
93
82
    pass_exp = DateTime()
99
88
    studentid = Unicode()
100
89
    settings = Unicode()
101
90
 
 
91
    def _get_role(self):
 
92
        if self.rolenm is None:
 
93
            return None
 
94
        return ivle.caps.Role(self.rolenm)
 
95
    def _set_role(self, value):
 
96
        if not isinstance(value, ivle.caps.Role):
 
97
            raise TypeError("role must be an ivle.caps.Role")
 
98
        self.rolenm = unicode(value)
 
99
    role = property(_get_role, _set_role)
 
100
 
102
101
    __init__ = _kwarg_init
103
102
 
104
103
    def __repr__(self):
115
114
            return None
116
115
        return self.hash_password(password) == self.passhash
117
116
 
118
 
    @property
119
 
    def display_name(self):
120
 
        """Returns the "nice name" of the user or group."""
121
 
        return self.fullname
122
 
 
123
 
    @property
124
 
    def short_name(self):
125
 
        """Returns the database "identifier" name of the user or group."""
126
 
        return self.login
 
117
    def hasCap(self, capability):
 
118
        """Given a capability (which is a Role object), returns True if this
 
119
        User has that capability, False otherwise.
 
120
        """
 
121
        return self.role.hasCap(capability)
127
122
 
128
123
    @property
129
124
    def password_expired(self):
135
130
        fieldval = self.acct_exp
136
131
        return fieldval is not None and datetime.datetime.now() > fieldval
137
132
 
138
 
    @property
139
 
    def valid(self):
140
 
        return self.state == 'enabled' and not self.account_expired
141
 
 
142
133
    def _get_enrolments(self, justactive):
143
134
        return Store.of(self).find(Enrolment,
144
135
            Enrolment.user_id == self.id,
168
159
 
169
160
    # TODO: Invitations should be listed too?
170
161
    def get_groups(self, offering=None):
171
 
        """Get groups of which this user is a member.
172
 
 
173
 
        @param offering: An optional offering to restrict the search to.
174
 
        """
175
162
        preds = [
176
163
            ProjectGroupMembership.user_id == self.id,
177
164
            ProjectGroup.id == ProjectGroupMembership.project_group_id,
197
184
        '''A sanely ordered list of all of the user's enrolments.'''
198
185
        return self._get_enrolments(False) 
199
186
 
200
 
    def get_projects(self, offering=None, active_only=True):
201
 
        """Find projects that the user can submit.
202
 
 
203
 
        This will include projects for offerings in which the user is
204
 
        enrolled, as long as the project is not in a project set which has
205
 
        groups (ie. if maximum number of group members is 0).
206
 
 
207
 
        @param active_only: Whether to only search active offerings.
208
 
        @param offering: An optional offering to restrict the search to.
209
 
        """
210
 
        return Store.of(self).find(Project,
211
 
            Project.project_set_id == ProjectSet.id,
212
 
            ProjectSet.max_students_per_group == None,
213
 
            ProjectSet.offering_id == Offering.id,
214
 
            (offering is None) or (Offering.id == offering.id),
215
 
            Semester.id == Offering.semester_id,
216
 
            (not active_only) or (Semester.state == u'current'),
217
 
            Enrolment.offering_id == Offering.id,
218
 
            Enrolment.user_id == self.id)
219
 
 
220
187
    @staticmethod
221
188
    def hash_password(password):
222
 
        """Hash a password with MD5."""
223
 
        return hashlib.md5(password).hexdigest()
 
189
        return md5.md5(password).hexdigest()
224
190
 
225
191
    @classmethod
226
192
    def get_by_login(cls, store, login):
227
 
        """Find a user in a store by login name."""
 
193
        """
 
194
        Get the User from the db associated with a given store and
 
195
        login.
 
196
        """
228
197
        return store.find(cls, cls.login == unicode(login)).one()
229
198
 
230
 
    def get_permissions(self, user):
231
 
        """Determine privileges held by a user over this object.
232
 
 
233
 
        If the user requesting privileges is this user or an admin,
234
 
        they may do everything. Otherwise they may do nothing.
235
 
        """
236
 
        if user and user.admin or user is self:
237
 
            return set(['view_public', 'view', 'edit', 'submit_project'])
238
 
        else:
239
 
            return set(['view_public'])
240
 
 
241
199
# SUBJECTS AND ENROLMENTS #
242
200
 
243
201
class Subject(Storm):
244
 
    """A subject (or course) which is run in some semesters."""
245
 
 
246
202
    __storm_table__ = "subject"
247
203
 
248
204
    id = Int(primary=True, name="subjectid")
249
205
    code = Unicode(name="subj_code")
250
206
    name = Unicode(name="subj_name")
251
207
    short_name = Unicode(name="subj_short_name")
 
208
    url = Unicode()
252
209
 
253
210
    offerings = ReferenceSet(id, 'Offering.subject_id')
254
211
 
257
214
    def __repr__(self):
258
215
        return "<%s '%s'>" % (type(self).__name__, self.short_name)
259
216
 
260
 
    def get_permissions(self, user):
261
 
        """Determine privileges held by a user over this object.
262
 
 
263
 
        If the user requesting privileges is an admin, they may edit.
264
 
        Otherwise they may only read.
265
 
        """
266
 
        perms = set()
267
 
        if user is not None:
268
 
            perms.add('view')
269
 
            if user.admin:
270
 
                perms.add('edit')
271
 
        return perms
272
 
 
273
 
    def active_offerings(self):
274
 
        """Find active offerings for this subject.
275
 
 
276
 
        Return a sequence of currently active offerings for this subject
277
 
        (offerings whose semester.state is "current"). There should be 0 or 1
278
 
        elements in this sequence, but it's possible there are more.
279
 
        """
280
 
        return self.offerings.find(Offering.semester_id == Semester.id,
281
 
                                   Semester.state == u'current')
282
 
 
283
 
    def offering_for_semester(self, year, semester):
284
 
        """Get the offering for the given year/semester, or None.
285
 
 
286
 
        @param year: A string representation of the year.
287
 
        @param semester: A string representation of the semester.
288
 
        """
289
 
        return self.offerings.find(Offering.semester_id == Semester.id,
290
 
                               Semester.year == unicode(year),
291
 
                               Semester.semester == unicode(semester)).one()
292
 
 
293
217
class Semester(Storm):
294
 
    """A semester in which subjects can be run."""
295
 
 
296
218
    __storm_table__ = "semester"
297
219
 
298
220
    id = Int(primary=True, name="semesterid")
299
221
    year = Unicode()
300
222
    semester = Unicode()
301
 
    state = Unicode()
 
223
    active = Bool()
302
224
 
303
225
    offerings = ReferenceSet(id, 'Offering.semester_id')
304
 
    enrolments = ReferenceSet(id,
305
 
                              'Offering.semester_id',
306
 
                              'Offering.id',
307
 
                              'Enrolment.offering_id')
308
226
 
309
227
    __init__ = _kwarg_init
310
228
 
312
230
        return "<%s %s/%s>" % (type(self).__name__, self.year, self.semester)
313
231
 
314
232
class Offering(Storm):
315
 
    """An offering of a subject in a particular semester."""
316
 
 
317
233
    __storm_table__ = "offering"
318
234
 
319
235
    id = Int(primary=True, name="offeringid")
321
237
    subject = Reference(subject_id, Subject.id)
322
238
    semester_id = Int(name="semesterid")
323
239
    semester = Reference(semester_id, Semester.id)
324
 
    description = Unicode()
325
 
    url = Unicode()
326
240
    groups_student_permissions = Unicode()
327
241
 
328
242
    enrolments = ReferenceSet(id, 'Enrolment.offering_id')
331
245
                           'Enrolment.user_id',
332
246
                           'User.id')
333
247
    project_sets = ReferenceSet(id, 'ProjectSet.offering_id')
334
 
    projects = ReferenceSet(id,
335
 
                            'ProjectSet.offering_id',
336
 
                            'ProjectSet.id',
337
 
                            'Project.project_set_id')
338
 
 
339
 
    worksheets = ReferenceSet(id, 
340
 
        'Worksheet.offering_id', 
341
 
        order_by="seq_no"
342
 
    )
343
248
 
344
249
    __init__ = _kwarg_init
345
250
 
347
252
        return "<%s %r in %r>" % (type(self).__name__, self.subject,
348
253
                                  self.semester)
349
254
 
350
 
    def enrol(self, user, role=u'student'):
351
 
        """Enrol a user in this offering.
352
 
 
353
 
        Enrolments handle both the staff and student cases. The role controls
354
 
        the privileges granted by this enrolment.
355
 
        """
356
 
        enrolment = Store.of(self).find(Enrolment,
357
 
                               Enrolment.user_id == user.id,
358
 
                               Enrolment.offering_id == self.id).one()
359
 
 
360
 
        if enrolment is None:
361
 
            enrolment = Enrolment(user=user, offering=self)
362
 
            self.enrolments.add(enrolment)
363
 
 
364
 
        enrolment.active = True
365
 
        enrolment.role = role
366
 
 
367
 
    def unenrol(self, user):
368
 
        '''Unenrol a user from this offering.'''
369
 
        enrolment = Store.of(self).find(Enrolment,
370
 
                               Enrolment.user_id == user.id,
371
 
                               Enrolment.offering_id == self.id).one()
372
 
        Store.of(enrolment).remove(enrolment)
373
 
 
374
 
    def get_permissions(self, user):
375
 
        perms = set()
376
 
        if user is not None:
377
 
            enrolment = self.get_enrolment(user)
378
 
            if enrolment or user.admin:
379
 
                perms.add('view')
380
 
            if (enrolment and enrolment.role in (u'tutor', u'lecturer')) \
381
 
               or user.admin:
382
 
                perms.add('edit')
383
 
                # XXX Bug #493945 -- should tutors have these permissions?
384
 
                # Potentially move into the next category (lecturer & admin)
385
 
                perms.add('enrol')          # Can see enrolment screen at all
386
 
                perms.add('enrol_student')  # Can enrol students
387
 
            if (enrolment and enrolment.role in (u'lecturer')) or user.admin:
388
 
                perms.add('enrol_tutor')    # Can enrol tutors
389
 
            if user.admin:
390
 
                perms.add('enrol_lecturer') # Can enrol lecturers
391
 
        return perms
392
 
 
393
 
    def get_enrolment(self, user):
394
 
        """Find the user's enrolment in this offering."""
395
 
        try:
396
 
            enrolment = self.enrolments.find(user=user).one()
397
 
        except NotOneError:
398
 
            enrolment = None
399
 
 
400
 
        return enrolment
401
 
 
402
 
    def get_members_by_role(self, role):
403
 
        return Store.of(self).find(User,
404
 
                Enrolment.user_id == User.id,
405
 
                Enrolment.offering_id == self.id,
406
 
                Enrolment.role == role
407
 
                ).order_by(User.login)
408
 
 
409
 
    @property
410
 
    def students(self):
411
 
        return self.get_members_by_role(u'student')
412
 
 
413
 
    def get_open_projects_for_user(self, user):
414
 
        """Find all projects currently open to submissions by a user."""
415
 
        # XXX: Respect extensions.
416
 
        return self.projects.find(Project.deadline > datetime.datetime.now())
 
255
    def enrol(self, user):
 
256
        '''Enrol a user in this offering.'''
 
257
        # We'll get a horrible database constraint violation error if we try
 
258
        # to add a second enrolment.
 
259
        if Store.of(self).find(Enrolment,
 
260
                               Enrolment.user_id == user.id,
 
261
                               Enrolment.offering_id == self.id).count() == 1:
 
262
            raise AlreadyEnrolledError()
 
263
 
 
264
        e = Enrolment(user=user, offering=self, active=True)
 
265
        self.enrolments.add(e)
417
266
 
418
267
class Enrolment(Storm):
419
 
    """An enrolment of a user in an offering.
420
 
 
421
 
    This represents the roles of both staff and students.
422
 
    """
423
 
 
424
268
    __storm_table__ = "enrolment"
425
269
    __storm_primary__ = "user_id", "offering_id"
426
270
 
428
272
    user = Reference(user_id, User.id)
429
273
    offering_id = Int(name="offeringid")
430
274
    offering = Reference(offering_id, Offering.id)
431
 
    role = Unicode()
432
275
    notes = Unicode()
433
276
    active = Bool()
434
277
 
446
289
        return "<%s %r in %r>" % (type(self).__name__, self.user,
447
290
                                  self.offering)
448
291
 
 
292
class AlreadyEnrolledError(Exception):
 
293
    pass
 
294
 
449
295
# PROJECTS #
450
296
 
451
297
class ProjectSet(Storm):
452
 
    """A set of projects that share common groups.
453
 
 
454
 
    Each student project group is attached to a project set. The group is
455
 
    valid for all projects in the group's set.
456
 
    """
457
 
 
458
298
    __storm_table__ = "project_set"
459
299
 
460
300
    id = Int(name="projectsetid", primary=True)
471
311
        return "<%s %d in %r>" % (type(self).__name__, self.id,
472
312
                                  self.offering)
473
313
 
474
 
    def get_permissions(self, user):
475
 
        return self.offering.get_permissions(user)
476
 
 
477
 
    def get_groups_for_user(self, user):
478
 
        """List all groups in this offering of which the user is a member."""
479
 
        assert self.is_group
480
 
        return Store.of(self).find(
481
 
            ProjectGroup,
482
 
            ProjectGroupMembership.user_id == user.id,
483
 
            ProjectGroupMembership.project_group_id == ProjectGroup.id,
484
 
            ProjectGroup.project_set_id == self.id)
485
 
 
486
 
    def get_submission_principal(self, user):
487
 
        """Get the principal on behalf of which the user can submit.
488
 
 
489
 
        If this is a solo project set, the given user is returned. If
490
 
        the user is a member of exactly one group, all the group is
491
 
        returned. Otherwise, None is returned.
492
 
        """
493
 
        if self.is_group:
494
 
            groups = self.get_groups_for_user(user)
495
 
            if groups.count() == 1:
496
 
                return groups.one()
497
 
            else:
498
 
                return None
499
 
        else:
500
 
            return user
501
 
 
502
 
    @property
503
 
    def is_group(self):
504
 
        return self.max_students_per_group is not None
505
 
 
506
 
    @property
507
 
    def assigned(self):
508
 
        """Get the entities (groups or users) assigned to submit this project.
509
 
 
510
 
        This will be a Storm ResultSet.
511
 
        """
512
 
        #If its a solo project, return everyone in offering
513
 
        if self.is_group:
514
 
            return self.project_groups
515
 
        else:
516
 
            return self.offering.students
517
 
 
518
 
class DeadlinePassed(Exception):
519
 
    """An exception indicating that a project cannot be submitted because the
520
 
    deadline has passed."""
521
 
    def __init__(self):
522
 
        pass
523
 
    def __str__(self):
524
 
        return "The project deadline has passed"
525
 
 
526
314
class Project(Storm):
527
 
    """A student project for which submissions can be made."""
528
 
 
529
315
    __storm_table__ = "project"
530
316
 
531
317
    id = Int(name="projectid", primary=True)
532
 
    name = Unicode()
533
 
    short_name = Unicode()
534
318
    synopsis = Unicode()
535
319
    url = Unicode()
536
320
    project_set_id = Int(name="projectsetid")
537
321
    project_set = Reference(project_set_id, ProjectSet.id)
538
322
    deadline = DateTime()
539
323
 
540
 
    assesseds = ReferenceSet(id, 'Assessed.project_id')
541
 
    submissions = ReferenceSet(id,
542
 
                               'Assessed.project_id',
543
 
                               'Assessed.id',
544
 
                               'ProjectSubmission.assessed_id')
545
 
 
546
324
    __init__ = _kwarg_init
547
325
 
548
326
    def __repr__(self):
549
 
        return "<%s '%s' in %r>" % (type(self).__name__, self.short_name,
 
327
        return "<%s '%s' in %r>" % (type(self).__name__, self.synopsis,
550
328
                                  self.project_set.offering)
551
329
 
552
 
    def can_submit(self, principal, user):
553
 
        return (self in principal.get_projects() and
554
 
                not self.has_deadline_passed(user))
555
 
 
556
 
    def submit(self, principal, path, revision, who):
557
 
        """Submit a Subversion path and revision to a project.
558
 
 
559
 
        @param principal: The owner of the Subversion repository, and the
560
 
                          entity on behalf of whom the submission is being made
561
 
        @param path: A path within that repository to submit.
562
 
        @param revision: The revision of that path to submit.
563
 
        @param who: The user who is actually making the submission.
564
 
        """
565
 
 
566
 
        if not self.can_submit(principal, who):
567
 
            raise DeadlinePassed()
568
 
 
569
 
        a = Assessed.get(Store.of(self), principal, self)
570
 
        ps = ProjectSubmission()
571
 
        ps.path = path
572
 
        ps.revision = revision
573
 
        ps.date_submitted = datetime.datetime.now()
574
 
        ps.assessed = a
575
 
        ps.submitter = who
576
 
 
577
 
        return ps
578
 
 
579
 
    def get_permissions(self, user):
580
 
        return self.project_set.offering.get_permissions(user)
581
 
 
582
 
    @property
583
 
    def latest_submissions(self):
584
 
        """Return the latest submission for each Assessed."""
585
 
        return Store.of(self).find(ProjectSubmission,
586
 
            Assessed.project_id == self.id,
587
 
            ProjectSubmission.assessed_id == Assessed.id,
588
 
            ProjectSubmission.date_submitted == Select(
589
 
                    Max(ProjectSubmission.date_submitted),
590
 
                    ProjectSubmission.assessed_id == Assessed.id,
591
 
                    tables=ProjectSubmission
592
 
            )
593
 
        )
594
 
 
595
 
    def has_deadline_passed(self, user):
596
 
        """Check whether the deadline has passed."""
597
 
        # XXX: Need to respect extensions.
598
 
        return self.deadline < datetime.datetime.now()
599
 
 
600
 
    def get_submissions_for_principal(self, principal):
601
 
        """Fetch a ResultSet of all submissions by a particular principal."""
602
 
        assessed = Assessed.get(Store.of(self), principal, self)
603
 
        if assessed is None:
604
 
            return
605
 
        return assessed.submissions
606
 
 
607
 
 
608
 
 
609
330
class ProjectGroup(Storm):
610
 
    """A group of students working together on a project."""
611
 
 
612
331
    __storm_table__ = "project_group"
613
332
 
614
333
    id = Int(name="groupid", primary=True)
631
350
        return "<%s %s in %r>" % (type(self).__name__, self.name,
632
351
                                  self.project_set.offering)
633
352
 
634
 
    @property
635
 
    def display_name(self):
636
 
        """Returns the "nice name" of the user or group."""
637
 
        return self.nick
638
 
 
639
 
    @property
640
 
    def short_name(self):
641
 
        """Returns the database "identifier" name of the user or group."""
642
 
        return self.name
643
 
 
644
 
    def get_projects(self, offering=None, active_only=True):
645
 
        '''Find projects that the group can submit.
646
 
 
647
 
        This will include projects in the project set which owns this group,
648
 
        unless the project set disallows groups (in which case none will be
649
 
        returned).
650
 
 
651
 
        @param active_only: Whether to only search active offerings.
652
 
        @param offering: An optional offering to restrict the search to.
653
 
        '''
654
 
        return Store.of(self).find(Project,
655
 
            Project.project_set_id == ProjectSet.id,
656
 
            ProjectSet.id == self.project_set.id,
657
 
            ProjectSet.max_students_per_group != None,
658
 
            ProjectSet.offering_id == Offering.id,
659
 
            (offering is None) or (Offering.id == offering.id),
660
 
            Semester.id == Offering.semester_id,
661
 
            (not active_only) or (Semester.state == u'current'))
662
 
 
663
 
 
664
 
    def get_permissions(self, user):
665
 
        if user.admin or user in self.members:
666
 
            return set(['submit_project'])
667
 
        else:
668
 
            return set()
669
 
 
670
353
class ProjectGroupMembership(Storm):
671
 
    """A student's membership in a project group."""
672
 
 
673
354
    __storm_table__ = "group_member"
674
355
    __storm_primary__ = "user_id", "project_group_id"
675
356
 
684
365
        return "<%s %r in %r>" % (type(self).__name__, self.user,
685
366
                                  self.project_group)
686
367
 
687
 
class Assessed(Storm):
688
 
    """A composite of a user or group combined with a project.
689
 
 
690
 
    Each project submission and extension refers to an Assessed. It is the
691
 
    sole specifier of the repository and project.
692
 
    """
693
 
 
694
 
    __storm_table__ = "assessed"
695
 
 
696
 
    id = Int(name="assessedid", primary=True)
697
 
    user_id = Int(name="loginid")
698
 
    user = Reference(user_id, User.id)
699
 
    project_group_id = Int(name="groupid")
700
 
    project_group = Reference(project_group_id, ProjectGroup.id)
701
 
 
702
 
    project_id = Int(name="projectid")
703
 
    project = Reference(project_id, Project.id)
704
 
 
705
 
    extensions = ReferenceSet(id, 'ProjectExtension.assessed_id')
706
 
    submissions = ReferenceSet(
707
 
        id, 'ProjectSubmission.assessed_id', order_by='date_submitted')
708
 
 
709
 
    def __repr__(self):
710
 
        return "<%s %r in %r>" % (type(self).__name__,
711
 
            self.user or self.project_group, self.project)
712
 
 
713
 
    @property
714
 
    def is_group(self):
715
 
        """True if the Assessed is a group, False if it is a user."""
716
 
        return self.project_group is not None
717
 
 
718
 
    @property
719
 
    def principal(self):
720
 
        return self.project_group or self.user
721
 
 
722
 
    @property
723
 
    def checkout_location(self):
724
 
        """Returns the location of the Subversion workspace for this piece of
725
 
        assessment, relative to each group member's home directory."""
726
 
        subjectname = self.project.project_set.offering.subject.short_name
727
 
        if self.is_group:
728
 
            checkout_dir_name = self.principal.short_name
729
 
        else:
730
 
            checkout_dir_name = "mywork"
731
 
        return subjectname + "/" + checkout_dir_name
732
 
 
733
 
    @classmethod
734
 
    def get(cls, store, principal, project):
735
 
        """Find or create an Assessed for the given user or group and project.
736
 
 
737
 
        @param principal: The user or group.
738
 
        @param project: The project.
739
 
        """
740
 
        t = type(principal)
741
 
        if t not in (User, ProjectGroup):
742
 
            raise AssertionError('principal must be User or ProjectGroup')
743
 
 
744
 
        a = store.find(cls,
745
 
            (t is User) or (cls.project_group_id == principal.id),
746
 
            (t is ProjectGroup) or (cls.user_id == principal.id),
747
 
            cls.project_id == project.id).one()
748
 
 
749
 
        if a is None:
750
 
            a = cls()
751
 
            if t is User:
752
 
                a.user = principal
753
 
            else:
754
 
                a.project_group = principal
755
 
            a.project = project
756
 
            store.add(a)
757
 
 
758
 
        return a
759
 
 
760
 
 
761
 
class ProjectExtension(Storm):
762
 
    """An extension granted to a user or group on a particular project.
763
 
 
764
 
    The user or group and project are specified by the Assessed.
765
 
    """
766
 
 
767
 
    __storm_table__ = "project_extension"
768
 
 
769
 
    id = Int(name="extensionid", primary=True)
770
 
    assessed_id = Int(name="assessedid")
771
 
    assessed = Reference(assessed_id, Assessed.id)
772
 
    deadline = DateTime()
773
 
    approver_id = Int(name="approver")
774
 
    approver = Reference(approver_id, User.id)
775
 
    notes = Unicode()
776
 
 
777
 
class ProjectSubmission(Storm):
778
 
    """A submission from a user or group repository to a particular project.
779
 
 
780
 
    The content of a submission is a single path and revision inside a
781
 
    repository. The repository is that owned by the submission's user and
782
 
    group, while the path and revision are explicit.
783
 
 
784
 
    The user or group and project are specified by the Assessed.
785
 
    """
786
 
 
787
 
    __storm_table__ = "project_submission"
788
 
 
789
 
    id = Int(name="submissionid", primary=True)
790
 
    assessed_id = Int(name="assessedid")
791
 
    assessed = Reference(assessed_id, Assessed.id)
792
 
    path = Unicode()
793
 
    revision = Int()
794
 
    submitter_id = Int(name="submitter")
795
 
    submitter = Reference(submitter_id, User.id)
796
 
    date_submitted = DateTime()
797
 
 
798
 
    def get_verify_url(self, user):
799
 
        """Get the URL for verifying this submission, within the account of
800
 
        the given user."""
801
 
        # If this is a solo project, then self.path will be prefixed with the
802
 
        # subject name. Remove the first path segment.
803
 
        submitpath = self.path[1:] if self.path[:1] == '/' else self.path
804
 
        if not self.assessed.is_group:
805
 
            if '/' in submitpath:
806
 
                submitpath = submitpath.split('/', 1)[1]
807
 
            else:
808
 
                submitpath = ''
809
 
        return "/files/%s/%s/%s?r=%d" % (user.login,
810
 
            self.assessed.checkout_location, submitpath, self.revision)
811
 
 
812
368
# WORKSHEETS AND EXERCISES #
813
369
 
814
370
class Exercise(Storm):
815
 
    """An exercise for students to complete in a worksheet.
816
 
 
817
 
    An exercise may be present in any number of worksheets.
818
 
    """
819
 
 
820
 
    __storm_table__ = "exercise"
821
 
    id = Unicode(primary=True, name="identifier")
822
 
    name = Unicode()
823
 
    description = Unicode()
824
 
    partial = Unicode()
825
 
    solution = Unicode()
826
 
    include = Unicode()
827
 
    num_rows = Int()
828
 
 
829
 
    worksheet_exercises =  ReferenceSet(id,
830
 
        'WorksheetExercise.exercise_id')
 
371
    # Note: Table "problem" is called "Exercise" in the Object layer, since
 
372
    # it's called that everywhere else.
 
373
    __storm_table__ = "problem"
 
374
 
 
375
    id = Int(primary=True, name="problemid")
 
376
    name = Unicode(name="identifier")
 
377
    spec = Unicode()
831
378
 
832
379
    worksheets = ReferenceSet(id,
833
380
        'WorksheetExercise.exercise_id',
835
382
        'Worksheet.id'
836
383
    )
837
384
 
838
 
    test_suites = ReferenceSet(id, 
839
 
        'TestSuite.exercise_id',
840
 
        order_by='seq_no')
841
 
 
842
385
    __init__ = _kwarg_init
843
386
 
844
387
    def __repr__(self):
845
388
        return "<%s %s>" % (type(self).__name__, self.name)
846
389
 
847
 
    def get_permissions(self, user):
848
 
        perms = set()
849
 
        roles = set()
850
 
        if user is not None:
851
 
            if user.admin:
852
 
                perms.add('edit')
853
 
                perms.add('view')
854
 
            elif u'lecturer' in set((e.role for e in user.active_enrolments)):
855
 
                perms.add('edit')
856
 
                perms.add('view')
857
 
            elif u'tutor' in set((e.role for e in user.active_enrolments)):
858
 
                perms.add('edit')
859
 
                perms.add('view')
860
 
 
861
 
        return perms
862
 
 
863
 
    def get_description(self):
864
 
        """Return the description interpreted as reStructuredText."""
865
 
        return rst(self.description)
866
 
 
867
 
    def delete(self):
868
 
        """Deletes the exercise, providing it has no associated worksheets."""
869
 
        if (self.worksheet_exercises.count() > 0):
870
 
            raise IntegrityError()
871
 
        for suite in self.test_suites:
872
 
            suite.delete()
873
 
        Store.of(self).remove(self)
 
390
    @classmethod
 
391
    def get_by_name(cls, store, name):
 
392
        """
 
393
        Get the Exercise from the db associated with a given store and name.
 
394
        If the exercise is not in the database, creates it and inserts it
 
395
        automatically.
 
396
        """
 
397
        ex = store.find(cls, cls.name == unicode(name)).one()
 
398
        if ex is not None:
 
399
            return ex
 
400
        ex = Exercise(name=unicode(name))
 
401
        store.add(ex)
 
402
        store.commit()
 
403
        return ex
874
404
 
875
405
class Worksheet(Storm):
876
 
    """A worksheet with exercises for students to complete.
877
 
 
878
 
    Worksheets are owned by offerings.
879
 
    """
880
 
 
881
406
    __storm_table__ = "worksheet"
882
407
 
883
408
    id = Int(primary=True, name="worksheetid")
884
 
    offering_id = Int(name="offeringid")
885
 
    identifier = Unicode()
886
 
    name = Unicode()
 
409
    # XXX subject is not linked to a Subject object. This is a property of
 
410
    # the database, and will be refactored.
 
411
    subject = Unicode()
 
412
    name = Unicode(name="identifier")
887
413
    assessable = Bool()
888
 
    data = Unicode()
889
 
    seq_no = Int()
890
 
    format = Unicode()
891
 
 
892
 
    attempts = ReferenceSet(id, "ExerciseAttempt.worksheetid")
893
 
    offering = Reference(offering_id, 'Offering.id')
894
 
 
895
 
    all_worksheet_exercises = ReferenceSet(id,
 
414
    mtime = DateTime()
 
415
 
 
416
    exercises = ReferenceSet(id,
 
417
        'WorksheetExercise.worksheet_id',
 
418
        'WorksheetExercise.exercise_id',
 
419
        Exercise.id)
 
420
    # Use worksheet_exercises to get access to the WorksheetExercise objects
 
421
    # binding worksheets to exercises. This is required to access the
 
422
    # "optional" field.
 
423
    worksheet_exercises = ReferenceSet(id,
896
424
        'WorksheetExercise.worksheet_id')
897
425
 
898
 
    # Use worksheet_exercises to get access to the *active* WorksheetExercise
899
 
    # objects binding worksheets to exercises. This is required to access the
900
 
    # "optional" field.
901
 
 
902
 
    @property
903
 
    def worksheet_exercises(self):
904
 
        return self.all_worksheet_exercises.find(active=True)
905
 
 
906
426
    __init__ = _kwarg_init
907
427
 
908
428
    def __repr__(self):
909
429
        return "<%s %s>" % (type(self).__name__, self.name)
910
430
 
911
 
    def remove_all_exercises(self):
912
 
        """Remove all exercises from this worksheet.
 
431
    # XXX Refactor this - make it an instance method of Subject rather than a
 
432
    # class method of Worksheet. Can't do that now because Subject isn't
 
433
    # linked referentially to the Worksheet.
 
434
    @classmethod
 
435
    def get_by_name(cls, store, subjectname, worksheetname):
 
436
        """
 
437
        Get the Worksheet from the db associated with a given store, subject
 
438
        name and worksheet name.
 
439
        """
 
440
        return store.find(cls, cls.subject == unicode(subjectname),
 
441
            cls.name == unicode(worksheetname)).one()
913
442
 
 
443
    def remove_all_exercises(self, store):
 
444
        """
 
445
        Remove all exercises from this worksheet.
914
446
        This does not delete the exercises themselves. It just removes them
915
447
        from the worksheet.
916
448
        """
917
 
        store = Store.of(self)
918
 
        for ws_ex in self.all_worksheet_exercises:
919
 
            if ws_ex.saves.count() > 0 or ws_ex.attempts.count() > 0:
920
 
                raise IntegrityError()
921
449
        store.find(WorksheetExercise,
922
450
            WorksheetExercise.worksheet == self).remove()
923
451
 
924
 
    def get_permissions(self, user):
925
 
        return self.offering.get_permissions(user)
926
 
 
927
 
    def get_xml(self):
928
 
        """Returns the xml of this worksheet, converts from rst if required."""
929
 
        if self.format == u'rst':
930
 
            ws_xml = rst(self.data)
931
 
            return ws_xml
932
 
        else:
933
 
            return self.data
934
 
 
935
 
    def delete(self):
936
 
        """Deletes the worksheet, provided it has no attempts on any exercises.
937
 
 
938
 
        Returns True if delete succeeded, or False if this worksheet has
939
 
        attempts attached."""
940
 
        for ws_ex in self.all_worksheet_exercises:
941
 
            if ws_ex.saves.count() > 0 or ws_ex.attempts.count() > 0:
942
 
                raise IntegrityError()
943
 
 
944
 
        self.remove_all_exercises()
945
 
        Store.of(self).remove(self)
946
 
 
947
452
class WorksheetExercise(Storm):
948
 
    """A link between a worksheet and one of its exercises.
949
 
 
950
 
    These may be marked optional, in which case the exercise does not count
951
 
    for marking purposes. The sequence number is used to order the worksheet
952
 
    ToC.
953
 
    """
954
 
 
955
 
    __storm_table__ = "worksheet_exercise"
956
 
 
957
 
    id = Int(primary=True, name="ws_ex_id")
 
453
    __storm_table__ = "worksheet_problem"
 
454
    __storm_primary__ = "worksheet_id", "exercise_id"
958
455
 
959
456
    worksheet_id = Int(name="worksheetid")
960
457
    worksheet = Reference(worksheet_id, Worksheet.id)
961
 
    exercise_id = Unicode(name="exerciseid")
 
458
    exercise_id = Int(name="problemid")
962
459
    exercise = Reference(exercise_id, Exercise.id)
963
460
    optional = Bool()
964
 
    active = Bool()
965
 
    seq_no = Int()
966
 
 
967
 
    saves = ReferenceSet(id, "ExerciseSave.ws_ex_id")
968
 
    attempts = ReferenceSet(id, "ExerciseAttempt.ws_ex_id")
969
461
 
970
462
    __init__ = _kwarg_init
971
463
 
972
464
    def __repr__(self):
973
465
        return "<%s %s in %s>" % (type(self).__name__, self.exercise.name,
974
 
                                  self.worksheet.identifier)
975
 
 
976
 
    def get_permissions(self, user):
977
 
        return self.worksheet.get_permissions(user)
978
 
 
 
466
                                  self.worksheet.name)
979
467
 
980
468
class ExerciseSave(Storm):
981
 
    """A potential exercise solution submitted by a user for storage.
982
 
 
983
 
    This is not an actual tested attempt at an exercise, it's just a save of
984
 
    the editing session.
985
 
    """
986
 
 
987
 
    __storm_table__ = "exercise_save"
988
 
    __storm_primary__ = "ws_ex_id", "user_id"
989
 
 
990
 
    ws_ex_id = Int(name="ws_ex_id")
991
 
    worksheet_exercise = Reference(ws_ex_id, "WorksheetExercise.id")
992
 
 
 
469
    """
 
470
    Represents a potential solution to an exercise that a user has submitted
 
471
    to the server for storage.
 
472
    A basic ExerciseSave is just the current saved text for this exercise for
 
473
    this user (doesn't count towards their attempts).
 
474
    ExerciseSave may be extended with additional semantics (such as
 
475
    ExerciseAttempt).
 
476
    """
 
477
    __storm_table__ = "problem_save"
 
478
    __storm_primary__ = "exercise_id", "user_id", "date"
 
479
 
 
480
    exercise_id = Int(name="problemid")
 
481
    exercise = Reference(exercise_id, Exercise.id)
993
482
    user_id = Int(name="loginid")
994
483
    user = Reference(user_id, User.id)
995
484
    date = DateTime()
1002
491
            self.exercise.name, self.user.login, self.date.strftime("%c"))
1003
492
 
1004
493
class ExerciseAttempt(ExerciseSave):
1005
 
    """An attempt at solving an exercise.
1006
 
 
1007
 
    This is a special case of ExerciseSave, used when the user submits a
1008
 
    candidate solution. Like an ExerciseSave, it constitutes exercise solution
1009
 
    data.
1010
 
 
1011
 
    In addition, it contains information about the result of the submission:
1012
 
 
1013
 
     - complete - True if this submission was successful, rendering this
1014
 
                  exercise complete for this user in this worksheet.
1015
 
     - active   - True if this submission is "active" (usually true).
1016
 
                  Submissions may be de-activated by privileged users for
1017
 
                  special reasons, and then they won't count (either as a
1018
 
                  penalty or success), but will still be stored.
1019
 
    """
1020
 
 
1021
 
    __storm_table__ = "exercise_attempt"
1022
 
    __storm_primary__ = "ws_ex_id", "user_id", "date"
 
494
    """
 
495
    An ExerciseAttempt is a special case of an ExerciseSave. Like an
 
496
    ExerciseSave, it constitutes exercise solution data that the user has
 
497
    submitted to the server for storage.
 
498
    In addition, it contains additional information about the submission.
 
499
    complete - True if this submission was successful, rendering this exercise
 
500
        complete for this user.
 
501
    active - True if this submission is "active" (usually true). Submissions
 
502
        may be de-activated by privileged users for special reasons, and then
 
503
        they won't count (either as a penalty or success), but will still be
 
504
        stored.
 
505
    """
 
506
    __storm_table__ = "problem_attempt"
 
507
    __storm_primary__ = "exercise_id", "user_id", "date"
1023
508
 
1024
509
    # The "text" field is the same but has a different name in the DB table
1025
510
    # for some reason.
1026
511
    text = Unicode(name="attempt")
1027
512
    complete = Bool()
1028
513
    active = Bool()
1029
 
 
1030
 
    def get_permissions(self, user):
1031
 
        return set(['view']) if user is self.user else set()
1032
 
 
1033
 
class TestSuite(Storm):
1034
 
    """A container to group an exercise's test cases.
1035
 
 
1036
 
    The test suite contains some information on how to test. The function to
1037
 
    test, variables to set and stdin data are stored here.
1038
 
    """
1039
 
 
1040
 
    __storm_table__ = "test_suite"
1041
 
    __storm_primary__ = "exercise_id", "suiteid"
1042
 
 
1043
 
    suiteid = Int()
1044
 
    exercise_id = Unicode(name="exerciseid")
1045
 
    description = Unicode()
1046
 
    seq_no = Int()
1047
 
    function = Unicode()
1048
 
    stdin = Unicode()
1049
 
    exercise = Reference(exercise_id, Exercise.id)
1050
 
    test_cases = ReferenceSet(suiteid, 'TestCase.suiteid', order_by="seq_no")
1051
 
    variables = ReferenceSet(suiteid, 'TestSuiteVar.suiteid', order_by='arg_no')
1052
 
 
1053
 
    def delete(self):
1054
 
        """Delete this suite, without asking questions."""
1055
 
        for variable in self.variables:
1056
 
            variable.delete()
1057
 
        for test_case in self.test_cases:
1058
 
            test_case.delete()
1059
 
        Store.of(self).remove(self)
1060
 
 
1061
 
class TestCase(Storm):
1062
 
    """A container for actual tests (see TestCasePart), inside a test suite.
1063
 
 
1064
 
    It is the lowest level shown to students on their pass/fail status."""
1065
 
 
1066
 
    __storm_table__ = "test_case"
1067
 
    __storm_primary__ = "testid", "suiteid"
1068
 
 
1069
 
    testid = Int()
1070
 
    suiteid = Int()
1071
 
    suite = Reference(suiteid, "TestSuite.suiteid")
1072
 
    passmsg = Unicode()
1073
 
    failmsg = Unicode()
1074
 
    test_default = Unicode() # Currently unused - only used for file matching.
1075
 
    seq_no = Int()
1076
 
 
1077
 
    parts = ReferenceSet(testid, "TestCasePart.testid")
1078
 
 
1079
 
    __init__ = _kwarg_init
1080
 
 
1081
 
    def delete(self):
1082
 
        for part in self.parts:
1083
 
            part.delete()
1084
 
        Store.of(self).remove(self)
1085
 
 
1086
 
class TestSuiteVar(Storm):
1087
 
    """A variable used by an exercise test suite.
1088
 
 
1089
 
    This may represent a function argument or a normal variable.
1090
 
    """
1091
 
 
1092
 
    __storm_table__ = "suite_variable"
1093
 
    __storm_primary__ = "varid"
1094
 
 
1095
 
    varid = Int()
1096
 
    suiteid = Int()
1097
 
    var_name = Unicode()
1098
 
    var_value = Unicode()
1099
 
    var_type = Unicode()
1100
 
    arg_no = Int()
1101
 
 
1102
 
    suite = Reference(suiteid, "TestSuite.suiteid")
1103
 
 
1104
 
    __init__ = _kwarg_init
1105
 
 
1106
 
    def delete(self):
1107
 
        Store.of(self).remove(self)
1108
 
 
1109
 
class TestCasePart(Storm):
1110
 
    """An actual piece of code to test an exercise solution."""
1111
 
 
1112
 
    __storm_table__ = "test_case_part"
1113
 
    __storm_primary__ = "partid"
1114
 
 
1115
 
    partid = Int()
1116
 
    testid = Int()
1117
 
 
1118
 
    part_type = Unicode()
1119
 
    test_type = Unicode()
1120
 
    data = Unicode()
1121
 
    filename = Unicode()
1122
 
 
1123
 
    test = Reference(testid, "TestCase.testid")
1124
 
 
1125
 
    __init__ = _kwarg_init
1126
 
 
1127
 
    def delete(self):
1128
 
        Store.of(self).remove(self)