~azzar1/unity/add-show-desktop-key

« back to all changes in this revision

Viewing changes to ivle/makeuser.py

Require that plugins providing media subclass MediaPlugin.

Show diffs side-by-side

added added

removed removed

Lines of Context:
1
1
# IVLE - Informatics Virtual Learning Environment
2
 
# Copyright (C) 2007-2009 The University of Melbourne
 
2
# Copyright (C) 2007-2008 The University of Melbourne
3
3
#
4
4
# This program is free software; you can redistribute it and/or modify
5
5
# it under the terms of the GNU General Public License as published by
15
15
# along with this program; if not, write to the Free Software
16
16
# Foundation, Inc., 51 Franklin St, Fifth Floor, Boston, MA  02110-1301  USA
17
17
 
18
 
"""User and group filesystem management helpers."""
19
 
 
20
 
import hashlib
 
18
# Module: MakeUser
 
19
# Author: Matt Giuca
 
20
# Date:   1/2/2008
 
21
 
 
22
# Allows creation of users. This sets up the following:
 
23
# * User's jail and home directory within the jail.
 
24
# * Subversion repository (TODO)
 
25
# * Check out Subversion workspace into jail (TODO)
 
26
# * Database details for user
 
27
# * Unix user account
 
28
 
 
29
# TODO: Sanitize login name and other fields.
 
30
# Users must not be called "temp" or "template".
 
31
 
 
32
# TODO: When creating a new home directory, chown it to its owner
 
33
 
 
34
# TODO: In chown_to_webserver:
 
35
# Do not call os.system("chown www-data") - use Python lib
 
36
# and use the web server uid given in conf. (Several places).
 
37
 
 
38
import md5
21
39
import os
22
40
import stat
23
41
import shutil
24
42
import time
25
43
import uuid
26
44
import warnings
 
45
import filecmp
27
46
import logging
28
 
import subprocess
 
47
import ivle.conf
 
48
import ivle.pulldown_subj
29
49
 
30
 
import ivle.config
31
 
from ivle.database import ProjectGroup, User
 
50
from ivle.database import ProjectGroup
32
51
 
33
52
def chown_to_webserver(filename):
34
 
    """chown a directory and its contents to the web server.
35
 
 
36
 
    Recursively chowns a file or directory so the web server user owns it.
 
53
    """
 
54
    Chowns a file so the web server user owns it.
 
55
    (This is useful in setting up Subversion conf files).
37
56
    Assumes root.
38
57
    """
39
 
    subprocess.call(['chown', '-R', 'www-data:www-data', filename])
 
58
    try:
 
59
        os.system("chown -R www-data:www-data %s" % filename)
 
60
    except:
 
61
        pass
40
62
 
41
63
def make_svn_repo(path, throw_on_error=True):
42
 
    """Create a Subversion repository at the given path."""
 
64
    """Create a Subversion repository at the given path.
 
65
    """
43
66
    try:
44
 
        res = subprocess.call(['svnadmin', 'create', path])
 
67
        res = os.system("svnadmin create '%s'" % path)
45
68
        if res != 0 and throw_on_error:
46
69
            raise Exception("Cannot create repository: %s" % path)
47
70
    except Exception, exc:
51
74
 
52
75
    chown_to_webserver(path)
53
76
 
54
 
def rebuild_svn_config(store, config):
 
77
def rebuild_svn_config(store):
55
78
    """Build the complete SVN configuration file.
56
 
 
57
 
    @param config: An ivle.config.Config object.
58
79
    """
59
 
    users = store.find(User)
60
 
    conf_name = config['paths']['svn']['conf']
61
 
    temp_name = conf_name + ".new"
62
 
    f = open(temp_name, "w")
63
 
    f.write("""\
64
 
# IVLE SVN repository authorisation configuration
65
 
# Generated: %(time)s
66
 
""" % {'time': time.asctime()})
67
 
 
68
 
    for u in users:
69
 
        f.write("""
70
 
[%(login)s:/]
71
 
%(login)s = rw
72
 
""" % {'login': u.login})
73
 
 
 
80
    users = store.find(ivle.database.User)
 
81
    groups = {}
 
82
    for u in users:
 
83
        role = str(u.role)
 
84
        if role not in groups:
 
85
            groups[role] = []
 
86
        groups[role].append(u.login)
 
87
    f = open(ivle.conf.svn_conf + ".new", "w")
 
88
    f.write("# IVLE SVN Repositories Configuration\n")
 
89
    f.write("# Auto-generated on %s\n" % time.asctime())
 
90
    f.write("\n")
 
91
    f.write("[groups]\n")
 
92
    for (g,ls) in groups.iteritems():
 
93
        f.write("%s = %s\n" % (g, ",".join(ls)))
 
94
    f.write("\n")
 
95
    for u in users:
 
96
        f.write("[%s:/]\n" % u.login)
 
97
        f.write("%s = rw\n" % u.login)
 
98
        #f.write("@tutor = r\n")
 
99
        #f.write("@lecturer = rw\n")
 
100
        #f.write("@admin = rw\n")
 
101
        f.write("\n")
74
102
    f.close()
75
 
    os.rename(temp_name, conf_name)
76
 
    chown_to_webserver(conf_name)
 
103
    os.rename(ivle.conf.svn_conf + ".new", ivle.conf.svn_conf)
 
104
    chown_to_webserver(ivle.conf.svn_conf)
77
105
 
78
 
def rebuild_svn_group_config(store, config):
 
106
def rebuild_svn_group_config(store):
79
107
    """Build the complete SVN configuration file for groups
80
 
 
81
 
    @param config: An ivle.config.Config object.
82
108
    """
83
 
    conf_name = config['paths']['svn']['group_conf']
84
 
    temp_name = conf_name + ".new"
85
 
    f = open(temp_name, "w")
86
 
 
87
 
    f.write("""\
88
 
# IVLE SVN group repository authorisation configuration
89
 
# Generated: %(time)s
90
 
 
91
 
""" % {'time': time.asctime()})
92
 
 
 
109
    f = open(ivle.conf.svn_group_conf + ".new", "w")
 
110
    f.write("# IVLE SVN Group Repositories Configuration\n")
 
111
    f.write("# Auto-generated on %s\n" % time.asctime())
 
112
    f.write("\n")
93
113
    for group in store.find(ProjectGroup):
94
114
        offering = group.project_set.offering
95
115
        reponame = "_".join([offering.subject.short_name,
96
116
                             offering.semester.year,
97
117
                             offering.semester.semester,
98
118
                             group.name])
99
 
 
100
 
        f.write("[%s:/]\n" % reponame)
 
119
        f.write("[%s:/]\n"%reponame)
101
120
        for user in group.members:
102
121
            f.write("%s = rw\n" % user.login)
103
122
        f.write("\n")
104
 
 
105
123
    f.close()
106
 
    os.rename(temp_name, conf_name)
107
 
    chown_to_webserver(conf_name)
108
 
 
109
 
def make_svn_auth(store, login, config, throw_on_error=True):
110
 
    """Create a Subversion password for a user.
111
 
 
112
 
    Generates a new random Subversion password, and assigns it to the user.
113
 
    The password is added to Apache's Subversion authentication file.
 
124
    os.rename(ivle.conf.svn_group_conf + ".new", ivle.conf.svn_group_conf)
 
125
    chown_to_webserver(ivle.conf.svn_group_conf)
 
126
 
 
127
def make_svn_auth(store, login, throw_on_error=True):
 
128
    """Setup svn authentication for the given user.
 
129
       Uses the given DB store object. Does not commit to the db.
114
130
    """
115
 
    # filename is, eg, /var/lib/ivle/svn/ivle.auth
116
 
    filename = config['paths']['svn']['auth_ivle']
117
 
    passwd = hashlib.md5(uuid.uuid4().bytes).hexdigest()
118
 
    if os.path.exists(filename):
 
131
    passwd = md5.new(uuid.uuid4().bytes).digest().encode('hex')
 
132
    if os.path.exists(ivle.conf.svn_auth_ivle):
119
133
        create = ""
120
134
    else:
121
135
        create = "c"
122
136
 
123
 
    user = User.get_by_login(store, login)
 
137
    user = ivle.database.User.get_by_login(store, login)
124
138
    user.svn_pass = unicode(passwd)
125
139
 
126
 
    res = subprocess.call(['htpasswd', '-%smb' % create,
127
 
                           filename, login, passwd])
 
140
    res = os.system("htpasswd -%smb %s %s %s" % (create,
 
141
                                              ivle.conf.svn_auth_ivle,
 
142
                                              login, passwd))
128
143
    if res != 0 and throw_on_error:
129
144
        raise Exception("Unable to create ivle-auth for %s" % login)
130
145
 
131
146
    # Make sure the file is owned by the web server
132
147
    if create == "c":
133
 
        chown_to_webserver(filename)
 
148
        chown_to_webserver(ivle.conf.svn_auth_ivle)
134
149
 
135
150
    return passwd
136
151
 
137
 
def make_jail(user, config, force=True):
138
 
    """Create or update a user's jail.
139
 
 
140
 
    Only the user-specific parts of the jail are created here - everything
141
 
    else is expected to be part of another aufs branch.
 
152
def generate_manifest(basedir, targetdir, parent=''):
 
153
    """ From a basedir and a targetdir work out which files are missing or out 
 
154
    of date and need to be added/updated and which files are redundant and need 
 
155
    to be removed.
 
156
    
 
157
    parent: This is used for the recursive call to track the relative paths 
 
158
    that we have decended.
 
159
    """
 
160
    
 
161
    cmp = filecmp.dircmp(basedir, targetdir)
 
162
 
 
163
    # Add all new files and files that have changed
 
164
    to_add = [os.path.join(parent,x) for x in (cmp.left_only + cmp.diff_files)]
 
165
 
 
166
    # Remove files that are redundant
 
167
    to_remove = [os.path.join(parent,x) for x in cmp.right_only]
 
168
    
 
169
    # Recurse
 
170
    for d in cmp.common_dirs:
 
171
        newbasedir = os.path.join(basedir, d)
 
172
        newtargetdir = os.path.join(targetdir, d)
 
173
        newparent = os.path.join(parent, d)
 
174
        (sadd,sremove) = generate_manifest(newbasedir, newtargetdir, newparent)
 
175
        to_add += sadd
 
176
        to_remove += sremove
 
177
 
 
178
    return (to_add, to_remove)
 
179
 
 
180
 
 
181
def make_jail(user, force=True):
 
182
    """Creates a new user's jail space, in the jail directory as configured in
 
183
    conf.py.
 
184
 
 
185
    This only creates things within /home - everything else is expected to be
 
186
    part of another UnionFS branch.
142
187
 
143
188
    Returns the path to the user's home directory.
144
189
 
145
190
    Chowns the user's directory within the jail to the given UID.
146
191
 
147
 
    @param force: If False, raise an exception if the user already has a jail.
148
 
                  If True (default), rebuild the jail preserving /home.
 
192
    force: If false, exception if jail already exists for this user.
 
193
    If true (default), overwrites it, but preserves home directory.
149
194
    """
150
195
    # MUST run as root or some of this may fail
151
196
    if os.getuid() != 0:
152
197
        raise Exception("Must run make_jail as root")
153
198
    
154
199
    # tempdir is for putting backup homes in
155
 
    jail_src_base = config['paths']['jails']['src']
156
 
    tempdir = os.path.join(jail_src_base, '__temp__')
 
200
    tempdir = os.path.join(ivle.conf.jail_base, '__temp__')
157
201
    if not os.path.exists(tempdir):
158
202
        os.makedirs(tempdir)
159
203
    elif not os.path.isdir(tempdir):
160
204
        os.unlink(tempdir)
161
205
        os.mkdir(tempdir)
162
 
    userdir = os.path.join(jail_src_base, user.login)
 
206
    userdir = os.path.join(ivle.conf.jail_src_base, user.login)
163
207
    homedir = os.path.join(userdir, 'home')
164
208
    userhomedir = os.path.join(homedir, user.login)   # Return value
165
209
 
173
217
        warnings.simplefilter('ignore')
174
218
        homebackup = os.tempnam(tempdir)
175
219
        warnings.resetwarnings()
176
 
        # Back up the /home directory, delete the entire jail, recreate the
177
 
        # jail directory tree, then copy the /home back
178
 
        # NOTE that shutil.move changed in Python 2.6, it now moves a
179
 
        # directory INTO the target (like `mv`), which it didn't use to do.
180
 
        # This code works regardless.
 
220
        # Note: shutil.move does not behave like "mv" - it does not put a file
 
221
        # into a directory if it already exists, just fails. Therefore it is
 
222
        # not susceptible to tmpnam symlink attack.
181
223
        shutil.move(homedir, homebackup)
182
224
        shutil.rmtree(userdir)
183
 
        os.makedirs(userdir)
 
225
        os.makedirs(homedir)
184
226
        shutil.move(homebackup, homedir)
185
227
        # Change the ownership of all the files to the right unixid
186
228
        logging.debug("chown %s's home directory files to uid %d"
187
229
            %(user.login, user.unixid))
188
 
        os.spawnvp(os.P_WAIT, 'chown', ['chown', '-R', '%d:%d' % (user.unixid,
189
 
                                        user.unixid), userhomedir])
 
230
        os.chown(userhomedir, user.unixid, user.unixid)
 
231
        for root, dirs, files in os.walk(userhomedir):
 
232
            for fsobj in dirs + files:
 
233
                os.chown(os.path.join(root, fsobj), user.unixid, user.unixid)
190
234
    else:
191
235
        # No user jail exists
192
236
        # Set up the user's home directory
196
240
        # Chmod to rwxr-xr-x (755)
197
241
        os.chmod(userhomedir, 0755)
198
242
 
199
 
    make_ivle_conf(user.login, userdir, user.svn_pass, config)
200
 
    make_etc_passwd(user.login, userdir, config['paths']['jails']['template'],
201
 
                    user.unixid)
 
243
    make_conf_py(user.login, userdir, ivle.conf.jail_system, user.svn_pass)
 
244
    make_etc_passwd(user.login, userdir, ivle.conf.jail_system, user.unixid)
202
245
 
203
246
    return userhomedir
204
247
 
205
 
def make_ivle_conf(username, user_jail_dir, svn_pass, sys_config):
206
 
    """Generate an ivle.conf for a user's jail.
207
 
 
 
248
def make_conf_py(username, user_jail_dir, staging_dir, svn_pass):
 
249
    """
208
250
    Creates (overwriting any existing file, and creating directories) a
209
 
    file /etc/ivle/ivle.conf in a given user's jail.
210
 
 
211
 
    @param username: Username.
212
 
    @param user_jail_dir: User's jail dir, ie. ['jails']['src'] + username
213
 
    @param svn_pass: User's SVN password.
214
 
    @param sys_config: An ivle.config.Config object (the system-wide config).
 
251
    file ${python_site_packages}/ivle/conf/conf.py in a given user's jail.
 
252
    username: Username.
 
253
    user_jail_dir: User's jail dir, ie. ivle.conf.jail_base + username
 
254
    staging_dir: The dir with the staging copy of the jail. (With the
 
255
        template conf.py file).
 
256
    svn_pass: As with make_jail. User's SVN password, but if not supplied,
 
257
        will look up in the DB.
215
258
    """
216
 
    conf_path = os.path.join(user_jail_dir, "etc/ivle/ivle.conf")
 
259
    template_conf_path = os.path.join(staging_dir,
 
260
            ivle.conf.python_site_packages[1:], "ivle/conf/conf.py")
 
261
    conf_path = os.path.join(user_jail_dir,
 
262
            ivle.conf.python_site_packages[1:], "ivle/conf/conf.py")
217
263
    os.makedirs(os.path.dirname(conf_path))
218
264
 
219
 
    # In the "in-jail" version of conf, we don't need MOST of the details
220
 
    # (it would be a security risk to have them here).
221
 
    # So we just write root_dir.
222
 
    conf_obj = ivle.config.Config(blank=True)
223
 
    conf_obj.filename = conf_path
224
 
    conf_obj['urls']['root'] = sys_config['urls']['root']
225
 
    conf_obj['urls']['public_host'] = sys_config['urls']['public_host']
226
 
    conf_obj['urls']['svn_addr'] = sys_config['urls']['svn_addr']
227
 
    conf_obj['user_info']['login'] = username
228
 
    conf_obj['user_info']['svn_pass'] = svn_pass
229
 
    conf_obj.write()
 
265
    # Read the contents of the template conf file
 
266
    try:
 
267
        template_conf_file = open(template_conf_path, "r")
 
268
        template_conf_data = template_conf_file.read()
 
269
        template_conf_file.close()
 
270
    except:
 
271
        # Couldn't open template conf.py for some reason
 
272
        # Just treat it as empty file
 
273
        template_conf_data = ("# Warning: Problem building config script.\n"
 
274
                              "# Could not find template conf.py file.\n")
 
275
 
 
276
    conf_file = open(conf_path, "w")
 
277
    conf_file.write(template_conf_data)
 
278
    conf_file.write("\n# The login name for the owner of the jail\n")
 
279
    conf_file.write("login = %s\n" % repr(username))
 
280
    conf_file.write("\n")
 
281
    conf_file.write("# The subversion-only password for the owner of "
 
282
        "the jail\n")
 
283
    conf_file.write("svn_pass = %s\n" % repr(svn_pass))
 
284
    conf_file.close()
230
285
 
231
286
    # Make this file world-readable
232
287
    # (chmod 644 conf_path)
234
289
                        | stat.S_IROTH)
235
290
 
236
291
def make_etc_passwd(username, user_jail_dir, template_dir, unixid):
237
 
    """Create a passwd file for a user's jail.
238
 
 
 
292
    """
239
293
    Creates /etc/passwd in the given user's jail. This will be identical to
240
294
    that in the template jail, except for the added entry for this user.
241
295
    """
249
303
    passwd_file.write('%s:x:%d:%d::/home/%s:/bin/bash'
250
304
                      % (username, unixid, unixid, username))
251
305
    passwd_file.close()
 
306
 
 
307
def mount_jail(login):
 
308
    # This is where we'll mount to...
 
309
    destdir = os.path.join(ivle.conf.jail_base, login)
 
310
    # ... and this is where we'll get the user bits.
 
311
    srcdir = os.path.join(ivle.conf.jail_src_base, login)
 
312
    try:
 
313
        if not os.path.exists(destdir):
 
314
            os.mkdir(destdir)
 
315
        if os.system('/bin/mount -t aufs -o dirs=%s:%s=ro none %s'
 
316
                     % (srcdir, ivle.conf.jail_system, destdir)) == 0:
 
317
            logging.info("mounted user %s's jail." % login)
 
318
        else:
 
319
            logging.error("failed to mount user %s's jail!" % login)
 
320
    except Exception, message:
 
321
        logging.warning(str(message))