~loggerhead-team/loggerhead/trunk-rich

« back to all changes in this revision

Viewing changes to loggerhead/highlight.py

  • Committer: Michael Hudson
  • Date: 2008-06-16 10:03:24 UTC
  • mfrom: (159.1.7 remove_caches)
  • Revision ID: michael.hudson@canonical.com-20080616100324-dyzbdp3xk2i1g34a
merge martin's remove caches branch, which removes the sql revision cache and
the textindexing code.
we still have the files changed cache.
(some further changes by me)

Show diffs side-by-side

added added

removed removed

Lines of Context:
1
 
#
2
 
# Copyright (C) 2009  Peter Bui <pnutzh4x0r@gmail.com>
3
 
#
4
 
# This program is free software; you can redistribute it and/or modify
5
 
# it under the terms of the GNU General Public License as published by
6
 
# the Free Software Foundation; either version 2 of the License, or
7
 
# (at your option) any later version.
8
 
#
9
 
# This program is distributed in the hope that it will be useful,
10
 
# but WITHOUT ANY WARRANTY; without even the implied warranty of
11
 
# MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
12
 
# GNU General Public License for more details.
13
 
#
14
 
# You should have received a copy of the GNU General Public License
15
 
# along with this program; if not, write to the Free Software
16
 
# Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
17
 
#
18
 
 
19
 
import cgi
20
 
 
21
 
from pygments import highlight as _highlight_func
22
 
from pygments.lexers import guess_lexer, guess_lexer_for_filename, TextLexer
23
 
from pygments.formatters import HtmlFormatter
24
 
from pygments.util import ClassNotFound
25
 
 
26
 
DEFAULT_PYGMENT_STYLE = 'colorful'
27
 
 
28
 
# Trying to highlight very large files using pygments was killing
29
 
# loggerhead on launchpad.net, because pygments isn't very fast.
30
 
# So we only highlight files if they're 512K or smaller.
31
 
MAX_HIGHLIGHT_SIZE = 512000;
32
 
 
33
 
def highlight(path, text, encoding, style=DEFAULT_PYGMENT_STYLE):
34
 
    """
35
 
    Returns a list of highlighted (i.e. HTML formatted) strings.
36
 
    """
37
 
 
38
 
    if len(text) > MAX_HIGHLIGHT_SIZE:
39
 
        return map(cgi.escape, text.split('\n'))
40
 
 
41
 
    formatter = HtmlFormatter(style=style, nowrap=True, classprefix='pyg-')
42
 
 
43
 
    try:
44
 
        lexer = guess_lexer_for_filename(path, text[:1024], encoding=encoding)
45
 
    except (ClassNotFound, ValueError):
46
 
        try:
47
 
            lexer = guess_lexer(text[:1024], encoding=encoding)
48
 
        except (ClassNotFound, ValueError):
49
 
            lexer = TextLexer(encoding=encoding)
50
 
 
51
 
    hl_lines = _highlight_func(text, lexer, formatter).split('\n')
52
 
 
53
 
    return hl_lines