← Back to branch summary

~unity-2d-team/unity-2d/Shell-MultiMonitor

« back to all changes in this revision

Viewing changes to grackle/tests/test_model.py

  • Committer: William Grant
  • Date: 2012-01-23 00:16:32 UTC
  • Revision ID: william.grant@canonical.com-20120123001632-z6dig91md7qu91f6
Date filtering.

Show diffs side-by-side

added added

removed removed

Lines of Context:
grackle/tests/test_model.py
16
16
 
17
17
__metaclass__ = type
18
18
 
19
 
import fixtures
20
 
 
21
 
from grackle.server.testing.cassandra import TemporaryDB
22
 
from grackle.server.model import CassandraConnection
23
 
 
24
 
 
25
 
TEST_MESSAGE = """\
 
19
import datetime
 
20
from email.utils import formatdate
 
21
import os
 
22
from tempfile import _RandomNameSequence
 
23
import time
 
24
import unittest
 
25
import uuid
 
26
 
 
27
from dateutil.tz import (
 
28
    tzoffset,
 
29
    tzutc,
 
30
    )
 
31
from pycassa.util import convert_uuid_to_time
 
32
 
 
33
from grackle.model import (
 
34
    CassandraConnection,
 
35
    _parse_message,
 
36
    )
 
37
 
 
38
 
 
39
TEMPLATE_MESSAGE = """\
26
40
From: sysadmin@example.com
27
41
To: developer@example.com
28
42
Subject: Everything is broken
29
 
Date: Sat, 1 Jan 2000 11:02:34 +1100
30
 
Message-Id: <aaaaaaaaaaaaa@example.com>
 
43
Date: {date}
 
44
Message-Id: {id}
31
45
 
32
46
Help, everything has just broken.
33
47
"""
34
48
 
35
 
 
36
 
class TestModel(fixtures.TestWithFixtures):
37
 
 
38
 
    def test_add_message(self):
39
 
        keyspace = self.useFixture(TemporaryDB()).keyspace
40
 
        c = CassandraConnection(keyspace, ['localhost:9160'])
41
 
        c.add_message('foo', TEST_MESSAGE)
42
 
 
43
 
 
44
 
class TestModel(fixtures.TestWithFixtures):
45
 
 
46
 
    def test_add_message(self):
47
 
        keyspace = self.useFixture(TemporaryDB()).keyspace
48
 
        c = CassandraConnection(keyspace, ['localhost:9160'])
49
 
        key = c.add_message('foo', TEST_MESSAGE)
 
49
TEST_MESSAGE = TEMPLATE_MESSAGE.format(
 
50
    date='Sat, 1 Jan 2000 11:02:34 +1100',
 
51
    id='<aaaaaaaaaaaaa@example.com>')
 
52
 
 
53
 
 
54
class TestParseMessage(unittest.TestCase):
 
55
 
 
56
    def test_works(self):
 
57
        # _parse_message extracts interesting fields. It also parses the
 
58
        # date and returns it separately.
 
59
        date, msg = _parse_message(TEST_MESSAGE)
 
60
        self.assertEqual('sysadmin@example.com', msg['from'])
 
61
        self.assertEqual('developer@example.com', msg['to'])
 
62
        self.assertEqual('Everything is broken', msg['subject'])
 
63
        self.assertEqual('2000-01-01T11:02:34+11:00', msg['date'])
 
64
        self.assertEqual('<aaaaaaaaaaaaa@example.com>', msg['message-id'])
 
65
        self.assertEqual(
 
66
            datetime.datetime(
 
67
                2000, 1, 1, 11, 2, 34, tzinfo=tzoffset('', 39600)),
 
68
            date)
 
69
 
 
70
 
 
71
class TestAddMessage(unittest.TestCase):
 
72
 
 
73
    def test_add_message(self):
 
74
        c = CassandraConnection(
 
75
            os.environ['GRACKLE_TEST_KEYSPACE'], ['localhost:9160'])
 
76
        archive = next(_RandomNameSequence())
 
77
 
 
78
        # Write the message out to Cassandra, and read it back in.
 
79
        key = c.add_message(archive, TEST_MESSAGE)
50
80
        cmsg = c.messages.get(key)
 
81
 
 
82
        # The archive should contain a single message, a reference to
 
83
        # our new key.
 
84
        archive_messages = c.archive_messages.get(archive).items()
 
85
        self.assertEqual(1, len(archive_messages))
 
86
        self.assertEqual(key, archive_messages[0][1])
 
87
 
 
88
        # The key in archive_message is a TimeUUID for the Date field in
 
89
        # the message. There is no UTC equivalent of time.mktime, so we
 
90
        # must subtract the offset.
 
91
        utctime = time.mktime(datetime.datetime(
 
92
            2000, 1, 1, 0, 2, 34, tzinfo=tzutc()).timetuple()) - time.timezone
 
93
        self.assertEqual(
 
94
            utctime,
 
95
            convert_uuid_to_time(archive_messages[0][0]))
 
96
 
 
97
        # The stored message contains the full original text of the
 
98
        # message, as well as interesting fields parsed out.
51
99
        self.assertEqual(TEST_MESSAGE, cmsg['content'])
52
 
        self.assertEqual('sysadmin@example.com', cmsg['from'])
53
 
        self.assertEqual('developer@example.com', cmsg['to'])
54
 
        self.assertEqual('Everything is broken', cmsg['subject'])
55
 
        self.assertEqual('2000-01-01T11:02:34+11:00', cmsg['date'])
56
 
        self.assertEqual('<aaaaaaaaaaaaa@example.com>', cmsg['message-id'])
 
100
        parsed_message = _parse_message(TEST_MESSAGE)[1]
 
101
        for key, value in parsed_message.iteritems():
 
102
            self.assertEqual(value, cmsg[key])
 
103
 
 
104
 
 
105
class TestGetMessages(unittest.TestCase):
 
106
 
 
107
    def assertMessages(self, expected_ids, messages):
 
108
        expected_msgids = [
 
109
            '<message%d@example.com>' % id for id in expected_ids]
 
110
        actual_msgids = [msg['message-id'] for msg in messages]
 
111
        self.assertEqual(expected_msgids, actual_msgids)
 
112
 
 
113
    def makeMessages(self, conn, archive, count):
 
114
        return [
 
115
            conn.add_message(
 
116
                archive,
 
117
                TEMPLATE_MESSAGE.format(
 
118
                    date=formatdate(i * 100),
 
119
                    id='<message%d@example.com>' % i))
 
120
            for i in range(count)]
 
121
 
 
122
    def makeArchive(self):
 
123
        conn = CassandraConnection(
 
124
            os.environ['GRACKLE_TEST_KEYSPACE'], ['localhost:9160'])
 
125
        archive = next(_RandomNameSequence())
 
126
        return conn, archive
 
127
 
 
128
    def test_single_message(self):
 
129
        conn, archive = self.makeArchive()
 
130
        self.makeMessages(conn, archive, 1)
 
131
        self.assertMessages(
 
132
            [0], conn.get_messages(archive, 'date', 1, '')[1])
 
133
 
 
134
    def test_limit(self):
 
135
        conn, archive = self.makeArchive()
 
136
        self.makeMessages(conn, archive, 4)
 
137
        self.assertMessages(
 
138
            [0, 1], conn.get_messages(archive, 'date', 2, '')[1])
 
139
 
 
140
    def test_order(self):
 
141
        conn, archive = self.makeArchive()
 
142
        self.makeMessages(conn, archive, 4)
 
143
        self.assertMessages(
 
144
            [3, 2], conn.get_messages(archive, '-date', 2, '')[1])
 
145
 
 
146
    def test_batching_forward(self):
 
147
        conn, archive = self.makeArchive()
 
148
        self.makeMessages(conn, archive, 5)
 
149
        prev, messages, next = conn.get_messages(archive, 'date', 2, '')
 
150
        self.assertMessages([0, 1], messages)
 
151
        prev, messages, next = conn.get_messages(archive, 'date', 2, next)
 
152
        self.assertMessages([2, 3], messages)
 
153
        prev, messages, next = conn.get_messages(archive, 'date', 2, next)
 
154
        self.assertMessages([4], messages)
 
155
        prev, messages, next = conn.get_messages(archive, 'date', 2, next)
 
156
        self.assertIs(None, prev)
 
157
        self.assertMessages([], messages)
 
158
        self.assertIs(None, next)
 
159
 
 
160
    def test_batching_backward(self):
 
161
        conn, archive = self.makeArchive()
 
162
        self.makeMessages(conn, archive, 5)
 
163
        prev, messages, next = conn.get_messages(archive, 'date', 2, '')
 
164
        self.assertMessages([0, 1], messages)
 
165
        prev, messages, next = conn.get_messages(archive, 'date', 2, next)
 
166
        self.assertMessages([2, 3], messages)
 
167
        prev, messages, next = conn.get_messages(
 
168
            archive, 'date', 2, prev, backward=True)
 
169
        self.assertMessages([0, 1], messages)
 
170
        prev, messages, next = conn.get_messages(
 
171
            archive, 'date', 2, prev, backward=True)
 
172
        self.assertIs(None, prev)
 
173
        self.assertMessages([], messages)
 
174
        self.assertIs(None, next)
 
175
 
 
176
    def test_date_filter(self):
 
177
        conn, archive = self.makeArchive()
 
178
        self.makeMessages(conn, archive, 10)
 
179
        start = datetime.datetime.utcfromtimestamp(250).replace(
 
180
            tzinfo=tzutc())
 
181
        finish = datetime.datetime.utcfromtimestamp(500).replace(
 
182
            tzinfo=tzutc())
 
183
        prev, messages, next = conn.get_messages(
 
184
            archive, 'date', 2, '', start_date=start, finish_date=finish)
 
185
        self.assertMessages([3, 4], messages)
 
186
        prev, messages, next = conn.get_messages(
 
187
            archive, 'date', 2, next, start_date=start, finish_date=finish)
 
188
        self.assertMessages([5], messages)