]> git.madduck.net Git - etc/taskwarrior.git/blob - tasklib/task.py

madduck's git repository

Every one of the projects in this repository is available at the canonical URL git://git.madduck.net/madduck/pub/<projectpath> — see each project's metadata for the exact URL.

All patches and comments are welcome. Please squash your changes to logical commits before using git-format-patch and git-send-email to patches@git.madduck.net. If you'd read over the Git project's submission guidelines and adhered to them, I'd be especially grateful.

SSH access, as well as push access can be individually arranged.

If you use my repositories frequently, consider adding the following snippet to ~/.gitconfig and using the third clone URL listed for each project:

[url "git://git.madduck.net/madduck/"]
  insteadOf = madduck:

d39c10c24387bbe6a1de5feed397779c34aba32f
[etc/taskwarrior.git] / tasklib / task.py
1 from __future__ import print_function
2 import copy
3 import datetime
4 import json
5 import logging
6 import os
7 import pytz
8 import six
9 import sys
10 import tzlocal
11
12 from backends import TaskWarrior, TaskWarriorException
13
14 DATE_FORMAT = '%Y%m%dT%H%M%SZ'
15 DATE_FORMAT_CALC = '%Y-%m-%dT%H:%M:%S'
16 REPR_OUTPUT_SIZE = 10
17 PENDING = 'pending'
18 COMPLETED = 'completed'
19
20 logger = logging.getLogger(__name__)
21 local_zone = tzlocal.get_localzone()
22
23
24 class ReadOnlyDictView(object):
25     """
26     Provides simplified read-only view upon dict object.
27     """
28
29     def __init__(self, viewed_dict):
30         self.viewed_dict = viewed_dict
31
32     def __getitem__(self, key):
33         return copy.deepcopy(self.viewed_dict.__getitem__(key))
34
35     def __contains__(self, k):
36         return self.viewed_dict.__contains__(k)
37
38     def __iter__(self):
39         for value in self.viewed_dict:
40             yield copy.deepcopy(value)
41
42     def __len__(self):
43         return len(self.viewed_dict)
44
45     def get(self, key, default=None):
46         return copy.deepcopy(self.viewed_dict.get(key, default))
47
48     def items(self):
49         return [copy.deepcopy(v) for v in self.viewed_dict.items()]
50
51     def values(self):
52         return [copy.deepcopy(v) for v in self.viewed_dict.values()]
53
54
55 class SerializingObject(object):
56     """
57     Common ancestor for TaskResource & TaskWarriorFilter, since they both
58     need to serialize arguments.
59
60     Serializing method should hold the following contract:
61       - any empty value (meaning removal of the attribute)
62         is deserialized into a empty string
63       - None denotes a empty value for any attribute
64
65     Deserializing method should hold the following contract:
66       - None denotes a empty value for any attribute (however,
67         this is here as a safeguard, TaskWarrior currently does
68         not export empty-valued attributes) if the attribute
69         is not iterable (e.g. list or set), in which case
70         a empty iterable should be used.
71
72     Normalizing methods should hold the following contract:
73       - They are used to validate and normalize the user input.
74         Any attribute value that comes from the user (during Task
75         initialization, assignign values to Task attributes, or
76         filtering by user-provided values of attributes) is first
77         validated and normalized using the normalize_{key} method.
78       - If validation or normalization fails, normalizer is expected
79         to raise ValueError.
80     """
81
82     def __init__(self, warrior):
83         self.warrior = warrior
84
85     def _deserialize(self, key, value):
86         hydrate_func = getattr(self, 'deserialize_{0}'.format(key),
87                                lambda x: x if x != '' else None)
88         return hydrate_func(value)
89
90     def _serialize(self, key, value):
91         dehydrate_func = getattr(self, 'serialize_{0}'.format(key),
92                                  lambda x: x if x is not None else '')
93         return dehydrate_func(value)
94
95     def _normalize(self, key, value):
96         """
97         Use normalize_<key> methods to normalize user input. Any user
98         input will be normalized at the moment it is used as filter,
99         or entered as a value of Task attribute.
100         """
101
102         # None value should not be converted by normalizer
103         if value is None:
104             return None
105
106         normalize_func = getattr(self, 'normalize_{0}'.format(key),
107                                  lambda x: x)
108
109         return normalize_func(value)
110
111     def timestamp_serializer(self, date):
112         if not date:
113             return ''
114
115         # Any serialized timestamp should be localized, we need to
116         # convert to UTC before converting to string (DATE_FORMAT uses UTC)
117         date = date.astimezone(pytz.utc)
118
119         return date.strftime(DATE_FORMAT)
120
121     def timestamp_deserializer(self, date_str):
122         if not date_str:
123             return None
124
125         # Return timestamp localized in the local zone
126         naive_timestamp = datetime.datetime.strptime(date_str, DATE_FORMAT)
127         localized_timestamp = pytz.utc.localize(naive_timestamp)
128         return localized_timestamp.astimezone(local_zone)
129
130     def serialize_entry(self, value):
131         return self.timestamp_serializer(value)
132
133     def deserialize_entry(self, value):
134         return self.timestamp_deserializer(value)
135
136     def normalize_entry(self, value):
137         return self.datetime_normalizer(value)
138
139     def serialize_modified(self, value):
140         return self.timestamp_serializer(value)
141
142     def deserialize_modified(self, value):
143         return self.timestamp_deserializer(value)
144
145     def normalize_modified(self, value):
146         return self.datetime_normalizer(value)
147
148     def serialize_start(self, value):
149         return self.timestamp_serializer(value)
150
151     def deserialize_start(self, value):
152         return self.timestamp_deserializer(value)
153
154     def normalize_start(self, value):
155         return self.datetime_normalizer(value)
156
157     def serialize_end(self, value):
158         return self.timestamp_serializer(value)
159
160     def deserialize_end(self, value):
161         return self.timestamp_deserializer(value)
162
163     def normalize_end(self, value):
164         return self.datetime_normalizer(value)
165
166     def serialize_due(self, value):
167         return self.timestamp_serializer(value)
168
169     def deserialize_due(self, value):
170         return self.timestamp_deserializer(value)
171
172     def normalize_due(self, value):
173         return self.datetime_normalizer(value)
174
175     def serialize_scheduled(self, value):
176         return self.timestamp_serializer(value)
177
178     def deserialize_scheduled(self, value):
179         return self.timestamp_deserializer(value)
180
181     def normalize_scheduled(self, value):
182         return self.datetime_normalizer(value)
183
184     def serialize_until(self, value):
185         return self.timestamp_serializer(value)
186
187     def deserialize_until(self, value):
188         return self.timestamp_deserializer(value)
189
190     def normalize_until(self, value):
191         return self.datetime_normalizer(value)
192
193     def serialize_wait(self, value):
194         return self.timestamp_serializer(value)
195
196     def deserialize_wait(self, value):
197         return self.timestamp_deserializer(value)
198
199     def normalize_wait(self, value):
200         return self.datetime_normalizer(value)
201
202     def serialize_annotations(self, value):
203         value = value if value is not None else []
204
205         # This may seem weird, but it's correct, we want to export
206         # a list of dicts as serialized value
207         serialized_annotations = [json.loads(annotation.export_data())
208                                   for annotation in value]
209         return serialized_annotations if serialized_annotations else ''
210
211     def deserialize_annotations(self, data):
212         return [TaskAnnotation(self, d) for d in data] if data else []
213
214     def serialize_tags(self, tags):
215         return ','.join(tags) if tags else ''
216
217     def deserialize_tags(self, tags):
218         if isinstance(tags, six.string_types):
219             return tags.split(',') if tags else []
220         return tags or []
221
222     def serialize_depends(self, value):
223         # Return the list of uuids
224         value = value if value is not None else set()
225         return ','.join(task['uuid'] for task in value)
226
227     def deserialize_depends(self, raw_uuids):
228         raw_uuids = raw_uuids or []  # Convert None to empty list
229
230         # TW 2.4.4 encodes list of dependencies as a single string
231         if type(raw_uuids) is not list:
232             uuids = raw_uuids.split(',')
233         # TW 2.4.5 and later exports them as a list, no conversion needed
234         else:
235             uuids = raw_uuids
236
237         return set(self.warrior.tasks.get(uuid=uuid) for uuid in uuids if uuid)
238
239     def datetime_normalizer(self, value):
240         """
241         Normalizes date/datetime value (considered to come from user input)
242         to localized datetime value. Following conversions happen:
243
244         naive date -> localized datetime with the same date, and time=midnight
245         naive datetime -> localized datetime with the same value
246         localized datetime -> localized datetime (no conversion)
247         """
248
249         if (isinstance(value, datetime.date)
250             and not isinstance(value, datetime.datetime)):
251             # Convert to local midnight
252             value_full = datetime.datetime.combine(value, datetime.time.min)
253             localized = local_zone.localize(value_full)
254         elif isinstance(value, datetime.datetime):
255             if value.tzinfo is None:
256                 # Convert to localized datetime object
257                 localized = local_zone.localize(value)
258             else:
259                 # If the value is already localized, there is no need to change
260                 # time zone at this point. Also None is a valid value too.
261                 localized = value
262         elif (isinstance(value, six.string_types)
263                 and self.warrior.version >= VERSION_2_4_0):
264             # For strings, use 'task calc' to evaluate the string to datetime
265             # available since TW 2.4.0
266             args = value.split()
267             result = self.warrior.execute_command(['calc'] + args)
268             naive = datetime.datetime.strptime(result[0], DATE_FORMAT_CALC)
269             localized = local_zone.localize(naive)
270         else:
271             raise ValueError("Provided value could not be converted to "
272                              "datetime, its type is not supported: {}"
273                              .format(type(value)))
274
275         return localized
276
277     def normalize_uuid(self, value):
278         # Enforce sane UUID
279         if not isinstance(value, six.string_types) or value == '':
280             raise ValueError("UUID must be a valid non-empty string, "
281                              "not: {}".format(value))
282
283         return value
284
285
286 class TaskResource(SerializingObject):
287     read_only_fields = []
288
289     def _load_data(self, data):
290         self._data = dict((key, self._deserialize(key, value))
291                           for key, value in data.items())
292         # We need to use a copy for original data, so that changes
293         # are not propagated.
294         self._original_data = copy.deepcopy(self._data)
295
296     def _update_data(self, data, update_original=False, remove_missing=False):
297         """
298         Low level update of the internal _data dict. Data which are coming as
299         updates should already be serialized. If update_original is True, the
300         original_data dict is updated as well.
301         """
302         self._data.update(dict((key, self._deserialize(key, value))
303                                for key, value in data.items()))
304
305         # In certain situations, we want to treat missing keys as removals
306         if remove_missing:
307             for key in set(self._data.keys()) - set(data.keys()):
308                 self._data[key] = None
309
310         if update_original:
311             self._original_data = copy.deepcopy(self._data)
312
313
314     def __getitem__(self, key):
315         # This is a workaround to make TaskResource non-iterable
316         # over simple index-based iteration
317         try:
318             int(key)
319             raise StopIteration
320         except ValueError:
321             pass
322
323         if key not in self._data:
324             self._data[key] = self._deserialize(key, None)
325
326         return self._data.get(key)
327
328     def __setitem__(self, key, value):
329         if key in self.read_only_fields:
330             raise RuntimeError('Field \'%s\' is read-only' % key)
331
332         # Normalize the user input before saving it
333         value = self._normalize(key, value)
334         self._data[key] = value
335
336     def __str__(self):
337         s = six.text_type(self.__unicode__())
338         if not six.PY3:
339             s = s.encode('utf-8')
340         return s
341
342     def __repr__(self):
343         return str(self)
344
345     def export_data(self):
346         """
347         Exports current data contained in the Task as JSON
348         """
349
350         # We need to remove spaces for TW-1504, use custom separators
351         data_tuples = ((key, self._serialize(key, value))
352                        for key, value in six.iteritems(self._data))
353
354         # Empty string denotes empty serialized value, we do not want
355         # to pass that to TaskWarrior.
356         data_tuples = filter(lambda t: t[1] is not '', data_tuples)
357         data = dict(data_tuples)
358         return json.dumps(data, separators=(',',':'))
359
360     @property
361     def _modified_fields(self):
362         writable_fields = set(self._data.keys()) - set(self.read_only_fields)
363         for key in writable_fields:
364             new_value = self._data.get(key)
365             old_value = self._original_data.get(key)
366
367             # Make sure not to mark data removal as modified field if the
368             # field originally had some empty value
369             if key in self._data and not new_value and not old_value:
370                 continue
371
372             if new_value != old_value:
373                 yield key
374
375     @property
376     def modified(self):
377         return bool(list(self._modified_fields))
378
379
380 class TaskAnnotation(TaskResource):
381     read_only_fields = ['entry', 'description']
382
383     def __init__(self, task, data=None):
384         self.task = task
385         self._load_data(data or dict())
386         super(TaskAnnotation, self).__init__(task.warrior)
387
388     def remove(self):
389         self.task.remove_annotation(self)
390
391     def __unicode__(self):
392         return self['description']
393
394     def __eq__(self, other):
395         # consider 2 annotations equal if they belong to the same task, and
396         # their data dics are the same
397         return self.task == other.task and self._data == other._data
398
399     __repr__ = __unicode__
400
401
402 class Task(TaskResource):
403     read_only_fields = ['id', 'entry', 'urgency', 'uuid', 'modified']
404
405     class DoesNotExist(Exception):
406         pass
407
408     class CompletedTask(Exception):
409         """
410         Raised when the operation cannot be performed on the completed task.
411         """
412         pass
413
414     class DeletedTask(Exception):
415         """
416         Raised when the operation cannot be performed on the deleted task.
417         """
418         pass
419
420     class ActiveTask(Exception):
421         """
422         Raised when the operation cannot be performed on the active task.
423         """
424         pass
425
426     class InactiveTask(Exception):
427         """
428         Raised when the operation cannot be performed on an inactive task.
429         """
430         pass
431
432     class NotSaved(Exception):
433         """
434         Raised when the operation cannot be performed on the task, because
435         it has not been saved to TaskWarrior yet.
436         """
437         pass
438
439     @classmethod
440     def from_input(cls, input_file=sys.stdin, modify=None, warrior=None):
441         """
442         Creates a Task object, directly from the stdin, by reading one line.
443         If modify=True, two lines are used, first line interpreted as the
444         original state of the Task object, and second line as its new,
445         modified value. This is consistent with the TaskWarrior's hook
446         system.
447
448         Object created by this method should not be saved, deleted
449         or refreshed, as t could create a infinite loop. For this
450         reason, TaskWarrior instance is set to None.
451
452         Input_file argument can be used to specify the input file,
453         but defaults to sys.stdin.
454         """
455
456         # Detect the hook type if not given directly
457         name = os.path.basename(sys.argv[0])
458         modify = name.startswith('on-modify') if modify is None else modify
459
460         # Create the TaskWarrior instance if none passed
461         if warrior is None:
462             hook_parent_dir = os.path.dirname(os.path.dirname(sys.argv[0]))
463             warrior = TaskWarrior(data_location=hook_parent_dir)
464
465         # TaskWarrior instance is set to None
466         task = cls(warrior)
467
468         # Load the data from the input
469         task._load_data(json.loads(input_file.readline().strip()))
470
471         # If this is a on-modify event, we are provided with additional
472         # line of input, which provides updated data
473         if modify:
474             task._update_data(json.loads(input_file.readline().strip()),
475                               remove_missing=True)
476
477         return task
478
479     def __init__(self, warrior, **kwargs):
480         super(Task, self).__init__(warrior)
481
482         # Check that user is not able to set read-only value in __init__
483         for key in kwargs.keys():
484             if key in self.read_only_fields:
485                 raise RuntimeError('Field \'%s\' is read-only' % key)
486
487         # We serialize the data in kwargs so that users of the library
488         # do not have to pass different data formats via __setitem__ and
489         # __init__ methods, that would be confusing
490
491         # Rather unfortunate syntax due to python2.6 comaptiblity
492         self._data = dict((key, self._normalize(key, value))
493                           for (key, value) in six.iteritems(kwargs))
494         self._original_data = copy.deepcopy(self._data)
495
496         # Provide read only access to the original data
497         self.original = ReadOnlyDictView(self._original_data)
498
499     def __unicode__(self):
500         return self['description']
501
502     def __eq__(self, other):
503         if self['uuid'] and other['uuid']:
504             # For saved Tasks, just define equality by equality of uuids
505             return self['uuid'] == other['uuid']
506         else:
507             # If the tasks are not saved, compare the actual instances
508             return id(self) == id(other)
509
510
511     def __hash__(self):
512         if self['uuid']:
513             # For saved Tasks, just define equality by equality of uuids
514             return self['uuid'].__hash__()
515         else:
516             # If the tasks are not saved, return hash of instance id
517             return id(self).__hash__()
518
519     @property
520     def completed(self):
521         return self['status'] == six.text_type('completed')
522
523     @property
524     def deleted(self):
525         return self['status'] == six.text_type('deleted')
526
527     @property
528     def waiting(self):
529         return self['status'] == six.text_type('waiting')
530
531     @property
532     def pending(self):
533         return self['status'] == six.text_type('pending')
534
535     @property
536     def active(self):
537         return self['start'] is not None
538
539     @property
540     def saved(self):
541         return self['uuid'] is not None or self['id'] is not None
542
543     def serialize_depends(self, cur_dependencies):
544         # Check that all the tasks are saved
545         for task in (cur_dependencies or set()):
546             if not task.saved:
547                 raise Task.NotSaved('Task \'%s\' needs to be saved before '
548                                     'it can be set as dependency.' % task)
549
550         return super(Task, self).serialize_depends(cur_dependencies)
551
552     def delete(self):
553         if not self.saved:
554             raise Task.NotSaved("Task needs to be saved before it can be deleted")
555
556         # Refresh the status, and raise exception if the task is deleted
557         self.refresh(only_fields=['status'])
558
559         if self.deleted:
560             raise Task.DeletedTask("Task was already deleted")
561
562         self.backend.delete_task(self)
563
564         # Refresh the status again, so that we have updated info stored
565         self.refresh(only_fields=['status', 'start', 'end'])
566
567     def start(self):
568         if not self.saved:
569             raise Task.NotSaved("Task needs to be saved before it can be started")
570
571         # Refresh, and raise exception if task is already completed/deleted
572         self.refresh(only_fields=['status'])
573
574         if self.completed:
575             raise Task.CompletedTask("Cannot start a completed task")
576         elif self.deleted:
577             raise Task.DeletedTask("Deleted task cannot be started")
578         elif self.active:
579             raise Task.ActiveTask("Task is already active")
580
581         self.backend.start_task(self)
582
583         # Refresh the status again, so that we have updated info stored
584         self.refresh(only_fields=['status', 'start'])
585
586     def stop(self):
587         if not self.saved:
588             raise Task.NotSaved("Task needs to be saved before it can be stopped")
589
590         # Refresh, and raise exception if task is already completed/deleted
591         self.refresh(only_fields=['status'])
592
593         if not self.active:
594             raise Task.InactiveTask("Cannot stop an inactive task")
595
596         self.backend.stop_task(self)
597
598         # Refresh the status again, so that we have updated info stored
599         self.refresh(only_fields=['status', 'start'])
600
601     def done(self):
602         if not self.saved:
603             raise Task.NotSaved("Task needs to be saved before it can be completed")
604
605         # Refresh, and raise exception if task is already completed/deleted
606         self.refresh(only_fields=['status'])
607
608         if self.completed:
609             raise Task.CompletedTask("Cannot complete a completed task")
610         elif self.deleted:
611             raise Task.DeletedTask("Deleted task cannot be completed")
612
613         self.backend.complete_task(self)
614
615         # Refresh the status again, so that we have updated info stored
616         self.refresh(only_fields=['status', 'start', 'end'])
617
618     def save(self):
619         if self.saved and not self.modified:
620             return
621
622         # All the actual work is done by the backend
623         self.backend.save_task(self)
624
625     def add_annotation(self, annotation):
626         if not self.saved:
627             raise Task.NotSaved("Task needs to be saved to add annotation")
628
629         self.backend.annotate_task(self, annotation)
630         self.refresh(only_fields=['annotations'])
631
632     def remove_annotation(self, annotation):
633         if not self.saved:
634             raise Task.NotSaved("Task needs to be saved to remove annotation")
635
636         if isinstance(annotation, TaskAnnotation):
637             annotation = annotation['description']
638
639         self.backend.denotate_task(self, annotation)
640         self.refresh(only_fields=['annotations'])
641
642     def refresh(self, only_fields=None, after_save=False):
643         # Raise error when trying to refresh a task that has not been saved
644         if not self.saved:
645             raise Task.NotSaved("Task needs to be saved to be refreshed")
646
647         new_data = self.backend.refresh_task(self, after_save=after_save)
648
649         if only_fields:
650             to_update = dict(
651                 [(k, new_data.get(k)) for k in only_fields])
652             self._update_data(to_update, update_original=True)
653         else:
654             self._load_data(new_data)
655
656 class TaskQuerySet(object):
657     """
658     Represents a lazy lookup for a task objects.
659     """
660
661     def __init__(self, warrior=None, filter_obj=None):
662         self.warrior = warrior
663         self._result_cache = None
664         self.filter_obj = filter_obj or TaskWarriorFilter(warrior)
665
666     def __deepcopy__(self, memo):
667         """
668         Deep copy of a QuerySet doesn't populate the cache
669         """
670         obj = self.__class__()
671         for k, v in self.__dict__.items():
672             if k in ('_iter', '_result_cache'):
673                 obj.__dict__[k] = None
674             else:
675                 obj.__dict__[k] = copy.deepcopy(v, memo)
676         return obj
677
678     def __repr__(self):
679         data = list(self[:REPR_OUTPUT_SIZE + 1])
680         if len(data) > REPR_OUTPUT_SIZE:
681             data[-1] = "...(remaining elements truncated)..."
682         return repr(data)
683
684     def __len__(self):
685         if self._result_cache is None:
686             self._result_cache = list(self)
687         return len(self._result_cache)
688
689     def __iter__(self):
690         if self._result_cache is None:
691             self._result_cache = self._execute()
692         return iter(self._result_cache)
693
694     def __getitem__(self, k):
695         if self._result_cache is None:
696             self._result_cache = list(self)
697         return self._result_cache.__getitem__(k)
698
699     def __bool__(self):
700         if self._result_cache is not None:
701             return bool(self._result_cache)
702         try:
703             next(iter(self))
704         except StopIteration:
705             return False
706         return True
707
708     def __nonzero__(self):
709         return type(self).__bool__(self)
710
711     def _clone(self, klass=None, **kwargs):
712         if klass is None:
713             klass = self.__class__
714         filter_obj = self.filter_obj.clone()
715         c = klass(warrior=self.warrior, filter_obj=filter_obj)
716         c.__dict__.update(kwargs)
717         return c
718
719     def _execute(self):
720         """
721         Fetch the tasks which match the current filters.
722         """
723         return self.warrior.filter_tasks(self.filter_obj)
724
725     def all(self):
726         """
727         Returns a new TaskQuerySet that is a copy of the current one.
728         """
729         return self._clone()
730
731     def pending(self):
732         return self.filter(status=PENDING)
733
734     def completed(self):
735         return self.filter(status=COMPLETED)
736
737     def filter(self, *args, **kwargs):
738         """
739         Returns a new TaskQuerySet with the given filters added.
740         """
741         clone = self._clone()
742         for f in args:
743             clone.filter_obj.add_filter(f)
744         for key, value in kwargs.items():
745             clone.filter_obj.add_filter_param(key, value)
746         return clone
747
748     def get(self, **kwargs):
749         """
750         Performs the query and returns a single object matching the given
751         keyword arguments.
752         """
753         clone = self.filter(**kwargs)
754         num = len(clone)
755         if num == 1:
756             return clone._result_cache[0]
757         if not num:
758             raise Task.DoesNotExist(
759                 'Task matching query does not exist. '
760                 'Lookup parameters were {0}'.format(kwargs))
761         raise ValueError(
762             'get() returned more than one Task -- it returned {0}! '
763             'Lookup parameters were {1}'.format(num, kwargs))