]> www.average.org Git - loctrkd.git/blob - loctrkd/beesure.py
beesure: implement phone book commands
[loctrkd.git] / loctrkd / beesure.py
1 """
2 Implementation of the protocol "beesure" used by some watch-trackers
3 https://www.4p-touch.com/beesure-gps-setracker-server-protocol.html
4 """
5
6 from datetime import datetime, timezone
7 from enum import Enum
8 from inspect import isclass
9 import re
10 from struct import error, pack, unpack
11 from time import time
12 from typing import (
13     Any,
14     Callable,
15     Dict,
16     List,
17     Optional,
18     Tuple,
19     Type,
20     TYPE_CHECKING,
21     Union,
22 )
23 from types import SimpleNamespace
24
25 __all__ = (
26     "Stream",
27     "class_by_prefix",
28     "enframe",
29     "exposed_protos",
30     "inline_response",
31     "proto_handled",
32     "parse_message",
33     "probe_buffer",
34     "proto_name",
35     "DecodeError",
36     "Respond",
37     "LK",
38 )
39
40 PROTO_PREFIX = "BS:"
41
42 ### Deframer ###
43
44 MAXBUFFER: int = 65557  # Theoretical max buffer 65536 + 21
45 RE = re.compile(b"\[(\w\w)\*(\d{10})\*([0-9a-fA-F]{4})\*")
46
47
48 def _framestart(buffer: bytes) -> Tuple[int, str, str, int]:
49     """
50     Find the start of the frame in the buffer.
51     If found, return (offset, vendorId, imei, datalen) tuple.
52     If not found, set -1 as the value of `offset`
53     """
54     mo = RE.search(buffer)
55     return (
56         (
57             mo.start(),
58             mo.group(1).decode(),
59             mo.group(2).decode(),
60             int(mo.group(3), 16),
61         )
62         if mo
63         else (-1, "", "", 0)
64     )
65
66
67 class Stream:
68     def __init__(self) -> None:
69         self.buffer = b""
70         self.imei: Optional[str] = None
71         self.datalen: int = 0
72
73     def recv(self, segment: bytes) -> List[Union[bytes, str]]:
74         """
75         Process next segment of the stream. Return successfully deframed
76         packets as `bytes` and error messages as `str`.
77         """
78         when = time()
79         self.buffer += segment
80         if len(self.buffer) > MAXBUFFER:
81             # We are receiving junk. Let's drop it or we run out of memory.
82             self.buffer = b""
83             return [f"More than {MAXBUFFER} unparseable data, dropping"]
84         msgs: List[Union[bytes, str]] = []
85         while True:
86             if not self.datalen:  # we have not seen packet start yet
87                 toskip, _, imei, datalen = _framestart(self.buffer)
88                 if toskip < 0:  # No frames, continue reading
89                     break
90                 if toskip > 0:  # Should not happen, report
91                     msgs.append(
92                         f"Skipping {toskip} bytes of undecodable data"
93                         f' "{self.buffer[:toskip][:64]=!r}"'
94                     )
95                     self.buffer = self.buffer[toskip:]
96                     # From this point, buffer starts with a packet header
97                 if self.imei is None:
98                     self.imei = imei
99                 if self.imei != imei:
100                     msgs.append(
101                         f"Packet's imei {imei} mismatches"
102                         f" previous value {self.imei}, old value kept"
103                     )
104                 self.datalen = datalen
105             if len(self.buffer) < self.datalen + 21:  # Incomplete packet
106                 break
107             # At least one complete packet is present in the buffer
108             if chr(self.buffer[self.datalen + 20]) == "]":
109                 msgs.append(self.buffer[: self.datalen + 21])
110             else:
111                 msgs.append(
112                     f"Packet does not end with ']'"
113                     f" at {self.datalen+20}: {self.buffer=!r}"
114                 )
115             self.buffer = self.buffer[self.datalen + 21 :]
116             self.datalen = 0
117         return msgs
118
119     def close(self) -> bytes:
120         ret = self.buffer
121         self.buffer = b""
122         self.imei = None
123         self.datalen = 0
124         return ret
125
126
127 def enframe(buffer: bytes, imei: Optional[str] = None) -> bytes:
128     assert imei is not None and len(imei) == 10
129     off, vid, _, dlen = _framestart(buffer)
130     assert off == 0
131     return f"[{vid:2s}*{imei:10s}*{dlen:04X}*".encode() + buffer[20:]
132
133
134 ### Parser/Constructor ###
135
136
137 class DecodeError(Exception):
138     def __init__(self, e: Exception, **kwargs: Any) -> None:
139         super().__init__(e)
140         for k, v in kwargs.items():
141             setattr(self, k, v)
142
143
144 def maybe(typ: type) -> Callable[[Any], Any]:
145     return lambda x: None if x is None else typ(x)
146
147
148 def intx(x: Union[str, int]) -> int:
149     if isinstance(x, str):
150         x = int(x, 0)
151     return x
152
153
154 def boolx(x: Union[str, bool]) -> bool:
155     if isinstance(x, str):
156         if x.upper() in ("ON", "TRUE", "1"):
157             return True
158         if x.upper() in ("OFF", "FALSE", "0"):
159             return False
160         raise ValueError(str(x) + " could not be parsed as a Boolean")
161     return x
162
163
164 def l3str(x: Union[str, List[str]]) -> List[str]:
165     if isinstance(x, str):
166         lx = x.split(",")
167     else:
168         lx = x
169     if len(lx) != 3 or not all(isinstance(el, str) for el in x):
170         raise ValueError(str(lx) + " is not a list of three strings")
171     return lx
172
173
174 def pblist(x: Union[str, List[Tuple[str, str]]]) -> List[Tuple[str, str]]:
175     if isinstance(x, str):
176
177         def splitpair(s: str) -> Tuple[str, str]:
178             a, b = s.split(":")
179             return a, b
180
181         lx = [splitpair(el) for el in x.split(",")]
182     else:
183         lx = x
184     if len(lx) > 5:
185         raise ValueError(str(lx) + " has too many elements (max 5)")
186     return lx
187
188
189 class MetaPkt(type):
190     """
191     For each class corresponding to a message, automatically create
192     two nested classes `In` and `Out` that also inherit from their
193     "nest". Class attribute `IN_KWARGS` defined in the "nest" is
194     copied to the `In` nested class under the name `KWARGS`, and
195     likewise, `OUT_KWARGS` of the nest class is copied as `KWARGS`
196     to the nested class `Out`. In addition, method `encode` is
197     defined in both classes equal to `in_encode()` and `out_encode()`
198     respectively.
199     """
200
201     if TYPE_CHECKING:
202
203         def __getattr__(self, name: str) -> Any:
204             pass
205
206         def __setattr__(self, name: str, value: Any) -> None:
207             pass
208
209     def __new__(
210         cls: Type["MetaPkt"],
211         name: str,
212         bases: Tuple[type, ...],
213         attrs: Dict[str, Any],
214     ) -> "MetaPkt":
215         newcls = super().__new__(cls, name, bases, attrs)
216         newcls.In = super().__new__(
217             cls,
218             name + ".In",
219             (newcls,) + bases,
220             {
221                 "KWARGS": newcls.IN_KWARGS,
222                 "decode": newcls.in_decode,
223                 "encode": newcls.in_encode,
224             },
225         )
226         newcls.Out = super().__new__(
227             cls,
228             name + ".Out",
229             (newcls,) + bases,
230             {
231                 "KWARGS": newcls.OUT_KWARGS,
232                 "decode": newcls.out_decode,
233                 "encode": newcls.out_encode,
234             },
235         )
236         return newcls
237
238
239 class Respond(Enum):
240     NON = 0  # Incoming, no response needed
241     INL = 1  # Birirectional, use `inline_response()`
242     EXT = 2  # Birirectional, use external responder
243
244
245 class BeeSurePkt(metaclass=MetaPkt):
246     RESPOND = Respond.NON  # Do not send anything back by default
247     IN_KWARGS: Tuple[Tuple[str, Callable[[Any], Any], Any], ...] = ()
248     OUT_KWARGS: Tuple[Tuple[str, Callable[[Any], Any], Any], ...] = ()
249     KWARGS: Tuple[Tuple[str, Callable[[Any], Any], Any], ...] = ()
250     In: Type["BeeSurePkt"]
251     Out: Type["BeeSurePkt"]
252
253     if TYPE_CHECKING:
254
255         def __getattr__(self, name: str) -> Any:
256             pass
257
258         def __setattr__(self, name: str, value: Any) -> None:
259             pass
260
261     def __init__(self, *args: Any, **kwargs: Any):
262         """
263         Construct the object _either_ from (length, payload),
264         _or_ from the values of individual fields
265         """
266         assert not args or (len(args) == 4 and not kwargs)
267         if args:  # guaranteed to be two arguments at this point
268             self.vendor, self.imei, self.datalength, self.payload = args
269             try:
270                 self.decode(*self.payload)
271             except error as e:
272                 raise DecodeError(e, obj=self)
273         else:
274             for kw, typ, dfl in self.KWARGS:
275                 setattr(self, kw, typ(kwargs.pop(kw, dfl)))
276             if kwargs:
277                 raise ValueError(
278                     self.__class__.__name__ + " stray kwargs " + str(kwargs)
279                 )
280
281     def __repr__(self) -> str:
282         return "{}({})".format(
283             self.__class__.__name__,
284             ", ".join(
285                 "{}={}".format(
286                     k,
287                     'bytes.fromhex("{}")'.format(v.hex())
288                     if isinstance(v, bytes)
289                     else v.__repr__(),
290                 )
291                 for k, v in self.__dict__.items()
292                 if not k.startswith("_")
293             ),
294         )
295
296     def decode(self, *args: str) -> None:
297         ...
298
299     def in_decode(self, *args: str) -> None:
300         # Overridden in subclasses, otherwise do not decode payload
301         return
302
303     def out_decode(self, *args: str) -> None:
304         # Overridden in subclasses, otherwise do not decode payload
305         return
306
307     def encode(self) -> str:
308         ...
309
310     def in_encode(self) -> str:
311         # Necessary to emulate terminal, which is not implemented
312         raise NotImplementedError(
313             self.__class__.__name__ + ".encode() not implemented"
314         )
315
316     def out_encode(self) -> str:
317         # Overridden in subclasses, otherwise command verb only
318         return ""
319
320     @property
321     def PROTO(self) -> str:
322         try:
323             proto, _ = self.__class__.__name__.split(".")
324         except ValueError:
325             proto = self.__class__.__name__
326         return proto
327
328     @property
329     def packed(self) -> bytes:
330         data = self.encode()
331         payload = self.PROTO + "," + data if data else self.PROTO
332         return f"[LT*0000000000*{len(payload):04X}*{payload}]".encode()
333
334
335 class UNKNOWN(BeeSurePkt):
336     pass
337
338
339 class LK(BeeSurePkt):
340     RESPOND = Respond.INL
341
342     def in_decode(self, *args: str) -> None:
343         numargs = len(args)
344         if numargs > 1:
345             self.step = args[1]
346         if numargs > 2:
347             self.tumbling_number = args[2]
348         if numargs > 3:
349             self.battery_percentage = args[3]
350
351     def in_encode(self) -> str:
352         return "LK"
353
354
355 class CONFIG(BeeSurePkt):
356     pass
357
358
359 class ICCID(BeeSurePkt):
360     pass
361
362
363 class _LOC_DATA(BeeSurePkt):
364     def in_decode(self, *args: str) -> None:
365         p = SimpleNamespace()
366         _id = lambda x: x
367         for (obj, attr, func), val in zip(
368             (
369                 (p, "verb", _id),
370                 (p, "date", _id),
371                 (p, "time", _id),
372                 (self, "gps_valid", lambda x: x == "A"),
373                 (p, "lat", float),
374                 (p, "nors", lambda x: 1 if x == "N" else -1),
375                 (p, "lon", float),
376                 (p, "eorw", lambda x: 1 if x == "E" else -1),
377                 (self, "speed", float),
378                 (self, "direction", float),
379                 (self, "altitude", float),
380                 (self, "num_of_sats", int),
381                 (self, "gsm_strength_percentage", int),
382                 (self, "battery_percentage", int),
383                 (self, "pedometer", int),
384                 (self, "tubmling_times", int),
385                 (self, "device_status", lambda x: int(x, 16)),
386                 (self, "base_stations_number", int),
387                 (self, "connect_base_station_number", int),
388                 (self, "mcc", int),
389                 (self, "mnc", int),
390             ),
391             args[:21],
392         ):
393             setattr(obj, attr, func(val))  # type: ignore
394         rest_args = args[21:]
395         # (area_id, cell_id, strength)*
396         self.base_stations = [
397             tuple(int(el) for el in rest_args[i * 3 : 3 + i * 3])
398             for i in range(self.base_stations_number)
399         ]
400         rest_args = rest_args[3 * self.base_stations_number :]
401         self.wifi_aps_number = int(rest_args[0])
402         # (SSID, MAC, strength)*
403         self.wifi_aps = [
404             (
405                 rest_args[1 + i * 3],
406                 rest_args[2 + i * 3],
407                 int(rest_args[3 + i * 3]),
408             )
409             for i in range(self.wifi_aps_number)
410         ]
411         rest_args = rest_args[1 + 3 * self.wifi_aps_number :]
412         self.positioning_accuracy = float(rest_args[0])
413         self.devtime = (
414             datetime.strptime(
415                 p.date + p.time,
416                 "%d%m%y%H%M%S",
417             )
418             # .replace(tzinfo=timezone.utc)
419             # .astimezone(tz=timezone.utc)
420         )
421         self.latitude = p.lat * p.nors
422         self.longitude = p.lon * p.eorw
423
424
425 class UD(_LOC_DATA):
426     pass
427
428
429 class UD2(_LOC_DATA):
430     pass
431
432
433 class TKQ(BeeSurePkt):
434     RESPOND = Respond.INL
435
436
437 class TKQ2(BeeSurePkt):
438     RESPOND = Respond.INL
439
440
441 class AL(_LOC_DATA):
442     RESPOND = Respond.INL
443
444
445 class CR(BeeSurePkt):
446     pass
447
448
449 class FLOWER(BeeSurePkt):
450     OUT_KWARGS = (("number", int, 1),)
451
452     def out_encode(self) -> str:
453         self.number: int
454         return str(self.number)
455
456
457 class _PHB(BeeSurePkt):
458     OUT_KWARGS: Tuple[Tuple[str, Callable[[Any], Any], Any], ...] = (
459         ("entries", pblist, []),
460     )
461
462     def out_encode(self) -> str:
463         self.entries: List[Tuple[str, str]]
464         return ",".join(
465             [
466                 ",".join((num, name.encode("utf_16_be").hex()))
467                 for name, num in self.entries
468             ]
469         )
470
471
472 class PHB(_PHB):
473     pass
474
475
476 class PHB2(_PHB):
477     pass
478
479
480 class POWEROFF(BeeSurePkt):
481     pass
482
483
484 class RESET(BeeSurePkt):
485     pass
486
487
488 class SOS(BeeSurePkt):
489     OUT_KWARGS = (("phonenumbers", l3str, ["", "", ""]),)
490
491     def out_encode(self) -> str:
492         self.phonenumbers: List[str]
493         return ",".join(self.phonenumbers)
494
495
496 class _SET_PHONE(BeeSurePkt):
497     OUT_KWARGS = (("phonenumber", str, ""),)
498
499     def out_encode(self) -> str:
500         self.phonenumber: str
501         return self.phonenumber
502
503
504 class SOS1(_SET_PHONE):
505     pass
506
507
508 class SOS2(_SET_PHONE):
509     pass
510
511
512 class SOS3(_SET_PHONE):
513     pass
514
515
516 # Build dicts protocol number -> class and class name -> protocol number
517 CLASSES = {}
518 if True:  # just to indent the code, sorry!
519     for cls in [
520         cls
521         for name, cls in globals().items()
522         if isclass(cls)
523         and issubclass(cls, BeeSurePkt)
524         and not name.startswith("_")
525     ]:
526         CLASSES[cls.__name__] = cls
527
528
529 def class_by_prefix(
530     prefix: str,
531 ) -> Union[Type[BeeSurePkt], List[str]]:
532     if prefix.startswith(PROTO_PREFIX):
533         pname = prefix[len(PROTO_PREFIX) :].upper()
534     else:
535         raise KeyError(pname)
536     lst = [name for name in CLASSES.keys() if name.upper().startswith(pname)]
537     for proto in lst:
538         if len(lst) == 1:  # unique prefix match
539             return CLASSES[proto]
540         if proto == pname:  # exact match
541             return CLASSES[proto]
542     return lst
543
544
545 def proto_handled(proto: str) -> bool:
546     return proto.startswith(PROTO_PREFIX)
547
548
549 def proto_name(obj: Union[MetaPkt, BeeSurePkt]) -> str:
550     return PROTO_PREFIX + (
551         obj.__class__.__name__ if isinstance(obj, BeeSurePkt) else obj.__name__
552     )
553
554
555 def proto_of_message(packet: bytes) -> str:
556     return PROTO_PREFIX + packet[20:-1].split(b",")[0].decode()
557
558
559 def imei_from_packet(packet: bytes) -> Optional[str]:
560     toskip, _, imei, _ = _framestart(packet)
561     if toskip == 0 and imei != "":
562         return imei
563     return None
564
565
566 def is_goodbye_packet(packet: bytes) -> bool:
567     return False
568
569
570 def inline_response(packet: bytes) -> Optional[bytes]:
571     proto = packet[20:-1].split(b",")[0].decode()
572     if proto in CLASSES:
573         cls = CLASSES[proto]
574         if cls.RESPOND is Respond.INL:
575             return cls.Out().packed
576     return None
577
578
579 def probe_buffer(buffer: bytes) -> bool:
580     return bool(RE.search(buffer))
581
582
583 def parse_message(packet: bytes, is_incoming: bool = True) -> BeeSurePkt:
584     """From a packet (without framing bytes) derive the XXX.In object"""
585     toskip, vendor, imei, datalength = _framestart(packet)
586     payload = packet[20:-1].decode().split(",")
587     proto = payload[0] if len(payload) > 0 else ""
588     if proto not in CLASSES:
589         cause: Union[DecodeError, ValueError, IndexError] = ValueError(
590             f"Proto {proto} is unknown"
591         )
592     else:
593         try:
594             if is_incoming:
595                 return CLASSES[proto].In(vendor, imei, datalength, payload)
596             else:
597                 return CLASSES[proto].Out(vendor, imei, datalength, payload)
598         except (DecodeError, ValueError, IndexError) as e:
599             cause = e
600     if is_incoming:
601         retobj = UNKNOWN.In(vendor, imei, datalength, payload)
602     else:
603         retobj = UNKNOWN.Out(vendor, imei, datalength, payload)
604     retobj.proto = proto  # Override class attr with object attr
605     retobj.cause = cause
606     return retobj
607
608
609 def exposed_protos() -> List[Tuple[str, bool]]:
610     return [
611         (proto_name(UD), True),
612         (proto_name(UD2), False),
613     ]