trial

daemons/api.py

@@ -3,73 +3,75 @@ from flask import Flask, request
 import settings
 from helpers.alice import Processor
 from helpers.mongo import mongo
+from daemons import base
 
 
-def api():
-    app = Flask(__name__)
+class Daemon(base.Daemon):
+    def execute(self):
+        app = Flask(__name__)
 
-    @app.route('/stats/json', methods=['GET'])
-    def stats_json():
-        all_users = mongo.users_collection.count_documents({})
-        teachers = mongo.users_collection.count_documents({"is_teacher": True})
-        return {
-            "Всего пользователей": all_users,
-            "Пользователей прошедших регистрацию": mongo.users_collection.count_documents({'email': {'$ne': None}}),
-            "Преподавателей": teachers,
-            "Отписались от уведомлений": mongo.users_collection.count_documents({'notify_minutes': None}),
-            "Отправлено уведомлений за сегодня": mongo.lessons_collection.count_documents({'notified': True}),
-            "Проиндексировано занятий из РУЗа": mongo.lessons_collection.count_documents({}),
-            "Пользователей из Москвы": mongo.users_collection.count_documents(
-                {'campus': 'Москва'}) + mongo.users_collection.count_documents({'campus': {'$exists': False}}),
-            "Пользователей из Москвы (регистрация)": mongo.users_collection.count_documents(
-                {'campus': 'Москва', 'email': {'$ne': None}}) + mongo.users_collection.count_documents(
-                {'campus': {'$exists': False}, 'email': {'$ne': None}}),
-            "Пользователей из Перми": mongo.users_collection.count_documents({'campus': 'Пермь'}),
-            "Пользователей из Перми (регистрация)": mongo.users_collection.count_documents(
-                {'campus': 'Пермь', 'email': {'$ne': None}}),
-            "Пользователей из Нижнего Новгорода": mongo.users_collection.count_documents({'campus': 'Нижний Новгород'}),
-            "Пользователей из Нижнего Новгорода (регистрация)": mongo.users_collection.count_documents(
-                {'campus': 'Нижний Новгород', 'email': {'$ne': None}}),
-            "Пользователей из Санкт-Петербурга": mongo.users_collection.count_documents({'campus': 'Санкт-Петербург'}),
-            "Пользователей из Санкт-Петербурга (регистрация)": mongo.users_collection.count_documents(
-                {'campus': 'Санкт-Петербург', 'email': {'$ne': None}})
-        }
-
-    @app.route('/stats', methods=['GET'])
-    def stats():
-        all_users = mongo.users_collection.count_documents({})
-        teachers = mongo.users_collection.count_documents({"is_teacher": True})
-        text = f"Всего пользователей: {all_users}<br>" \
-               f"Пользователей прошедших регистрацию: {mongo.users_collection.count_documents({'email': {'$ne': None}})}<br>" \
-               f"Студентов: {all_users - teachers}<br>" \
-               f"Преподавателей: {teachers}<br>" \
-               f"Отписались от уведомлений: {mongo.users_collection.count_documents({'notify_minutes': None})}<br>" \
-               f"Отправлено уведомлений за сегодня: {mongo.lessons_collection.count_documents({'notified': True})}<br>" \
-               f"Проиндексировано занятий из РУЗа: {mongo.lessons_collection.count_documents({})}<br>" \
-               f"<br>" \
-               f"<br>" \
-               f"Пользователей из Москвы: {mongo.users_collection.count_documents({'campus': 'Москва'}) + mongo.users_collection.count_documents({'campus': {'$exists': False}})}<br>" \
-               f"Пользователей из Москвы (регистрация): {mongo.users_collection.count_documents({'campus': 'Москва', 'email': {'$ne': None}}) + mongo.users_collection.count_documents({'campus': {'$exists': False}, 'email': {'$ne': None}})}<br>" \
-               f"Пользователей из Перми: {mongo.users_collection.count_documents({'campus': 'Пермь'})}<br>" \
-               f"Пользователей из Перми (регистрация): {mongo.users_collection.count_documents({'campus': 'Пермь', 'email': {'$ne': None}})}<br>" \
-               f"Пользователей из Нижнего Новгорода: {mongo.users_collection.count_documents({'campus': 'Нижний Новгород'})}<br>" \
-               f"Пользователей из Нижнего Новгорода (регистрация): {mongo.users_collection.count_documents({'campus': 'Нижний Новгород', 'email': {'$ne': None}})}<br>" \
-               f"Пользователей из Санкт-Петербурга: {mongo.users_collection.count_documents({'campus': 'Санкт-Петербург'})}<br>" \
-               f"Пользователей из Санкт-Петербурга (регистрация): {mongo.users_collection.count_documents({'campus': 'Санкт-Петербург', 'email': {'$ne': None}})}<br>"
-        return text
-
-    @app.route('/alice', methods=['POST'])
-    def alice():
-        req = request.json
-        processor = Processor(req)
-        response = {
-            "version": req['version'],
-            "session": req['session'],
-            "response": {
-                "end_session": False
+        @app.route('/stats/json', methods=['GET'])
+        def stats_json():
+            all_users = mongo.users_collection.count_documents({})
+            teachers = mongo.users_collection.count_documents({"is_teacher": True})
+            return {
+                "Всего пользователей": all_users,
+                "Пользователей прошедших регистрацию": mongo.users_collection.count_documents({'email': {'$ne': None}}),
+                "Преподавателей": teachers,
+                "Отписались от уведомлений": mongo.users_collection.count_documents({'notify_minutes': None}),
+                "Отправлено уведомлений за сегодня": mongo.lessons_collection.count_documents({'notified': True}),
+                "Проиндексировано занятий из РУЗа": mongo.lessons_collection.count_documents({}),
+                "Пользователей из Москвы": mongo.users_collection.count_documents(
+                    {'campus': 'Москва'}) + mongo.users_collection.count_documents({'campus': {'$exists': False}}),
+                "Пользователей из Москвы (регистрация)": mongo.users_collection.count_documents(
+                    {'campus': 'Москва', 'email': {'$ne': None}}) + mongo.users_collection.count_documents(
+                    {'campus': {'$exists': False}, 'email': {'$ne': None}}),
+                "Пользователей из Перми": mongo.users_collection.count_documents({'campus': 'Пермь'}),
+                "Пользователей из Перми (регистрация)": mongo.users_collection.count_documents(
+                    {'campus': 'Пермь', 'email': {'$ne': None}}),
+                "Пользователей из Нижнего Новгорода": mongo.users_collection.count_documents({'campus': 'Нижний Новгород'}),
+                "Пользователей из Нижнего Новгорода (регистрация)": mongo.users_collection.count_documents(
+                    {'campus': 'Нижний Новгород', 'email': {'$ne': None}}),
+                "Пользователей из Санкт-Петербурга": mongo.users_collection.count_documents({'campus': 'Санкт-Петербург'}),
+                "Пользователей из Санкт-Петербурга (регистрация)": mongo.users_collection.count_documents(
+                    {'campus': 'Санкт-Петербург', 'email': {'$ne': None}})
             }
-        }
-        response['response'].update(processor.process())
-        return response
 
-    app.run(host="0.0.0.0", port=1238, debug=settings.DEBUG)
+        @app.route('/stats', methods=['GET'])
+        def stats():
+            all_users = mongo.users_collection.count_documents({})
+            teachers = mongo.users_collection.count_documents({"is_teacher": True})
+            text = f"Всего пользователей: {all_users}<br>" \
+                f"Пользователей прошедших регистрацию: {mongo.users_collection.count_documents({'email': {'$ne': None}})}<br>" \
+                f"Студентов: {all_users - teachers}<br>" \
+                f"Преподавателей: {teachers}<br>" \
+                f"Отписались от уведомлений: {mongo.users_collection.count_documents({'notify_minutes': None})}<br>" \
+                f"Отправлено уведомлений за сегодня: {mongo.lessons_collection.count_documents({'notified': True})}<br>" \
+                f"Проиндексировано занятий из РУЗа: {mongo.lessons_collection.count_documents({})}<br>" \
+                f"<br>" \
+                f"<br>" \
+                f"Пользователей из Москвы: {mongo.users_collection.count_documents({'campus': 'Москва'}) + mongo.users_collection.count_documents({'campus': {'$exists': False}})}<br>" \
+                f"Пользователей из Москвы (регистрация): {mongo.users_collection.count_documents({'campus': 'Москва', 'email': {'$ne': None}}) + mongo.users_collection.count_documents({'campus': {'$exists': False}, 'email': {'$ne': None}})}<br>" \
+                f"Пользователей из Перми: {mongo.users_collection.count_documents({'campus': 'Пермь'})}<br>" \
+                f"Пользователей из Перми (регистрация): {mongo.users_collection.count_documents({'campus': 'Пермь', 'email': {'$ne': None}})}<br>" \
+                f"Пользователей из Нижнего Новгорода: {mongo.users_collection.count_documents({'campus': 'Нижний Новгород'})}<br>" \
+                f"Пользователей из Нижнего Новгорода (регистрация): {mongo.users_collection.count_documents({'campus': 'Нижний Новгород', 'email': {'$ne': None}})}<br>" \
+                f"Пользователей из Санкт-Петербурга: {mongo.users_collection.count_documents({'campus': 'Санкт-Петербург'})}<br>" \
+                f"Пользователей из Санкт-Петербурга (регистрация): {mongo.users_collection.count_documents({'campus': 'Санкт-Петербург', 'email': {'$ne': None}})}<br>"
+            return text
+
+        @app.route('/alice', methods=['POST'])
+        def alice():
+            req = request.json
+            processor = Processor(req)
+            response = {
+                "version": req['version'],
+                "session": req['session'],
+                "response": {
+                    "end_session": False
+                }
+            }
+            response['response'].update(processor.process())
+            return response
+
+        app.run(host="0.0.0.0", port=1238, debug=settings.DEBUG)

daemons/base.py

@@ -0,0 +1,3 @@
+class Daemon:
+    def execute(self):
+        raise NotImplementedError

daemons/bot.py

@@ -1,20 +0,0 @@
-import os
-
-import telebot
-from telebot.types import Message
-
-from helpers.mongo import mongo
-
-bot = telebot.TeleBot(os.getenv("TELEGRAM_TOKEN"))
-
-
-@bot.message_handler(commands=['start'])
-def on_start(message: Message):
-    mongo.users_collection.delete_many({"chat_id": message.chat.id})
-    do_action(message)
-
-
-@bot.message_handler()
-def do_action(message: Message):
-    from helpers.answer import Answer
-    Answer(message).process()

daemons/fetch.py

@@ -6,6 +6,8 @@ from helpers import now, campus_timdelta
 from helpers.mongo import mongo
 from helpers.ruz import ruz
 
+from daemons import base
+
 
 def fetch_schedule_for_user(user: dict):
     today = now(user)
@@ -75,16 +77,17 @@ def delete_old():
     mongo.lessons_collection.delete_many({"end": {"$lte": datetime.datetime.now() - datetime.timedelta(days=1)}})
 
 
-def fetch():
-    while True:
-        logging.info("fetch start")
-        begin = datetime.datetime.now()
-        if begin.hour > 22 or begin.hour < 7:
-            logging.info("Too late, sleeping")
-            sleep(30 * 60)
-            continue
-        process()
-        end = datetime.datetime.now()
-        logging.info('fetch finished')
-        logging.info("time elapsed %s", (end - begin).total_seconds())
-        delete_old()
+class Daemon(base.Daemon):
+    def execute(self):
+        while True:
+            logging.info("fetch start")
+            begin = datetime.datetime.now()
+            if begin.hour > 22 or begin.hour < 7:
+                logging.info("Too late, sleeping")
+                sleep(30 * 60)
+                continue
+            process()
+            end = datetime.datetime.now()
+            logging.info('fetch finished')
+            logging.info("time elapsed %s", (end - begin).total_seconds())
+            delete_old()

daemons/mailbox.py

@@ -0,0 +1,28 @@
+import telebot
+import os
+
+from daemons import base
+from utils import queues
+
+
+class Daemon(base.BaseDaemon, queues.TasksHandlerMixin):
+    def __init__(self):
+        super().__init__()
+        self.bot = telebot.TeleBot(os.getenv("TELEGRAM_TOKEN"))
+
+    @property
+    def queue_name(self):
+        return 'pizda_bot_mailbox'
+    
+    def execute(self):
+        self.poll()
+
+    def process(self, payload):
+        body = {
+            'chat_id': payload['chat_id'],
+            'text': payload['text'],
+        }
+        reply_markup = payload.get('reply_markup')
+        if reply_markup:
+            body['reply_markup'] = reply_markup
+        self.bot.send_message(**body, parse_mode='Markdown')

daemons/notify.py

@@ -2,12 +2,12 @@ import datetime
 import logging
 from time import sleep
 
-from telebot.apihelper import ApiTelegramException
-
-from daemons.bot import bot
 from helpers import now
 from helpers.mongo import mongo
 from helpers.ruz import ruz
+from daemons import base
+
+from utils import queues
 
 
 def process():
@@ -25,13 +25,7 @@ def process():
             ans += f"🧑‍🏫 {(lesson['lecturer'] or 'Неизвестно')}\n"
             if lesson.get('link', None):
                 ans += f"🔗 {lesson['link']}"
-            try:
-                bot.send_message(
-                    user["chat_id"],
-                    f"Через {user['notify_minutes']} минут у тебя занятие!\n" + ans
-                )
-            except ApiTelegramException:
-                pass
+            queues.set_task('ruz_bot_mailbox', {'text': f"Через {user['notify_minutes']} минут у тебя занятие!\n" + ans, 'chat_id': user["chat_id"]}, 1)
             mongo.lessons_collection.update_one({"_id": lesson['_id']}, {"$set": {"notified": True}})
     time_now = datetime.datetime.now()
     for user in mongo.users_collection.find({"next_daily_notify_time": {"$lte": time_now}}):
@@ -46,11 +40,7 @@ def process():
             else:
                 text = ruz.schedule_builder(lessons)
             try:
-                bot.send_message(
-                    user["chat_id"],
-                    f"Уведомляю о занятиях! Твое расписание на {'сегодня' if user.get('daily_notify_today', True) else 'завтра'}:\n" + text,
-                    parse_mode='Markdown'
-                )
+                queues.set_task('ruz_bot_mailbox', {'text': f"Уведомляю о занятиях! Твое расписание на {'сегодня' if user.get('daily_notify_today', True) else 'завтра'}:\n" + text, 'chat_id': user["chat_id"]}, 1)
             except:
                 pass
         mongo.users_collection.update_one(
@@ -72,34 +62,29 @@ def process():
             ans += f"🧑‍🏫 {(lesson['lecturer'] or 'Неизвестно')}\n"
             if lesson.get('link', None):
                 ans += f"🔗 {lesson['link']}"
-            try:
-                mess = "Пары начутся через "
-                if user['first_lesson_notify'] == 30:
-                    mess += "30 минут"
-                elif user['first_lesson_notify'] == 60:
-                    mess += "1 час"
-                elif user['first_lesson_notify'] == 4 * 60:
-                    mess += "4 часа"
-                else:
-                    mess += "12 часов"
-                mess += "!\n\nТвоя первая пара:\n\n" + ans
-                bot.send_message(
-                    user["chat_id"],
-                    mess
-                )
-            except ApiTelegramException:
-                pass
+            mess = "Пары начутся через "
+            if user['first_lesson_notify'] == 30:
+                mess += "30 минут"
+            elif user['first_lesson_notify'] == 60:
+                mess += "1 час"
+            elif user['first_lesson_notify'] == 4 * 60:
+                mess += "4 часа"
+            else:
+                mess += "12 часов"
+            mess += "!\n\nТвоя первая пара:\n\n" + ans
+            queues.set_task('ruz_bot_mailbox', {'text': mess, 'chat_id': user["chat_id"]}, 1)
             start_of_day = datetime.datetime(year=time_now.year, month=time_now.month, day=time_now.day)
             mongo.lessons_collection.update_many({"begin": {"$gte": start_of_day, "$lt": (start_of_day + datetime.timedelta(days=1))}, "user_email": user["email"]}, {"$set": {"notified_today": True}})
             break
 
 
-def notify():
-    while True:
-        logging.info("notify start")
-        begin = datetime.datetime.now()
-        process()
-        end = datetime.datetime.now()
-        logging.info('notify finished')
-        logging.info("time elapsed %s", (end - begin).total_seconds())
-        sleep(63 - end.second)
+class Daemon(base.Daemon):
+    def execute(self):
+        while True:
+            logging.info("notify start")
+            begin = datetime.datetime.now()
+            process()
+            end = datetime.datetime.now()
+            logging.info('notify finished')
+            logging.info("time elapsed %s", (end - begin).total_seconds())
+            sleep(63 - end.second)

daemons/poll.py

@@ -0,0 +1,15 @@
+import os
+import telebot
+
+from daemons import base
+from telebot import types
+from utils import queues
+
+
+class Daemon(base.BaseDaemon):
+    def execute(self):
+        bot = telebot.TeleBot(os.getenv("TELEGRAM_TOKEN"))
+        @bot.message_handler()
+        def do_action(message: types.Message):
+            queues.set_task('ruz_bot_worker', message.json, 1)
+        bot.polling()

daemons/worker.py

@@ -0,0 +1,19 @@
+from daemons import base
+from utils import queues
+import json
+
+from telebot.types import Message
+
+
+class Daemon(base.BaseDaemon, queues.TasksHandlerMixin):
+    @property
+    def queue_name(self):
+        return 'ruz_bot_worker'
+    
+    def execute(self):
+        self.poll()
+
+    def process(self, payload):
+        message: Message = Message.de_json(json.dumps(payload))
+        from helpers.answer import Answer
+        Answer(message).process()