update model

Pipfile

@@ -9,6 +9,10 @@ openai = "*"
 gradio = "*"
 chromadb = "*"
 tiktoken = "*"
+speechrecognition = "*"
+gtts = "*"
+pydub = "*"
+pyaudio = "*"
 
 [dev-packages]
 flake8 = "*"

Pipfile.lock

@@ -1,7 +1,7 @@
 {
     "_meta": {
         "hash": {
-            "sha256": "13faed2031f024c5c36c5227343c2e72f70f9d9577e9d3bd400b2d5ef3a78359"
+            "sha256": "5c4dc65e2df68cd004dbf6534e64e5bee5bbc76472e4197eef27c46b900a2aae"
         },
         "pipfile-spec": 6,
         "requires": {
@@ -715,6 +715,14 @@
             "markers": "platform_machine == 'aarch64' or (platform_machine == 'ppc64le' or (platform_machine == 'x86_64' or (platform_machine == 'amd64' or (platform_machine == 'AMD64' or (platform_machine == 'win32' or platform_machine == 'WIN32')))))",
             "version": "==2.0.2"
         },
+        "gtts": {
+            "hashes": [
+                "sha256:5314f7dedb4230889ff4773edd37e101408497e166982027b8d9582a4585eb4f",
+                "sha256:9132e409603f34d5023458e3e10ce2f5df55498d7a2ee781c9adbe616fbd4152"
+            ],
+            "index": "pypi",
+            "version": "==2.3.2"
+        },
         "h11": {
             "hashes": [
                 "sha256:8f19fbbe99e72420ff35c00b27a34cb9937e902a8b810e2c88300c6f0a3b699d",
@@ -918,7 +926,7 @@
                 "sha256:2894e8ca1bbd41404925c3916099cd31ccea74e558a311c9aad67e02bcfa5ef8",
                 "sha256:2fc067dd038edcf18086d342da2c690984c4d37f9bfa684ffccaea34b43edb28"
             ],
-            "markers": "python_full_version >= '3.8.1' and python_version < '4.0'",
+            "markers": "python_version < '4.0' and python_full_version >= '3.8.1'",
             "version": "==0.0.16"
         },
         "linkify-it-py": {
@@ -1560,6 +1568,23 @@
             ],
             "version": "==3.2.0"
         },
+        "pyaudio": {
+            "hashes": [
+                "sha256:13915faaa780e6bbbb6d745ef0e761674fd461b1b1b3f9c1f57042a534bfc0c3",
+                "sha256:1505d766ee718df6f5a18b73ac42307ba1cb4d2c0397873159254a34f67515d6",
+                "sha256:26bccc81e4243d1c0ff5487e6b481de6329fcd65c79365c267cef38f363a2b56",
+                "sha256:48e29537ea22ae2ae323eebe297bfb2683831cee4f20d96964e131f65ab2161d",
+                "sha256:59cc3cc5211b729c7854e3989058a145872cc58b1a7b46c6d4d88448a343d890",
+                "sha256:87137cfd0ef8608a2a383be3f6996f59505e322dab9d16531f14cf542fa294f1",
+                "sha256:910ef09225cce227adbba92622d4a3e3c8375117f7dd64039f287d9ffc0e02a1",
+                "sha256:c6b302b048c054b7463936d8ba884b73877dc47012f3c94665dba92dd658ae04",
+                "sha256:d294e3f85b2238649b1ff49ce3412459a8a312569975a89d14646536362d7576",
+                "sha256:eb128e4a6ea9b98d9a31f33c44978885af27dbe8ae53d665f8790cbfe045517e",
+                "sha256:ff7f5e44ef51fe61da1e09c6f632f0b5808198edd61b363855cc7dd03bf4a8ac"
+            ],
+            "index": "pypi",
+            "version": "==0.2.13"
+        },
         "pydantic": {
             "hashes": [
                 "sha256:07293ab08e7b4d3c9d7de4949a0ea571f11e4557d19ea24dd3ae0c524c0c334d",
@@ -1607,6 +1632,7 @@
                 "sha256:65617e33033874b59d87db603aa1ed450633288aefead953b30bded59cb599a6",
                 "sha256:980a33ce9949cab2a569606b65674d748ecbca4f0796887fd6f46173a7b0d30f"
             ],
+            "index": "pypi",
             "version": "==0.25.1"
         },
         "pygments": {
@@ -1663,7 +1689,7 @@
                 "sha256:0123cacc1627ae19ddf3c27a5de5bd67ee4586fbdd6440d9748f8abb483d3e86",
                 "sha256:961d03dc3453ebbc59dbdea9e4e11c5651520a876d0f4db161e8674aae935da9"
             ],
-            "markers": "python_version >= '2.7' and python_version not in '3.0, 3.1, 3.2'",
+            "markers": "python_version >= '2.7' and python_version not in '3.0, 3.1, 3.2, 3.3'",
             "version": "==2.8.2"
         },
         "python-dotenv": {
@@ -1849,7 +1875,7 @@
                 "sha256:1e61c37477a1626458e36f7b1d82aa5c9b094fa4802892072e49de9c60c4c926",
                 "sha256:8abb2f1d86890a2dfb989f9a77cfcfd3e47c2a354b01111771326f8aa26e0254"
             ],
-            "markers": "python_version >= '2.7' and python_version not in '3.0, 3.1, 3.2'",
+            "markers": "python_version >= '2.7' and python_version not in '3.0, 3.1, 3.2, 3.3'",
             "version": "==1.16.0"
         },
         "sniffio": {
@@ -1860,6 +1886,14 @@
             "markers": "python_version >= '3.7'",
             "version": "==1.3.0"
         },
+        "speechrecognition": {
+            "hashes": [
+                "sha256:14131155e8a8ba00ead1b7b9b1a2fa71c845e4db5f9a5f66a33a1bd6c55c6c35",
+                "sha256:7ae9966887d9909ce3e5a0c27ecc3eacfca16fd0c0829f77f552919418e86306"
+            ],
+            "index": "pypi",
+            "version": "==3.10.0"
+        },
         "sqlalchemy": {
             "hashes": [
                 "sha256:0db6734cb5644c55d0262a813b764c6e2cda1e66e939a488b3d6298cdc7344c2",
@@ -2652,7 +2686,7 @@
                 "sha256:0123cacc1627ae19ddf3c27a5de5bd67ee4586fbdd6440d9748f8abb483d3e86",
                 "sha256:961d03dc3453ebbc59dbdea9e4e11c5651520a876d0f4db161e8674aae935da9"
             ],
-            "markers": "python_version >= '2.7' and python_version not in '3.0, 3.1, 3.2'",
+            "markers": "python_version >= '2.7' and python_version not in '3.0, 3.1, 3.2, 3.3'",
             "version": "==2.8.2"
         },
         "pyzmq": {
@@ -2743,7 +2777,7 @@
                 "sha256:1e61c37477a1626458e36f7b1d82aa5c9b094fa4802892072e49de9c60c4c926",
                 "sha256:8abb2f1d86890a2dfb989f9a77cfcfd3e47c2a354b01111771326f8aa26e0254"
             ],
-            "markers": "python_version >= '2.7' and python_version not in '3.0, 3.1, 3.2'",
+            "markers": "python_version >= '2.7' and python_version not in '3.0, 3.1, 3.2, 3.3'",
             "version": "==1.16.0"
         },
         "stack-data": {

alaroye/alaroye.py

@@ -5,10 +5,10 @@ import pathlib
 from typing import Any, Dict, List
 
 import gradio as gr
-# from gtts import gTTS
-# from pydub import AudioSegment
-# from pydub.playback import play
-# from io import BytesIO
+from gtts import gTTS
+from pydub import AudioSegment
+from pydub.playback import play
+from io import BytesIO
 from dotenv import find_dotenv, load_dotenv
 from langchain.chains import RetrievalQA
 from langchain.chains.retrieval_qa.base import BaseRetrievalQA
@@ -19,7 +19,6 @@ from langchain.llms import OpenAI
 from langchain.prompts import PromptTemplate
 from langchain.text_splitter import CharacterTextSplitter
 from langchain.vectorstores import Chroma
-# import speech_recognition as sr
 
 
 # Load environment variables
@@ -42,16 +41,24 @@ class Alaroye:
         """
 
         self.embeddings = OpenAIEmbeddings()  # type: ignore
-        self.llm = OpenAI(temperature=0.1)  # type: ignore
+        self.llm = OpenAI(temperature=0)  # type: ignore
         self.vector_store: Chroma | None = None
-        # self.speech_recognizer = sr.Recognizer()
         self.retrieval_qa: BaseRetrievalQA | None = None
-        self.persist_directory = os.path.join(os.path.dirname(__file__), "Alaroyedb")
+        self.persist_directory = os.path.join(os.path.dirname(__file__), "alaroyedb")
         self.prompt_template = """
-Use the following pieces of context to answer the question delimited <<< >>>. If you don't know the answer, \
-just say `I don't know, rephrase the question or contect omdena support on slack or email (contact@omdena.com)` \
+You are a helpful assistance that understand german and only respond in german. Answer the \
+question delimited in <<< >>> using the german context. \
+
+If the question is not german, just say `I don't know` in german. \
+Don't try to make up an answer.
+
+If you don't know the answer, just say `I don't know` in german. \
 Don't try to make up an answer.
 
+Only answer the question from the context. If the provided context \
+can't answer the question, just say `I don't know` in german. \
+
+Context:
 {context}
 
 <<<{question}>>>
@@ -156,6 +163,7 @@ Don't try to make up an answer.
 
         # Get the answer
         answer = self.retrieval_qa(question)
+        print(answer)
 
         # Format the answer
         formatted_answer = self._format_answer(answer, verbose=verbose)
@@ -163,59 +171,29 @@ Don't try to make up an answer.
         # Return the formatted answer
         return formatted_answer
 
-    # def _listen(self) -> str:
-    #     """
-    #     Listen to the user.
-
-    #     Returns
-    #     -------
-    #     str
-    #         The user's input.
-    #     """
-
-    #     # Initialize the microphone
-    #     mic = sr.Microphone()
-
-    #     # Listen to the user
-    #     with mic as source:
-    #         print("Calibrating microphone...")
-    #         self.speech_recognizer.adjust_for_ambient_noise(source, duration=5)
-
-    #         print("Listening...")
-    #         try:
-    #             audio = self.speech_recognizer.listen(source, timeout=5)
-    #             print("Recognizing...")
-
-    #             text = self.speech_recognizer.recognize_google(audio)
-
-    #             return text
-    #         except Exception as e:
-    #             bad_response = "Sorry, I didn't catch that. Could you repeat yourself?"
-
-    #             return bad_response
+    @staticmethod
+    def _speak(text: str):
+        """
+        Function to convert text to speech
 
-    # def _speak(self, text: str) -> None:
-    #     """
-    #     Speak to the user.
+        Parameters
+        ----------
+        text : str
+            The text to be converted to speech
+        """
 
-    #     Parameters
-    #     ----------
-    #     text : str
-    #         The text to speak to the user.
-    #     """
+        # Create a byte stream to store the speech audio
+        stream = BytesIO()
 
-    #     # Generate speech using gTTS
-    #     tts = gTTS(text=text, lang="de")
+        # Generate the speech audio using gTTS
+        tts = gTTS(text=text, lang="de")
+        tts.write_to_fp(stream)
 
-    #     # Write the speech to bytes
-    #     mp3_fp = BytesIO()
-    #     tts.write_to_fp(mp3_fp)
+        # Rewind the stream to the beginning
+        stream.seek(0)
 
-    #     # Play the speech
-    #     stream = BytesIO(mp3_fp.read())
-    #     mp3_fp.close()
-    #     audio = AudioSegment.from_file(stream, format="mp3")
-    #     play(audio)
+        # Play the audio file
+        play(AudioSegment.from_file(stream, format="mp3"))
 
     @staticmethod
     def _get_documents(

alaroye/alaroyedb/chroma-collections.parquet

@@ -1,3 +1,3 @@
 version https://git-lfs.github.com/spec/v1
-oid sha256:ba8f8c7ce3183dcece433278eda253ac414602bbf8fc056492f88fcb0f72dc41
+oid sha256:de64174bca901c1c84168475c023eed7ac8f8f6acd772c37f04e22837782cac1
 size 582

alaroye/alaroyedb/chroma-embeddings.parquet

@@ -1,3 +1,3 @@
 version https://git-lfs.github.com/spec/v1
-oid sha256:4c63ddf58e8724ec72057ac7ff59a8247bd51e0053e37fadc1c33c72e5cce719
-size 133228
+oid sha256:01c38e8c0a12afcb92445faea9342406eaa70617126e081ddb79dec454337af6
+size 125303

alaroye/alaroyedb/index/{id_to_uuid_676957b6-5b85-4306-bd90-8fbd6a25173a.pkl → id_to_uuid_bec977cc-77ee-4019-b333-17858f6729e8.pkl}

@@ -1,3 +1,3 @@
 version https://git-lfs.github.com/spec/v1
-oid sha256:4c9b3099292e9a7715bec1415f43620f076b4815fd3b462df83cf7302b9a3030
-size 350
+oid sha256:c79f1acda2734630c4a90916c44d47ac09f776ccfcabb9f4b9a3b052c077883e
+size 348

alaroye/alaroyedb/index/{index_676957b6-5b85-4306-bd90-8fbd6a25173a.bin → index_bec977cc-77ee-4019-b333-17858f6729e8.bin}

@@ -1,3 +1,3 @@
 version https://git-lfs.github.com/spec/v1
-oid sha256:05dacfe0ea852273fa006eba491d99cce965b33f328da42cb36befcf4aa99948
+oid sha256:820b52318e5a319b4d58c885686fafbaebdafcf1f8ddd7a75647e8c605837d8c
 size 63044

alaroye/alaroyedb/index/{index_metadata_676957b6-5b85-4306-bd90-8fbd6a25173a.pkl → index_metadata_bec977cc-77ee-4019-b333-17858f6729e8.pkl}

@@ -1,3 +1,3 @@
 version https://git-lfs.github.com/spec/v1
-oid sha256:2c6688716b16bb645997c219107f1a6f13c20d5ea26fe4165014c682b08f29b5
+oid sha256:114ef538d4ea167d993114412eaa49c4e28622c06184234f1617764d59f3428c
 size 103

alaroye/alaroyedb/index/{uuid_to_id_676957b6-5b85-4306-bd90-8fbd6a25173a.pkl → uuid_to_id_bec977cc-77ee-4019-b333-17858f6729e8.pkl}

@@ -1,3 +1,3 @@
 version https://git-lfs.github.com/spec/v1
-oid sha256:d5652d13e72f5f9fbf7d9d28dba4f216c927b0c28cd6722c8061f31d549d6d3e
+oid sha256:b4cffb2914c902a1345f3bfb78fb24d9e48fa14d8a2911e1bbd2d3a5e7a806c7
 size 386

notebooks/0-alaroye-v0.0.0.ipynb

@@ -33,13 +33,6 @@
    "execution_count": 1,
    "metadata": {},
    "outputs": [
-    {
-     "name": "stdout",
-     "output_type": "stream",
-     "text": [
-      "['/Users/abdulazeezoj/Desktop/Devspace/Play/alaroye', '/Users/abdulazeezoj/Desktop/Devspace/Play/alaroye/notebooks', '/Users/abdulazeezoj/.pyenv/versions/3.10.10/lib/python310.zip', '/Users/abdulazeezoj/.pyenv/versions/3.10.10/lib/python3.10', '/Users/abdulazeezoj/.pyenv/versions/3.10.10/lib/python3.10/lib-dynload', '', '/Users/abdulazeezoj/.local/share/virtualenvs/alaroye-YVTdCuTc/lib/python3.10/site-packages']\n"
-     ]
-    },
     {
      "name": "stderr",
      "output_type": "stream",
@@ -55,7 +48,6 @@
     "\n",
     "# Add the parent directory to the path\n",
     "sys.path.insert(0, os.path.abspath(\"../\"))\n",
-    "print(sys.path)\n",
     "\n",
     "from alaroye.alaroye import Alaroye"
    ]
@@ -101,15 +93,16 @@
   },
   {
    "cell_type": "code",
-   "execution_count": 3,
+   "execution_count": 4,
    "metadata": {},
    "outputs": [
     {
      "name": "stdout",
      "output_type": "stream",
      "text": [
+      "{'query': 'Hallo, wie geht es Ihnen? Gut, sehen sie aus. Geht es ihnen gut?', 'result': 'Mir geht es gut, danke der Nachfrage.', 'source_documents': [Document(page_content='J:\\nOk. Sie haben das so gut vorgetragen und sie sind sich auch so sicher. Ich habe ein gutes Gefühl bei ihnen. Seien Sie doch so gut und schicken Sie mir die Frau Müller, damit wir uns da abstimmen könnten. Wenn es schnell funktioniert, dann ich das prima. Wir beide haben uns auf eine zwei-drittel Stelle geeinigt. Sie haben da meine Zusage. Sie würden ja auch nochmal etwas mehr machen bis das Phänomen nicht an Frau Müller übergeben wurde.\\n\\nS:\\nJa, klar. Aber ich denke das wird mit Frau Müller funktionieren. Wie gesagt ich muss da jetzt auch etwas an mich denken. \\n\\nJ:\\nIch wünsche ihnen alles Gute und die wir sehen uns ja weiterhin.\\nS:\\nBesten Dank. Genau, die Zusammenarbeit bleib weiterhin bestehen. Auf Wiedersehen.', metadata={'source': '../docs/state_of_the_union.txt'}), Document(page_content='Rollenspiel 5 – \\nThema: Stundenreduktion\\nJ: \\nHallo, wie geht es Ihnen? Gut, sehen sie aus. Geht es ihnen gut? \\nS:\\nAlles gut so weit. Ich habe ein ganz wichtiges Anliegen mit ihnen zu besprechen. Ihnen ist bewusst, dass eine sehr geschätzte Kollegin bin und auch sehr oft eingesprungen bin, wenn es zu Krankheitsausfällen kam.\\nJ:\\nDas müssen Sie mir nicht sagen. Sie sind mein bestes Pferd im Stall. Ich bin so glücklich, wenn ich sie sehe. Sie strahlen immer so Ich höre immer von den Eltern und von den Lehrern und den anderen Kollegen immer nur positives. Es ist bemerkenswert, wie sie sich die letzten drei Jahre an der Schule faktisch unersetzlich gemacht haben. Einfach nur traumhaft. Bei ihnen merke ich auch sie tragen das einfach so mit. Bei ihnen merkt man einfach richtig, dass sie mit Freude Lehrerin sind. Auch ihrer Vertrauenslehrer-Tätigkeit ist ganz große Klasse.\\nS:\\nDas freut mich sehr von ihnen zu hören, deshalb fällt es mir auch etwas schwer diese Bitte zu äußern. Ich möchte erstmal sagen, dass ich mich sehr wohl an der Schule fühle und auch das Kollegium und ihre Arbeit sehr schätze. Ich muss dennoch mit ihnen über eine Reduzierung über meine Arbeitsstelle sprechen. Sie wissen ja, dass ich mich in den letzten drei Jahren sehr viel weitergebildet habe und das ich momentan eine Therapie und Begleitausbildung für den Schuldienst habe. Das hatte ich ihnen schon einmal erzählt\\nJ:\\nJa, stimmt. Sie hatten mich schon einmal drauf angesprochen. \\nS:\\nGenau, Sie wissen ja auch, dass ich Förderschullehrkraft bin und das es für unsere Arbeit unabdinglich ist, sich weiterzubilden und neue Methoden zu erfassen und dieser Grund beansprucht mich sehr, weil wir in der Prüfungsphase sind und deshalb müsste ich meine Arbeitszeit auf fünfzig Prozent reduzieren.', metadata={'source': '../docs/state_of_the_union.txt'}), Document(page_content='J:\\nEs gibt noch den Herrn Thomas und die Frau Simones. Da hatte ich wirklich überlegt, sie zu bitten mal langsamer zu machen. Die laufen hier mit Augenringen rum. Frau Simones hat zudem noch ein behindertes Kind und Herr Thomas pflegt noch seine kranken Eltern. Die stehen beide kurz vor dem Burn-Out – also beide. Lieber möchte ich die noch irgendwie retten. Also ich finde ihren Vorschlag mit dem Inklusionshund super. Nur momentan schein alles so „Land unter“ zu sein. Ich möchte ja auch nicht, dass die beiden Kollegen leiden.\\nS:\\nJa, natürlich. Wie sie wissen, bin ich ja schon sehr oft für die beiden Kollegen eingesprungen und bin auch wirklich engagiert. Leider muss ich in diesem Gespräch an mich denken und mich an dieser Stelle von der Problematik abgrenzen. Für die Schule bin ich eine wichtige Ressource. Wenn wir sagen, wir machen diese befristete Stellenreduktion und ich komme ja dann auch wieder in Vollzeit zurück. Einen Kompromiss habe ich ihnen ja auch bereits angeboten. Von fünfzig Prozent auf zwei-drittel und der Beginn ist erst nach den Sommerferien.', metadata={'source': '../docs/state_of_the_union.txt'})]}\n",
       "Answer: \n",
-      "Alles gut so weit. Ich habe ein ganz wichtiges Anliegen mit ihnen zu besprechen.\n",
+      "Mir geht es gut, danke der Nachfrage.\n",
       "\n",
       "\n",
       "Source documents:\n",
@@ -120,115 +113,61 @@
    "source": [
     "# Test the model\n",
     "query = \"Hallo, wie geht es Ihnen? Gut, sehen sie aus. Geht es ihnen gut?\"\n",
-    "response = alaroye.ask(query, verbose=True)\n"
+    "response = alaroye.ask(query, verbose=True)\n",
+    "\n",
+    "# Speak the response\n",
+    "alaroye._speak(response[\"answer\"])\n"
    ]
   },
   {
    "cell_type": "code",
-   "execution_count": 4,
+   "execution_count": 1,
    "metadata": {},
    "outputs": [
     {
      "name": "stdout",
      "output_type": "stream",
      "text": [
-      "Calibrating microphone...\n",
       "Listening...\n",
-      "Recognizing...\n",
-      "hello\n"
-     ]
-    }
-   ],
-   "source": [
-    "# Test the model listening to the microphone\n",
-    "query = alaroye._listen()\n",
-    "print(query)\n",
-    "# response = alaroye.ask(query, verbose=True)"
-   ]
-  },
-  {
-   "cell_type": "code",
-   "execution_count": 5,
-   "metadata": {},
-   "outputs": [
-    {
-     "name": "stdout",
-     "output_type": "stream",
-     "text": [
-      "Answer: \n",
-      "Omdena's terms and conditions state that applicants must be chosen and verified\n",
-      "before they can become collaborators, and that Omdena may collect and use\n",
-      "personal information for the purposes of administering the project. If there is\n",
-      "a conflict between the terms and conditions and the Code of Conduct, the last\n",
-      "appearing in the list will take precedence. Applicants must also represent,\n",
-      "warrant and undertake that their institution has authorized their entry into the\n",
-      "project, and must cease use of the project website and not participate if it is\n",
-      "contrary to their institution's policies. They may also be requested to sign a\n",
-      "Code of Conduct if chosen as a project participant.\n",
-      "\n",
-      "\n",
-      "Source documents:\n",
-      "   - Omdena Terms and Conditions.docx\n"
-     ]
-    }
-   ],
-   "source": [
-    "# Test the model\n",
-    "query = \"Summarize the omdena terms and conditions.\"\n",
-    "response = alaroye.ask(query, verbose=True)"
-   ]
-  },
-  {
-   "cell_type": "code",
-   "execution_count": 6,
-   "metadata": {},
-   "outputs": [
-    {
-     "name": "stdout",
-     "output_type": "stream",
-     "text": [
-      "Answer: \n",
-      "Omdena Top Talent projects are yet another frontier for people to collaborate on\n",
-      "solving AI-related problems. Here Omdena selects a smaller team (2-5 people)\n",
-      "from its top talents to work on projects. All members of top talent projects are\n",
-      "paid as per the market rates.\n",
-      "\n",
-      "\n",
-      "Source documents:\n",
-      "   - Omdena Top Talent Projects Guidebook.docx\n"
-     ]
-    }
-   ],
-   "source": [
-    "# Test the model\n",
-    "query = \"What is a top talent project?\"\n",
-    "response = alaroye.ask(query, verbose=True)"
-   ]
-  },
-  {
-   "cell_type": "code",
-   "execution_count": 7,
-   "metadata": {},
-   "outputs": [
-    {
-     "name": "stdout",
-     "output_type": "stream",
-     "text": [
-      "Answer: \n",
-      "To apply at Omdena School, you can visit the website www.omdena.com/school and\n",
-      "fill out the application form.\n",
-      "\n",
-      "\n",
-      "Source documents:\n",
-      "   - Omdena Local Chapter Collaborator Onboarding.docx\n",
-      "   - Omdena Terms and Conditions.docx\n"
+      "Recognized Text: guten Morgen wie geht es dir\n",
+      "guten Morgen wie geht es dir\n"
      ]
     }
    ],
    "source": [
-    "# Test the model\n",
-    "query = \"how to apply at Omdenaschool\"\n",
-    "response = alaroye.ask(query, verbose=True)"
+    "import speech_recognition as sr\n",
+    "\n",
+    "def listen(stop_word=\"stop\"):\n",
+    "    # Create a recognizer object\n",
+    "    recognizer = sr.Recognizer()\n",
+    "\n",
+    "    # Create a microphone object\n",
+    "    microphone = sr.Microphone()\n",
+    "\n",
+    "    # Adjust microphone settings if needed\n",
+    "    # microphone.energy_threshold = 1000\n",
+    "    # microphone.chunk_size = 1024\n",
+    "\n",
+    "    with microphone as source:\n",
+    "        print(\"Listening...\")\n",
+    "        audio = recognizer.listen(source)\n",
+    "\n",
+    "    try:\n",
+    "        # Use the German language model for speech recognition\n",
+    "        text = recognizer.recognize_google(audio, language=\"de-DE\")\n",
+    "        print(\"Recognized Text:\", text)\n",
+    "        if text.lower() == stop_word:\n",
+    "            return None\n",
+    "        return text\n",
+    "    except sr.UnknownValueError:\n",
+    "        print(\"Could not understand audio\")\n",
+    "    except sr.RequestError as e:\n",
+    "        print(\"Error: \", str(e))\n",
+    "\n",
+    "    return None\n",
+    "\n",
+    "spoken_text = listen(stop_word=\"exit\")\n",
+    "print(spoken_text)"
    ]
   },
   {
@@ -255,19 +194,19 @@
      "name": "stderr",
      "output_type": "stream",
      "text": [
-      "/Users/abdulazeezoj/.local/share/virtualenvs/omdenabot-m2zzZ4nN/lib/python3.11/site-packages/tqdm/auto.py:21: TqdmWarning: IProgress not found. Please update jupyter and ipywidgets. See https://ipywidgets.readthedocs.io/en/stable/user_install.html\n",
+      "/Users/abdulazeezoj/.local/share/virtualenvs/alaroye-YVTdCuTc/lib/python3.10/site-packages/tqdm/auto.py:21: TqdmWarning: IProgress not found. Please update jupyter and ipywidgets. See https://ipywidgets.readthedocs.io/en/stable/user_install.html\n",
       "  from .autonotebook import tqdm as notebook_tqdm\n"
      ]
     }
    ],
    "source": [
-    "import pathlib\n",
+    "import os\n",
     "import sys\n",
     "\n",
     "# Add the parent directory to the path\n",
-    "sys.path.insert(0, str(pathlib.Path(__file__).parent.parent))\n",
+    "sys.path.insert(0, os.path.abspath(\"../\"))\n",
     "\n",
-    "from osanyin.osanyin import Osanyin"
+    "from alaroye.alaroye import Alaroye"
    ]
   },
   {
@@ -285,10 +224,10 @@
    "outputs": [],
    "source": [
     "# Load Osanyin\n",
-    "osanyin = Osanyin(version=\"v0.0.0\")\n",
+    "alaroye = Alaroye(version=\"v0.0.0\")\n",
     "\n",
     "# Load the Osanyin\n",
-    "osanyin.load()"
+    "alaroye.load()"
    ]
   },
   {
@@ -308,26 +247,23 @@
      "name": "stdout",
      "output_type": "stream",
      "text": [
+      "{'query': 'Hallo, wie geht es Ihnen? Gut, sehen sie aus. Geht es ihnen gut?', 'result': 'Mir geht es gut, danke der Nachfrage.', 'source_documents': [Document(page_content='J:\\nOk. Sie haben das so gut vorgetragen und sie sind sich auch so sicher. Ich habe ein gutes Gefühl bei ihnen. Seien Sie doch so gut und schicken Sie mir die Frau Müller, damit wir uns da abstimmen könnten. Wenn es schnell funktioniert, dann ich das prima. Wir beide haben uns auf eine zwei-drittel Stelle geeinigt. Sie haben da meine Zusage. Sie würden ja auch nochmal etwas mehr machen bis das Phänomen nicht an Frau Müller übergeben wurde.\\n\\nS:\\nJa, klar. Aber ich denke das wird mit Frau Müller funktionieren. Wie gesagt ich muss da jetzt auch etwas an mich denken. \\n\\nJ:\\nIch wünsche ihnen alles Gute und die wir sehen uns ja weiterhin.\\nS:\\nBesten Dank. Genau, die Zusammenarbeit bleib weiterhin bestehen. Auf Wiedersehen.', metadata={'source': '../docs/state_of_the_union.txt'}), Document(page_content='Rollenspiel 5 – \\nThema: Stundenreduktion\\nJ: \\nHallo, wie geht es Ihnen? Gut, sehen sie aus. Geht es ihnen gut? \\nS:\\nAlles gut so weit. Ich habe ein ganz wichtiges Anliegen mit ihnen zu besprechen. Ihnen ist bewusst, dass eine sehr geschätzte Kollegin bin und auch sehr oft eingesprungen bin, wenn es zu Krankheitsausfällen kam.\\nJ:\\nDas müssen Sie mir nicht sagen. Sie sind mein bestes Pferd im Stall. Ich bin so glücklich, wenn ich sie sehe. Sie strahlen immer so Ich höre immer von den Eltern und von den Lehrern und den anderen Kollegen immer nur positives. Es ist bemerkenswert, wie sie sich die letzten drei Jahre an der Schule faktisch unersetzlich gemacht haben. Einfach nur traumhaft. Bei ihnen merke ich auch sie tragen das einfach so mit. Bei ihnen merkt man einfach richtig, dass sie mit Freude Lehrerin sind. Auch ihrer Vertrauenslehrer-Tätigkeit ist ganz große Klasse.\\nS:\\nDas freut mich sehr von ihnen zu hören, deshalb fällt es mir auch etwas schwer diese Bitte zu äußern. Ich möchte erstmal sagen, dass ich mich sehr wohl an der Schule fühle und auch das Kollegium und ihre Arbeit sehr schätze. Ich muss dennoch mit ihnen über eine Reduzierung über meine Arbeitsstelle sprechen. Sie wissen ja, dass ich mich in den letzten drei Jahren sehr viel weitergebildet habe und das ich momentan eine Therapie und Begleitausbildung für den Schuldienst habe. Das hatte ich ihnen schon einmal erzählt\\nJ:\\nJa, stimmt. Sie hatten mich schon einmal drauf angesprochen. \\nS:\\nGenau, Sie wissen ja auch, dass ich Förderschullehrkraft bin und das es für unsere Arbeit unabdinglich ist, sich weiterzubilden und neue Methoden zu erfassen und dieser Grund beansprucht mich sehr, weil wir in der Prüfungsphase sind und deshalb müsste ich meine Arbeitszeit auf fünfzig Prozent reduzieren.', metadata={'source': '../docs/state_of_the_union.txt'}), Document(page_content='J:\\nEs gibt noch den Herrn Thomas und die Frau Simones. Da hatte ich wirklich überlegt, sie zu bitten mal langsamer zu machen. Die laufen hier mit Augenringen rum. Frau Simones hat zudem noch ein behindertes Kind und Herr Thomas pflegt noch seine kranken Eltern. Die stehen beide kurz vor dem Burn-Out – also beide. Lieber möchte ich die noch irgendwie retten. Also ich finde ihren Vorschlag mit dem Inklusionshund super. Nur momentan schein alles so „Land unter“ zu sein. Ich möchte ja auch nicht, dass die beiden Kollegen leiden.\\nS:\\nJa, natürlich. Wie sie wissen, bin ich ja schon sehr oft für die beiden Kollegen eingesprungen und bin auch wirklich engagiert. Leider muss ich in diesem Gespräch an mich denken und mich an dieser Stelle von der Problematik abgrenzen. Für die Schule bin ich eine wichtige Ressource. Wenn wir sagen, wir machen diese befristete Stellenreduktion und ich komme ja dann auch wieder in Vollzeit zurück. Einen Kompromiss habe ich ihnen ja auch bereits angeboten. Von fünfzig Prozent auf zwei-drittel und der Beginn ist erst nach den Sommerferien.', metadata={'source': '../docs/state_of_the_union.txt'})]}\n",
       "Answer: \n",
-      "The publishing process for Omdena writers involves submitting an article idea\n",
-      "via a form shared in Slack, getting approval to publish the article from the\n",
-      "project, submitting a draft of the article if the quality is good enough\n",
-      "according to the guidelines, having the Omdena team edit and suggest\n",
-      "improvements, and then submitting the manuscript according to the Omdena JAII\n",
-      "Template via the journal online submission link at https://omdena.com/JAII/.\n",
+      "Mir geht es gut, danke der Nachfrage.\n",
       "\n",
       "\n",
       "Source documents:\n",
-      "   - Omdena Local Chapter Lead Manual.docx\n",
-      "   - Omdena Writers Guidelines.docx\n",
-      "   - Omdena AI Researcher Guidebook.docx\n"
+      "   - state_of_the_union.txt\n"
      ]
     }
    ],
    "source": [
     "# Test the model\n",
-    "query = \"What is the publishing process for omdena writers?\"\n",
-    "response = osanyin.ask(query, verbose=True)"
+    "query = \"Hallo, wie geht es Ihnen? Gut, sehen sie aus. Geht es ihnen gut?\"\n",
+    "response = alaroye.ask(query, verbose=True)\n",
+    "\n",
+    "# Speak the response\n",
+    "alaroye._speak(response[\"answer\"])\n"
    ]
   },
   {
@@ -339,130 +275,23 @@
      "name": "stdout",
      "output_type": "stream",
      "text": [
+      "{'query': 'What is machine learning?', 'result': 'Ich weiß es nicht.', 'source_documents': [Document(page_content='J: \\nDas sagen sie aber etwas. Sie wissen doch, dass wir nur mit zwei-drittel der Belegschaft aktuell auskommen müssen.\\n\\n\\nS:\\nJa, dies tut mir auch sehr leid damit an sie herantreten zu müssen. Aber ich glaube, dass dies für meine weitere Arbeit an der Schule sehr wichtig ist. Es ist auch nicht für immer. \\nJ:\\nWollen Sie weiter Lehrerin sein oder Hundetrainer werden?\\nS:\\nIch möchte in jedem Fall weiterhin Lehrerin bleiben und diesen Hund im Auftrag der Bildung einsetzten. Das ist gerade für unsere Inklusionskinder von großer Bedeutung. Studien belegen, dass die Arbeit mit einem Therapiehund sich positiv auf die Leistungen unserer Inklusionsschüler auswirken. Dieser Aspekt würde sich ebenfalls positiv auf die Qualitätssicherung unserer Schule auswirken. \\nJ:\\nJa, aber fünfzig ist wirklich hart. Das bedeutet ja auch für Sie weniger Gehalt. Haben Sie sich darüber Gedanken gemacht? Kommen Sie damit klar?', metadata={'source': '../docs/state_of_the_union.txt'}), Document(page_content='Rollenspiel 7\\nJ: trained actor\\nS: student teacher\\nThema: Studienfahrt\\nJ: \\nHallo Frau NAME . \\nS:\\nHallo.\\nJ:\\nJa, ich wollte mal mit ihnen sprechen. \\nS:\\nJa, worum geht es denn?\\nJ:\\nUnd zwar haben wir ja bald diese Studienfahrt, nicht wahr? Im Fach Geschichte haben wir ja gesagt, dass wir unsere Projekte berücksichtigen sollen. Also die Simone, Anna-Lena, Martina und ich haben beispielsweise das Thema und als Geschichts-Projekt „Heiliges Römisches Reich“. Dann hatten wir uns überlegt, dass es zutreffend wäre nach Nürnberg zu fahren, weil dort ja diese Burg gibt. Der Großteil der Klasse will aber irgendwie nach Berlin. Natürlich gibt es dort auch die Gedächtniskirche, aber die argumentieren eben wie folgt: „Ey lass mal nach Berlin fahren, ist voll cool, Party machen abends. Wenn es dann zu einer Abstimmung kommt, dann gewinnen die, weil es dann zwanzig zu zehn ist. Dann fahren wir nach Berlin und davon haben wir überhaupt nichts. Deshalb wollten wir Sie fragen, ob Sie uns da nicht unterstützen können. Sie haben ja auch gesagt, dass Nürnberg voll cool wäre. \\nS:\\nAlso ich verstehe sehr wohl dein Anliegen. Das ist verständlich, wenn ihr da ein Referat drüber haltet, dass es mit Nürnberg auf jeden Fall passt. Ich finde die Stadt natürlich auch toll. Finde allerdings, dass jede Stadt eigene Vorteile hat. Das Gespräch, was wir hier gerade führen, hat hier keinen Platz. Ich habe dafür extra die Moderationssitzung erstellt und ich bin da auch nur die Moderatorin. Ihr seid alt genug und ich lege die Verantwortung in eure Hände gemeinsam eine Entscheidung zu treffen. Das ist eine demokratische Abstimmung. Es heißt, es soll fair ablaufen. Ich verantworte nicht, wo es hingeht, sondern ihr. Es ist auch sehr lieb von dir, dass du versuchst mich als Geschichtslehrerin zu überzeugen, aber das kann ich leider nicht entscheiden. Da musst du die Argumente, die du hast nächste Woche in der Sitzung aufführen. \\nJ:\\nAber wie machen sie das denn mit der Moderation. Also gibt es da nicht eine Möglichkeit, dass sie sagen „Ähm ok“ also wenigstens, dass Sie darauf aufmerksam machen, dass es eine Studienfahrt und keine Spaßfahrt ist.', metadata={'source': '../docs/state_of_the_union.txt'}), Document(page_content='Rollenspiel 5 – \\nThema: Stundenreduktion\\nJ: \\nHallo, wie geht es Ihnen? Gut, sehen sie aus. Geht es ihnen gut? \\nS:\\nAlles gut so weit. Ich habe ein ganz wichtiges Anliegen mit ihnen zu besprechen. Ihnen ist bewusst, dass eine sehr geschätzte Kollegin bin und auch sehr oft eingesprungen bin, wenn es zu Krankheitsausfällen kam.\\nJ:\\nDas müssen Sie mir nicht sagen. Sie sind mein bestes Pferd im Stall. Ich bin so glücklich, wenn ich sie sehe. Sie strahlen immer so Ich höre immer von den Eltern und von den Lehrern und den anderen Kollegen immer nur positives. Es ist bemerkenswert, wie sie sich die letzten drei Jahre an der Schule faktisch unersetzlich gemacht haben. Einfach nur traumhaft. Bei ihnen merke ich auch sie tragen das einfach so mit. Bei ihnen merkt man einfach richtig, dass sie mit Freude Lehrerin sind. Auch ihrer Vertrauenslehrer-Tätigkeit ist ganz große Klasse.\\nS:\\nDas freut mich sehr von ihnen zu hören, deshalb fällt es mir auch etwas schwer diese Bitte zu äußern. Ich möchte erstmal sagen, dass ich mich sehr wohl an der Schule fühle und auch das Kollegium und ihre Arbeit sehr schätze. Ich muss dennoch mit ihnen über eine Reduzierung über meine Arbeitsstelle sprechen. Sie wissen ja, dass ich mich in den letzten drei Jahren sehr viel weitergebildet habe und das ich momentan eine Therapie und Begleitausbildung für den Schuldienst habe. Das hatte ich ihnen schon einmal erzählt\\nJ:\\nJa, stimmt. Sie hatten mich schon einmal drauf angesprochen. \\nS:\\nGenau, Sie wissen ja auch, dass ich Förderschullehrkraft bin und das es für unsere Arbeit unabdinglich ist, sich weiterzubilden und neue Methoden zu erfassen und dieser Grund beansprucht mich sehr, weil wir in der Prüfungsphase sind und deshalb müsste ich meine Arbeitszeit auf fünfzig Prozent reduzieren.', metadata={'source': '../docs/state_of_the_union.txt'})]}\n",
       "Answer: \n",
-      "Rudradeb Mitra is the Founder & CEO of Omdena.\n",
-      "\n",
-      "\n",
-      "Source documents:\n",
-      "   - Omdena Local Chapter Collaborator Onboarding.docx\n",
-      "   - Omdena Product Manager QA.docx\n"
-     ]
-    }
-   ],
-   "source": [
-    "# Test the model\n",
-    "query = \"Who is the CEO of omdena?\"\n",
-    "response = osanyin.ask(query, verbose=True)"
-   ]
-  },
-  {
-   "cell_type": "code",
-   "execution_count": 5,
-   "metadata": {},
-   "outputs": [
-    {
-     "name": "stdout",
-     "output_type": "stream",
-     "text": [
-      "Answer: \n",
-      "Omdena's most unique feature is its focus on collaboration, compassion,\n",
-      "curiosity, and consciousness. This approach creates empowerment, builds trust,\n",
-      "gives access to data, generates diverse opinions, and spurs innovation, while\n",
-      "also making the solutions more ethical.\n",
-      "\n",
-      "\n",
-      "Source documents:\n",
-      "   - Omdena Local Chapter Collaborator Onboarding.docx\n",
-      "   - Omdena Local Chapter Lead Manual.docx\n"
-     ]
-    }
-   ],
-   "source": [
-    "# Test the model\n",
-    "query = \"What do you think is MOST unique about Omdena compared to other platforms which build AI (or other software) solutions? Maximum 3 points.\"\n",
-    "response = osanyin.ask(query, verbose=True)"
-   ]
-  },
-  {
-   "cell_type": "code",
-   "execution_count": 6,
-   "metadata": {},
-   "outputs": [
-    {
-     "name": "stdout",
-     "output_type": "stream",
-     "text": [
-      "Answer: \n",
-      "Omdena is a global community of collaborators working together to solve social\n",
-      "and environmental issues through technology. We provide a platform for people\n",
-      "with the right skills and motivation to come together, learn, share and build\n",
-      "solutions. Our approach is to create a community-first innovation model where\n",
-      "members feel like a family.\n",
+      "Ich weiß es nicht.\n",
       "\n",
       "\n",
       "Source documents:\n",
-      "   - Omdena Local Chapter Collaborator Onboarding.docx\n",
-      "   - Omdena Product Manager QA.docx\n"
-     ]
-    }
-   ],
-   "source": [
-    "# Test the model\n",
-    "query = \"Please write in maximum 3 sentences how you will explain Omdena to someone who has no idea about Omdena.\"\n",
-    "response = osanyin.ask(query, verbose=True)"
-   ]
-  },
-  {
-   "cell_type": "code",
-   "execution_count": 7,
-   "metadata": {},
-   "outputs": [
-    {
-     "name": "stdout",
-     "output_type": "stream",
-     "text": [
-      "Answer: \n",
-      "I don't know, rephrase the question or contact Omdena support on slack or email\n",
-      "([email protected]).\n",
-      "\n",
-      "\n",
-      "Source documents:\n",
-      "   - Omdena Product Manager Handbook.docx\n"
-     ]
-    }
-   ],
-   "source": [
-    "# Test the model\n",
-    "query = \"What is google?\"\n",
-    "response = osanyin.ask(query, verbose=True)"
-   ]
-  },
-  {
-   "cell_type": "code",
-   "execution_count": 8,
-   "metadata": {},
-   "outputs": [
-    {
-     "name": "stdout",
-     "output_type": "stream",
-     "text": [
-      "Answer: \n",
-      "Machine learning is a subset of artificial intelligence (AI) that enables\n",
-      "computers to learn from data and experiences without being explicitly\n",
-      "programmed. It uses algorithms to find patterns in data and make decisions with\n",
-      "minimal human intervention.\n",
-      "\n",
-      "\n",
-      "Source documents:\n",
-      "   - Omdena Local Chapter Lead Manual.docx\n",
-      "   - Omdena AI Researcher Guidebook.docx\n"
+      "   - state_of_the_union.txt\n"
      ]
     }
    ],
    "source": [
     "# Test the model\n",
     "query = \"What is machine learning?\"\n",
-    "response = osanyin.ask(query, verbose=True)"
+    "response = alaroye.ask(query, verbose=True)\n",
+    "\n",
+    "# Speak the response\n",
+    "alaroye._speak(response[\"answer\"])"
    ]
   },
   {