reichaves commited on
Commit
52f6e9d
·
unverified ·
1 Parent(s): 4c7eae9

Create README.pt.md

Browse files
Files changed (1) hide show
  1. README.pt.md +128 -0
README.pt.md ADDED
@@ -0,0 +1,128 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ ---
2
+ title: Chatbot-com-MaritacaAI-para-PDFs
3
+ emoji: 📚
4
+ colorFrom: indigo
5
+ colorTo: blue
6
+ sdk: streamlit
7
+ sdk_version: 1.28.0
8
+ app_file: app.py
9
+ pinned: false
10
+ ---
11
+
12
+ # Chatbot com MaritacaAI para PDFs
13
+
14
+ [Leia este README em Inglês](README.md)
15
+
16
+ [![Hugging Face Spaces](https://img.shields.io/badge/%F0%9F%A4%97%20Hugging%20Face-Spaces-blue)](https://huggingface.co/spaces/reichaves/Chatbot-with-MaritacaAI-for-PDFs)
17
+ [![Streamlit App](https://static.streamlit.io/badges/streamlit_badge_black_white.svg)](https://chatbotmaritacaai-jkiyzmcjcuvduw5dzymwu5.streamlit.app/)
18
+
19
+ Este projeto implementa um sistema de Geração Aumentada por Recuperação (RAG, na sigla em inglês) conversacional usando Streamlit, LangChain e modelos de linguagem grandes da [MaritacaAI](https://www.maritaca.ai/) - uma startup brasileira focada na especialização de modelos de linguagem para domínios e idiomas específicos - especializado em Português do Brasil. O aplicativo permite aos usuários fazer upload de documentos em PDF, fazer perguntas sobre seu conteúdo e manter um histórico de conversas para contexto em diálogos contínuos.
20
+
21
+ ## Autor
22
+
23
+ Reinaldo Chaves ([email protected])
24
+
25
+ ## Funcionalidades
26
+
27
+ - Interface de usuário em Streamlit com tema escuro e layout responsivo
28
+ - Upload e processamento de múltiplos arquivos PDF
29
+ - Processamento de documentos utilizando LangChain e FAISS
30
+ - Geração de respostas usando o modelo sabia-3 da MaritacaAI, especializado em Português do Brasil
31
+ - Criação de embeddings de texto utilizando o modelo all-MiniLM-L6-v2 da Hugging Face
32
+ - Histórico de chat persistente para manter o contexto das conversas
33
+ - Barra lateral com diretrizes importantes para o usuário
34
+ - Contagem de tokens por resposta
35
+ - Formatação especial para documentos jurídicos e solicitações baseadas na Lei de Acesso à Informação (LAI)
36
+
37
+ ## Requisitos
38
+
39
+ - Python 3.7 ou superior
40
+ - Streamlit
41
+ - LangChain
42
+ - FAISS
43
+ - PyPDF2
44
+ - MaritalkAI
45
+ - HuggingFace Embeddings
46
+ - Outras dependências listadas em `requirements.txt`
47
+
48
+ ## Instalação
49
+
50
+ 1. Clone este repositório:
51
+ ```
52
+ git clone https://github.com/reichaves/chatbotmaritacaai.git
53
+ cd chatbotmaritacaai
54
+ ```
55
+
56
+ 2. Instale as dependências:
57
+ ```
58
+ pip install streamlit langchain langchain_huggingface maritalk faiss-cpu tenacity cachetools
59
+ ```
60
+
61
+ 3. Configure as chaves de API necessárias:
62
+ - Chave da API da MaritacaAI (https://plataforma.maritaca.ai/)
63
+ - Token de API da Hugging Face (https://huggingface.co/docs/hub/security-tokens)
64
+
65
+ ## Uso
66
+
67
+ 1. Execute o aplicativo Streamlit:
68
+ ```
69
+ streamlit run app.py
70
+ ```
71
+
72
+
73
+ 2. Abra o navegador e acesse o endereço local exibido no terminal.
74
+ 3. Insira suas chaves de API quando solicitado.
75
+ 4. Faça o upload de um ou mais arquivos PDF.
76
+ 5. Faça perguntas sobre o conteúdo dos documentos no campo de entrada de texto.
77
+
78
+ ## Como funciona
79
+
80
+ 1. **Upload de documentos**: Os usuários fazem o upload de arquivos PDF, que são processados e divididos em partes menores.
81
+ 2. **Criação de embeddings**: O texto é convertido em embeddings usando o modelo all-MiniLM-L6-v2 da Hugging Face.
82
+ 3. **Armazenamento vetorial**: Os embeddings são armazenados em um banco de dados FAISS para recuperação eficiente.
83
+ 4. **Processamento de perguntas**: As perguntas dos usuários são contextualizadas com base no histórico do chat.
84
+ 5. **Recuperação de informações**: O sistema recupera os trechos de texto mais relevantes com base na pergunta.
85
+ 6. **Geração de respostas**: O modelo sabia-3 da MaritacaAI gera uma resposta em Português do Brasil com base nos trechos recuperados e na pergunta.
86
+ 7. **Manutenção do histórico**: O histórico do chat é mantido para fornecer contexto em conversas contínuas.
87
+
88
+ ## Funcionalidades especiais
89
+
90
+ - Formatação especial para análise de documentos jurídicos
91
+ - Processamento detalhado de documentos relacionados à Lei de Acesso à Informação (LAI)
92
+ - Sistema de cache para melhor desempenho
93
+ - Tratamento robusto de erros
94
+ - Interface adaptável que mantém o contexto das conversas
95
+
96
+ ## Avisos importantes
97
+
98
+ - Não compartilhe documentos que contenham informações sensíveis ou confidenciais
99
+ - As respostas geradas por IA podem conter erros ou imprecisões
100
+ - Sempre verifique as informações com as fontes originais
101
+ - Este projeto é para fins educacionais e de demonstração
102
+ - Use de forma responsável e em conformidade com as políticas de uso de API
103
+
104
+ ## Contribuições
105
+
106
+ Contribuições são bem-vindas! Por favor:
107
+ 1. Faça um fork do projeto
108
+ 2. Crie um branch para sua funcionalidade (`git checkout -b feature/AmazingFeature`)
109
+ 3. Commit suas alterações (`git commit -m 'Add some AmazingFeature'`)
110
+ 4. Envie para o branch (`git push origin feature/AmazingFeature`)
111
+ 5. Abra um Pull Request
112
+
113
+ ## Licença
114
+
115
+ [Licença MIT](LICENSE)
116
+
117
+ ## Citação
118
+
119
+ Se você usar este projeto em sua pesquisa ou aplicação, por favor cite:
120
+
121
+ ```
122
+ @software{chatbot-maritacaai-pdfs,
123
+ author = {Reinaldo Chaves},
124
+ title = {Chatbot with MaritacaAI for PDFs},
125
+ year = {2024},
126
+ url = {https://github.com/reichaves/chatbotmaritacaai/}
127
+ }
128
+ ```