damerajee commited on
Commit
c6828c6
1 Parent(s): c5583d6

Update README.md

Browse files
Files changed (1) hide show
  1. README.md +17 -0
README.md CHANGED
@@ -45,7 +45,24 @@ Gaja is a Hindi/Hinglish chat model, initially trained on SarvamAI's OpenHathi m
45
  | How could AI help humans? | AI can help humans in several ways. Firstly, it can assist in decision-making by providing insights and data analysis. For example, AI-powered tools can help individuals and businesses make informed decisions based on real-time data.Secondly, AI can enhance productivity by automating repetitive and mundane tasks. This frees up time and resources for more creative and strategic work.Thirdly, AI can improve healthcare by providing personalized medical diagnoses and treatment plans. AI-powered tools can analyze vast amounts of medical data and provide insights that can lead to more effective and efficient healthcare.Fourthly, AI can enhance security by detecting and preventing cyber threats. AI-powered systems can monitor networks and detect suspicious activity, preventing cyber-attacks before they occur.Lastly, AI can contribute to environmental conservation by optimizing resource utilization and reducing waste. AI-powered systems can monitor and optimize resource usage, leading to more sustainable practices.In summary, AI can help humans by enhancing decision-making, increasing productivity, improving healthcare, enhancing security, and contributing to environmental conservation. |
46
  | क्या आप मुझे बता सकते हैं कि भारत में लोग बड़ों के पैर छूते क्यों हैं? | भारत में, बड़ों के पैर छूना एक आदमी की बड़ों के प्रति श्रद्धा और सम्मान दिखाने की एक पारंपरिक प्रथा है। यह आदमी बड़ों को आदर और आत्मसात करता है। यह एक आदमी के बड़ों के साथ अपने संबंध को स्थापित करने और बड़ों के प्रति अपनी श्रद्धा और आत्मसात को दर्शाित करने का एक तरीका है। यह एक आदमी के बड़ों के साथ अपने घनिष्ठ संबंध को स्थापित करने और बड़ों के प्रति अपनी आत्मात्मकता और आत्मसात को दर्शाित करने का एक तरीका है।|
47
 
 
 
48
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
49
 
50
  # 🚀 Infernce(colab or kaggle notebooks)
51
 
 
45
  | How could AI help humans? | AI can help humans in several ways. Firstly, it can assist in decision-making by providing insights and data analysis. For example, AI-powered tools can help individuals and businesses make informed decisions based on real-time data.Secondly, AI can enhance productivity by automating repetitive and mundane tasks. This frees up time and resources for more creative and strategic work.Thirdly, AI can improve healthcare by providing personalized medical diagnoses and treatment plans. AI-powered tools can analyze vast amounts of medical data and provide insights that can lead to more effective and efficient healthcare.Fourthly, AI can enhance security by detecting and preventing cyber threats. AI-powered systems can monitor networks and detect suspicious activity, preventing cyber-attacks before they occur.Lastly, AI can contribute to environmental conservation by optimizing resource utilization and reducing waste. AI-powered systems can monitor and optimize resource usage, leading to more sustainable practices.In summary, AI can help humans by enhancing decision-making, increasing productivity, improving healthcare, enhancing security, and contributing to environmental conservation. |
46
  | क्या आप मुझे बता सकते हैं कि भारत में लोग बड़ों के पैर छूते क्यों हैं? | भारत में, बड़ों के पैर छूना एक आदमी की बड़ों के प्रति श्रद्धा और सम्मान दिखाने की एक पारंपरिक प्रथा है। यह आदमी बड़ों को आदर और आत्मसात करता है। यह एक आदमी के बड़ों के साथ अपने संबंध को स्थापित करने और बड़ों के प्रति अपनी श्रद्धा और आत्मसात को दर्शाित करने का एक तरीका है। यह एक आदमी के बड़ों के साथ अपने घनिष्ठ संबंध को स्थापित करने और बड़ों के प्रति अपनी आत्मात्मकता और आत्मसात को दर्शाित करने का एक तरीका है।|
47
 
48
+ # Eval
49
+ ### Hindi eval
50
 
51
+ | Task | # Samples | Accuracy | Precision | F1 | Recall | BLEU Score | Metrics |
52
+ |------------------------|-----------|----------|-----------|------|--------|------------|----------------------------|
53
+ | Indic-Sentiment Analysis | 100 | 0.71 | ❌ | 0.76 | ❌ | ❌ | 📊 Accuracy, F1 score |
54
+ | Indic-QA Evaluation | 50 | ❌ | 0.62 | 0.68 | 0.75 | ❌ | 📊 Bert Score |
55
+ | Indic-NLI | 50 | 0.24 | ❌ | 0.17 | ❌ | ❌ | 📊 Accuracy, F1 score |
56
+ | Indic-Translation | 100 | ❌ | ❌ | ❌ | ❌ | 0.71 | 🔤 BLEU Score |
57
+
58
+
59
+ ### English eval
60
+
61
+ | Average | ARC | HellaSwag | MMLU | TruthfulQA | Winogrande | GSM8K|
62
+ |------------------------|-----------|----------|-----------|------|--------|------------|
63
+ | 47.69 | 52.82 | 0.71 | 76.31 | 40.83| 44.64 | 70.64 | 0.91|
64
+
65
+ ![Screenshot (26).png](https://cdn-uploads.huggingface.co/production/uploads/6487239cca30096ea9f52115/aj_zS04BlF8t1REss1lne.png)
66
 
67
  # 🚀 Infernce(colab or kaggle notebooks)
68