Azure AI Search आणि Purview कसे वापरावे: संवेदनशीलता लेबल-आधारित सुरक्षित RAG संपूर्ण मार्गदर्शक

प्रस्तावना

आधुनिक डेटा व्यवस्थापन आणि शोध क्षेत्रात, संवेदनशीलता लेबल-आधारित सुरक्षित RAG (Retrieval-Augmented Generation) प्रणाली तयार करणे अत्यंत महत्त्वाचे आहे. RAG वापरकर्त्यांना अधिक अचूक उत्तरं आणि माहिती प्रदान करण्यासाठी शोध आणि निर्माणाच्या फायद्यांना एकत्रित करू शकते. या लेखात, आम्ही Azure AI Search आणि Purview च्या माध्यमातून, संवेदनशीलता लेबल-आधारित सुरक्षित RAG प्रणाली कशी तयार करावी याबद्दल चरण-दर-चरण मार्गदर्शन करणार आहोत.

पूर्वअट

सुरू करण्यापूर्वी, कृपया खात्री करा की आपल्याकडे खालील अटी आहेत:

Azure खाते: Azure AI Search आणि Azure Purview वर प्रवेश करण्यासाठी आपल्याला एक वैध Azure खाते आवश्यक आहे.

Azure सेवांचा मूलभूत ज्ञान: संसाधन गट आणि सेवा कशा तयार करायच्या याबद्दल मूलभूत माहिती.

प्रोग्रामिंगची मूलभूत माहिती: या लेखातील काही उदाहरणे मूलभूत Python किंवा PowerShell प्रोग्रामिंग ज्ञानाची आवश्यकता असू शकते.

तपशीलवार चरण

पहिला चरण: Azure AI Search सेवा तयार करणे

Azure पोर्टल वर लॉगिन करा.

डाव्या मेनूमध्ये "संसाधन तयार करा" वर क्लिक करा.

शोध बॉक्समध्ये "Azure शोध" टाका, "Azure Cognitive Search" निवडा, आणि नंतर "तयार करा" वर क्लिक करा.

आवश्यक माहिती भरा, जसे की नाव, सदस्यता, संसाधन गट आणि स्थान, आणि नंतर "पुनरावलोकन + तयार करा" वर क्लिक करा.

माहिती योग्य असल्याची पुष्टी केल्यानंतर, "तयार करा" वर क्लिक करा.

Azure AI शोध सेवा तयार केल्यानंतर, आपण पोर्टलमध्ये संबंधित सेवा माहिती मिळवू शकता

दुसरा चरण: Azure Purview खाते तयार करणे

Azure पोर्टल वर लॉगिन करा.

"संसाधन तयार करा" वर क्लिक करा.

शोध बॉक्समध्ये "Purview" टाका, आणि नंतर "Azure Purview" निवडा.

आवश्यक माहिती भरा, जसे की खाते नाव, सदस्यता, संसाधन गट आणि क्षेत्र, पुष्टी केल्यानंतर "पुनरावलोकन + तयार करा" वर क्लिक करा.

संसाधन तैनात होईपर्यंत प्रतीक्षा करा.

Purview सेवा आपल्याला डेटाच्या वर्गीकरण आणि संवेदनशीलता लेबल व्यवस्थापित करण्यात मदत करू शकते

तिसरा चरण: डेटा स्रोत आणि संवेदनशीलता लेबल कॉन्फिगर करणे

Azure Purview पोर्टलमध्ये, "डेटा स्रोत" वर क्लिक करा.

"डेटा स्रोत जोडा" निवडा, संबंधित माहिती भरा, आणि आपल्या डेटा स्रोताशी कनेक्ट करा.

डेटा स्कॅन कॉन्फिगर करा. आपण स्वयंचलित स्कॅन किंवा मॅन्युअल स्कॅन निवडू शकता.

डेटा वर्गीकरणामध्ये, संवेदनशीलता लेबल सानुकूलित करा, जसे की: वैयक्तिक डेटा, आर्थिक माहिती, गुप्त डेटा इत्यादी.

Purview च्या माध्यमातून, आपण डेटा संवेदनशीलता लेबल सहजपणे व्यवस्थापित करू शकता

चौथा चरण: Azure AI Search समाकलित करणे

एक नवीन अनुक्रमणिका तयार करा, Azure शोध सेवेमध्ये REST API किंवा SDK च्या माध्यमातून अनुक्रमणिका कॉन्फिगर करा.

Azure पोर्टलमध्ये अनुक्रमणिका तयार करा, अनुक्रमणिका कॉन्फिगर करण्यासाठी क्षेत्र, डेटा प्रकार इत्यादी पॅरामीटर्स परिभाषित करा.

{
"name": "sample-index", "fields": [ {"name": "id", "type": "Edm.String", "key": true, "searchable": true}, {"name": "content", "type": "Edm.String", "searchable": true} ] } 

SDK चा वापर करून डेटा शोध अनुक्रमणिकेत लोड करा.

पाचवा चरण: RAG विनंती प्रक्रिया तर्क तयार करणे

Azure Functions किंवा अनुप्रयोग सेवा वापरून एक API इंटरफेस तयार करा, वापरकर्त्याच्या क्वेरी विनंत्या स्वीकारा.

त्या इंटरफेसमध्ये, संवेदनशीलता लेबल तपासणीचा तर्क लागू करा.

import requests
def querysearch(query): # येथे संवेदनशीलता लेबल तपासणी लागू करा, आणि तपासणीच्या निकालानुसार शोध API ला प्रवेश करा response = requests.get(f"?q={query}") return response.json() 

सहावा चरण: प्रक्रिया केलेले प्रतिसाद परत करणे

क्वेरी प्रक्रिया केल्यानंतर, शोध अनुक्रमणिकेतून माहिती मिळवा आणि वापरकर्त्याला परत करा, याची खात्री करा की आउटपुट सामग्री कोणतीही संवेदनशील माहिती उघड करत नाही.

def processresponse(response):
results = response.get('value', []) # शोध निकाल प्रक्रिया करा, संवेदनशील माहिती गाळा return results 

सामान्य प्रश्न

डेटाची सुरक्षा कशी सुनिश्चित करावी?

- संवेदनशील माहितीवर कठोर नियंत्रण सुनिश्चित करण्यासाठी Azure Purview च्या संवेदनशीलता लेबल व्यवस्थापन कार्यक्षमता वापरा.

वापरकर्ता क्वेरीमधील संवेदनशील माहिती कशी हाताळावी?

- क्वेरी तर्कामध्ये संवेदनशीलता लेबल तपासणी यंत्रणा लागू करा, लेबलच्या आधारे योग्य प्रक्रिया करा, जसे की काही डेटा गाळणे.

कोणत्या प्रकारच्या डेटा स्रोतांचा वापर केला जाऊ शकतो?

- Azure Purview विविध डेटा स्रोतांना समर्थन देते, जसे की Azure Blob Storage, SQL डेटाबेस इत्यादी.

निष्कर्ष

संवेदनशीलता लेबल-आधारित सुरक्षित RAG प्रणाली तयार करणे काही प्रमाणात तांत्रिक आधाराची आवश्यकता असली तरी, वरील चरणांचे पालन करून, आपण Azure AI Search आणि Purview चा वापर करून प्रभावी, सुरक्षित माहिती शोध प्रणाली तयार करू शकता. प्रभावी डेटा व्यवस्थापन आणि संवेदनशीलता लेबल नियंत्रणाद्वारे, आपण हाताळलेल्या माहितीची सुरक्षा आणि अनुपालन सुनिश्चित करू शकता. आशा आहे की या लेखातील मार्गदर्शन आपल्याला मदत करेल!