Ubuntu 24.04.1 के SOLR 9.6.1 और Zookeeper 3.8.1

Daniel Marino

गुरुवार, 24 अक्तूबर 2024 को 3:14:37 pm

ज़ूकीपर एकीकरण के साथ एसओएलआर के लिए एसएसएल को सक्षम करने में चुनौतियाँ

एसओएलआर-ज़ूकीपर सेटअप में एसएसएल को सक्षम करना मुश्किल हो सकता है, खासकर जब उबंटू 24.04.1 सर्वर के साथ काम कर रहा हो। यह कॉन्फ़िगरेशन प्रक्रिया नोड्स के बीच सुरक्षित संचार सुनिश्चित करती है, लेकिन एक छोटी सी गलत कॉन्फ़िगरेशन भी SOLR एडमिन यूआई जैसी सेवाओं को ठीक से काम करने से रोक सकती है। यदि आपने हाल ही में एसएसएल सक्षम करने का प्रयास किया है और समस्याओं का सामना किया है, तो आप अकेले नहीं हैं।

इस लेख में, हम स्थानीय उबंटू सर्वर पर ज़ूकीपर 3.8.1 के साथ एकीकृत होने पर एसओएलआर 9.6.1 में एसएसएल सक्रियण के दौरान आने वाली एक आम समस्या के बारे में जानेंगे। विचाराधीन सेटअप में एक ही सर्वर पर एक ही शार्ड, एकाधिक प्रतिकृतियां और बुनियादी प्रमाणीकरण के साथ एसओएलआर और ज़ूकीपर चलाना शामिल है। एसएसएल सेटिंग्स को अपडेट करने के बाद होने वाली त्रुटियों को हल करने पर ध्यान केंद्रित किया जाएगा।

एसएसएल गलत कॉन्फ़िगरेशन के परिणामस्वरूप अक्सर लॉग फ़ाइलों में "एडमिन यूआई लॉन्च नहीं हो रहा है" या "टूटा पाइप" संदेश जैसी त्रुटियां होती हैं, जिनका समस्या निवारण करना चुनौतीपूर्ण हो सकता है। ये त्रुटियाँ आम तौर पर एसओएलआर या ज़ूकीपर नोड्स के भीतर प्रमाणपत्र समस्याओं या एसएसएल कनेक्शन विफलताओं से उत्पन्न होती हैं, जिससे सेवाओं के बीच संचार टूट जाता है।

निम्नलिखित अनुभागों में, हम लॉग फ़ाइलों में गहराई से उतरेंगे, इन एसएसएल-संबंधित त्रुटियों के संभावित कारणों का विश्लेषण करेंगे, और आपके एसओएलआर और ज़ूकीपर सेटअप के लिए एक सुचारू एसएसएल कॉन्फ़िगरेशन सुनिश्चित करने के लिए चरण-दर-चरण समाधान प्रदान करेंगे।

आज्ञा	उपयोग का उदाहरण
keytool -genkeypair	इस कमांड का उपयोग कीस्टोर में एक कुंजी जोड़ी (सार्वजनिक और निजी कुंजी) उत्पन्न करने के लिए किया जाता है। सुरक्षित संचार सुनिश्चित करने, एसओएलआर और ज़ूकीपर के लिए एसएसएल प्रमाणपत्र बनाने के लिए यह महत्वपूर्ण है।
keytool -import -trustcacerts	यह विश्वसनीय CA (सर्टिफिकेट अथॉरिटी) प्रमाणपत्रों को कीस्टोर में आयात करता है। यह एसएसएल सेटअप के लिए विशिष्ट है, जो सिस्टम को रूट और इंटरमीडिएट प्रमाणपत्रों पर भरोसा करने में सक्षम बनाता है।
echo "ssl.client.enable=true"	ज़ूकीपर कॉन्फ़िगरेशन फ़ाइल में एसएसएल-विशिष्ट कॉन्फ़िगरेशन को प्रतिध्वनित करता है और जोड़ता है। इसका उपयोग ज़ूकीपर में एसएसएल क्लाइंट संचार को सक्षम करने के लिए किया जाता है।
keytool -list	यह कमांड कीस्टोर में सभी प्रविष्टियों को सूचीबद्ध करता है। यह सत्यापित करने के लिए विशिष्ट है कि सभी प्रमाणपत्र (रूट, इंटरमीडिएट, सर्वर) सही ढंग से जोड़े गए हैं और एसएसएल उपयोग के लिए उपलब्ध हैं।
zkServer.sh restart	अद्यतन कॉन्फ़िगरेशन के साथ ज़ूकीपर सर्वर को पुनरारंभ करता है, विशेष रूप से एसएसएल-संबंधित परिवर्तनों के बाद। यह कमांड सुनिश्चित करता है कि नई एसएसएल सेटिंग्स प्रभावी हों।
ssl.quorum.keyStore.location	कीस्टोर फ़ाइल की ओर इशारा करते हुए, Zoo.cfg में एक ज़ूकीपर-विशिष्ट सेटिंग जोड़ी गई। यह सुनिश्चित करता है कि ज़ूकीपर नोड्स के बीच कोरम संचार के लिए एसएसएल प्रमाणपत्र सही ढंग से संदर्भित हैं।
ssl.quorum.trustStore.location	एक अन्य ज़ूकीपर-विशिष्ट कॉन्फ़िगरेशन जो ट्रस्टस्टोर फ़ाइल के स्थान को परिभाषित करता है, जिससे सिस्टम को ज़ूकीपर कोरम में अन्य नोड्स पर भरोसा करने की अनुमति मिलती है।
jetty-ssl.xml	SOLR द्वारा उपयोग की जाने वाली जेटी-विशिष्ट कॉन्फ़िगरेशन फ़ाइल। यह कीस्टोर और ट्रस्टस्टोर पथ जैसी एसएसएल सेटिंग्स को कॉन्फ़िगर करता है, यह सुनिश्चित करता है कि एसओएलआर HTTPS के माध्यम से सुरक्षित रूप से संचार करता है।
monitor_ssl_logs()	यह पायथन फ़ंक्शन विफल हैंडशेक जैसी त्रुटियों के लिए एसएसएल लॉग की लगातार निगरानी करता है। यह एसओएलआर और ज़ूकीपर में एसएसएल कनेक्शन समस्याओं के निदान के लिए अत्यधिक विशिष्ट है।

एसओएलआर और ज़ूकीपर के लिए एसएसएल कॉन्फ़िगरेशन और स्क्रिप्टिंग का विश्लेषण

पहली स्क्रिप्ट एसएसएल कॉन्फ़िगरेशन ठीक से लागू होने को सुनिश्चित करते हुए एसओएलआर और ज़ूकीपर को पुनरारंभ करने की प्रक्रिया को स्वचालित करती है। यह ज़ूकीपर इंस्टेंसेस के माध्यम से लूप करने और अद्यतन एसएसएल सेटिंग्स के साथ उन्हें पुनः आरंभ करने के लिए बैश स्क्रिप्टिंग का उपयोग करता है। इस स्क्रिप्ट का महत्व कई ज़ूकीपर नोड्स को प्रबंधित करने में निहित है, क्योंकि एसएसएल कॉन्फ़िगरेशन को पूरे क्लस्टर में समान रूप से लागू किया जाना चाहिए। `zkServer.sh restart` का उपयोग यह सुनिश्चित करता है कि प्रत्येक ज़ूकीपर नोड को उसकी संबंधित कॉन्फ़िगरेशन फ़ाइल के साथ सही ढंग से पुनरारंभ किया गया है, जिससे मल्टी-नोड सेटअप में क्लस्टर प्रबंधन के लिए स्क्रिप्ट कुशल हो जाती है।

स्क्रिप्ट `solr restart` का उपयोग करके SOLR इंस्टेंस के पुनरारंभ को भी संबोधित करती है। एसओएलआर HTTPS अनुरोधों को संभालने के लिए जेट्टी पर निर्भर करता है, और स्क्रिप्ट यह सुनिश्चित करती है कि एसएसएल-संबंधित सेटिंग्स जैसे कि कीस्टोर और ट्रस्टस्टोर पथ सही ढंग से पुनः लोड किए गए हैं। यह एसओएलआर एडमिन यूआई तक पहुंचने पर संभावित एसएसएल हैंडशेक विफलताओं को रोकता है, जो पुराने या गलत कॉन्फ़िगर किए गए एसएसएल प्रमाणपत्रों से उत्पन्न हो सकता है। इन कार्यों को स्वचालित करके, स्क्रिप्ट मैन्युअल त्रुटियों को कम करती है, खासकर जब एक ही सर्वर पर कई सेवाओं में एसएसएल प्रमाणपत्र प्रबंधित करते हैं।

दूसरी स्क्रिप्ट का उपयोग एसओएलआर और ज़ूकीपर दोनों में एसएसएल के लिए जावा कीस्टोर्स बनाने और प्रबंधित करने के लिए किया जाता है। जावा की कीटूल उपयोगिता का उपयोग कुंजी जोड़े बनाने और कीस्टोर में प्रमाणपत्र आयात करने के लिए किया जाता है। कमांड `keytool -genkeypair` आवश्यक SSL प्रमाणपत्र उत्पन्न करता है, जबकि `keytool -import` का उपयोग विश्वसनीय रूट और मध्यवर्ती प्रमाणपत्र जोड़ने के लिए किया जाता है। ये प्रमाणपत्र सुनिश्चित करते हैं कि नोड्स के बीच एसएसएल संचार विश्वसनीय और सुरक्षित है। यह स्क्रिप्ट एसएसएल प्रमाणपत्रों को सही ढंग से स्थापित करने और प्रबंधित करने के लिए महत्वपूर्ण है, जो सेवाओं के बीच सुरक्षित संचार को सक्षम करने में केंद्रीय भूमिका निभाते हैं।

अंत में, प्रदान की गई पायथन स्क्रिप्ट एक लॉग मॉनिटरिंग टूल के रूप में कार्य करती है जिसे विशेष रूप से एसएसएल हैंडशेक त्रुटियों का पता लगाने के लिए डिज़ाइन किया गया है। वास्तविक समय में एसएसएल लॉग को लगातार पढ़कर, यह स्क्रिप्ट एसएसएल से संबंधित मुद्दों जैसे `एसएसएल हैंडशेक विफल` की पहचान कर सकती है। लॉगिंग का यह स्तर जटिल वातावरण में समस्याओं के निदान के लिए आवश्यक है जहां ज़ूकीपर और एसओएलआर जैसी सेवाएं एन्क्रिप्टेड चैनलों पर संचार करती हैं। वास्तविक समय की निगरानी एसएसएल विफलताओं के मूल कारण को तुरंत पहचानने में मदद करती है, जो प्रमाणपत्र बेमेल, गलत कॉन्फ़िगरेशन, या समाप्त हो चुके प्रमाणपत्रों से उत्पन्न हो सकती है। यह समस्या निवारण उपकरण एकाधिक नोड्स और एसएसएल जटिलताओं वाले वातावरण में विशेष रूप से मूल्यवान है।

एसओएलआर और ज़ूकीपर में एसएसएल कॉन्फ़िगरेशन मुद्दों को संभालना

उबंटू पर एसएसएल कॉन्फ़िगरेशन के साथ एसओएलआर और ज़ूकीपर पुनरारंभ को स्वचालित करने के लिए बैश स्क्रिप्टिंग का उपयोग करना

#!/bin/bash
# Script to automate SOLR and Zookeeper restart with SSL configuration
# Paths to configuration files
ZOOKEEPER_DIR="/opt/zookeeper"
SOLR_DIR="/opt/solr"
SSL_KEYSTORE="/opt/solr-9.6.1/server/etc/solr-ssl.jks"
ZOOKEEPER_CONFIG="$ZOOKEEPER_DIR/conf/zoo.cfg"
SOLR_CONFIG="$SOLR_DIR/server/etc/jetty-ssl.xml"

# Restart Zookeeper with SSL configuration
echo "Restarting Zookeeper..."
for i in {1..3}; do
    /bin/bash $ZOOKEEPER_DIR/bin/zkServer.sh restart $ZOOKEEPER_DIR/data/z$i/zoo.cfg
done

# Restart SOLR with SSL configuration
echo "Restarting SOLR..."
/bin/bash $SOLR_DIR/bin/solr restart -c -p 8983 -z localhost:2181,localhost:2182,localhost:2183 -m 5g -force

एसओएलआर और ज़ूकीपर में एसएसएल के लिए जावा कीस्टोर्स को कॉन्फ़िगर करना

एसएसएल प्रमाणपत्र बनाने और कॉन्फ़िगर करने के लिए जावा कीस्टोर (जेकेएस) और कीटूल का उपयोग करना

#!/bin/bash
# Generate a keystore with a self-signed certificate
keytool -genkeypair -alias solr -keyalg RSA -keystore /opt/solr-9.6.1/server/etc/solr-ssl.jks

# Import intermediate and root certificates
keytool -import -trustcacerts -alias root -file /path/to/rootCA.pem -keystore /opt/solr-9.6.1/server/etc/solr-ssl.jks
keytool -import -trustcacerts -alias intermediate -file /path/to/intermediateCA.pem -keystore /opt/solr-9.6.1/server/etc/solr-ssl.jks

# Configure Zookeeper SSL settings
echo "ssl.client.enable=true" >> $ZOOKEEPER_DIR/conf/zoo.cfg
echo "ssl.quorum.keyStore.location=/opt/solr-9.6.1/server/etc/solr-ssl.jks" >> $ZOOKEEPER_DIR/conf/zoo.cfg
echo "ssl.quorum.trustStore.location=/opt/solr-9.6.1/server/etc/solr-ssl.jks" >> $ZOOKEEPER_DIR/conf/zoo.cfg

एसएसएल हैंडशेक समस्या निवारण को स्वचालित करना

समस्या निवारण के लिए एसएसएल हैंडशेक लॉग की निगरानी के लिए पायथन का उपयोग करना

import subprocess
import time

def monitor_ssl_logs(log_file):
    with open(log_file, 'r') as f:
        f.seek(0, 2)  # Move to the end of file
        while True:
            line = f.readline()
            if not line:
                time.sleep(0.1)
                continue
            if "SSL handshake failed" in line:
                print(f"Error: {line.strip()}")

# Start monitoring Zookeeper SSL logs
monitor_ssl_logs("/opt/zookeeper/logs/zookeeper.log")

एसओएलआर और ज़ूकीपर में एसएसएल हैंडशेक और कॉन्फ़िगरेशन जटिलताएँ

एसओएलआर और ज़ूकीपर में एसएसएल को सक्षम करते समय ध्यान देने योग्य एक महत्वपूर्ण पहलू यह है कि कैसे एसएसएल हैंडशेक प्रक्रिया कार्य करती है. हैंडशेक में क्लाइंट और सर्वर के बीच प्रमाणपत्रों का आदान-प्रदान शामिल होता है, एन्क्रिप्टेड डेटा ट्रांसमिशन शुरू होने से पहले विश्वास की पुष्टि की जाती है। यदि SOLR और Zookeeper कॉन्फ़िगरेशन दोनों में प्रमाणपत्र सही ढंग से सेट नहीं किए गए हैं तो अक्सर समस्याएँ उत्पन्न होती हैं। उदाहरण के लिए, बेमेल प्रमाणपत्र श्रृंखला या कीस्टोर पासवर्ड सिस्टम को एसएसएल कनेक्शन को सफलतापूर्वक शुरू करने से रोक सकते हैं। एसओएलआर एसएसएल संचार के प्रबंधन के लिए जेट्टी पर निर्भर करता है, जिससे यह सुनिश्चित करना महत्वपूर्ण हो जाता है कि जेट्टी कॉन्फ़िगरेशन आपकी कीस्टोर सेटिंग्स के साथ समन्वयित है।

एक और आम चुनौती कई नोड्स में एसएसएल स्थापित करना है, खासकर ज़ूकीपर कोरम में। एकाधिक ज़ूकीपर नोड्स के साथ, सुरक्षित क्लाइंट-टू-सर्वर और सर्वर-टू-सर्वर संचार को सक्षम करने के लिए एसएसएल कॉन्फ़िगरेशन को सभी सर्वरों में सुसंगत होना चाहिए। प्रत्येक नोड में समान कीस्टोर और ट्रस्टस्टोर सेटअप, साथ ही समान एसएसएल प्रोटोकॉल जैसे होना चाहिए टीएलएसवी1.2. ये कॉन्फ़िगरेशन `zoo.cfg` फ़ाइल में पाए जाते हैं। नोड्स के बीच कोई भी विसंगति "टूटी हुई पाइप" या "सॉकेट बंद है" त्रुटियों जैसी समस्याओं को जन्म दे सकती है, जैसा कि समस्या परिदृश्य में देखा गया है।

यह विचार करना भी आवश्यक है कि ज़ूकीपर एसएसएल सक्षम होने पर कोरम संचार को कैसे संभालता है। `ssl.quorum.enabledProtocols` सेट करके, आप सुनिश्चित करते हैं कि ज़ूकीपर नोड्स के बीच सुरक्षित संचार टीएलएस जैसे विश्वसनीय प्रोटोकॉल पर होता है। इसके अतिरिक्त, `ssl.quorum.hostnameVerification=false` रखना उन मामलों में आवश्यक हो सकता है जहां ज़ूकीपर नोड्स को होस्टनाम के बजाय आईपी द्वारा संदर्भित किया जाता है, क्योंकि होस्टनाम बेमेल एसएसएल हैंडशेक को बाधित कर सकता है। इन सेटिंग्स को ठीक करने से आपके वितरित सेटअप में सुरक्षित संचार में उल्लेखनीय सुधार हो सकता है।

एसओएलआर और ज़ूकीपर एसएसएल कॉन्फ़िगरेशन के लिए सामान्य प्रश्न और समस्या निवारण

SOLR कीस्टोर का उद्देश्य क्या है?
एसओएलआर में कीस्टोर में एसएसएल प्रमाणपत्र और सर्वर और क्लाइंट के बीच एन्क्रिप्टेड संचार के लिए उपयोग की जाने वाली निजी कुंजी शामिल हैं। इसका प्रयोग करके बनाया जा सकता है keytool.
एसएसएल कॉन्फ़िगरेशन में परिवर्तन के बाद मैं ज़ूकीपर को कैसे पुनः आरंभ करूं?
एसएसएल परिवर्तन लागू करने के लिए, कमांड का उपयोग करके ज़ूकीपर को पुनरारंभ करें /bin/bash zkServer.sh restart zoo.cfg क्लस्टर में प्रत्येक नोड के लिए.
ज़ूकीपर में `ssl.client.enable=true` क्या करता है?
`zoo.cfg` में यह सेटिंग ज़ूकीपर क्लाइंट और ज़ूकीपर सर्वर के बीच एसएसएल संचार को सक्षम बनाती है।
एसएसएल सक्षम करने के बाद मेरा एसओएलआर एडमिन यूआई लोड क्यों नहीं हो रहा है?
एक सामान्य कारण एसएसएल प्रमाणपत्र श्रृंखला में बेमेल होना है। सुनिश्चित करें कि सही कीस्टोर और ट्रस्टस्टोर कॉन्फ़िगर किए गए हैं solr.in.sh और जेट्टी की कॉन्फ़िगरेशन फ़ाइलें।
मैं "एसएसएल/टीएलएस रिकॉर्ड नहीं" त्रुटियों का समाधान कैसे करूँ?
यह त्रुटि तब होती है जब गैर-एसएसएल डेटा एसएसएल कनेक्शन पर भेजा जाता है। सत्यापित करें कि SOLR और Zookeeper दोनों समान SSL प्रोटोकॉल का उपयोग करने के लिए ठीक से कॉन्फ़िगर किए गए हैं, जैसे TLSv1.2.

एसओएलआर और ज़ूकीपर को सुरक्षित करने पर अंतिम विचार

ज़ूकीपर के साथ एसओएलआर में एसएसएल समस्याओं को हल करने के लिए, कीस्टोर, ट्रस्टस्टोर और एसएसएल प्रोटोकॉल जैसे एसएसएल मापदंडों को सही ढंग से कॉन्फ़िगर करने पर ध्यान केंद्रित करें। ये चरण सुनिश्चित करते हैं कि सभी नोड्स और क्लाइंट्स के बीच सुरक्षित संचार स्थिर है।

प्रक्रिया के दौरान त्रुटियों और चेतावनियों के लिए लॉग फ़ाइलों की निगरानी करना आवश्यक है। यह सुनिश्चित करके कि सभी एसएसएल-संबंधित कॉन्फ़िगरेशन क्लस्टर नोड्स में सुसंगत हैं और एसएसएल मानकों का पालन करते हैं, "टूटे हुए पाइप" और एसएसएल हैंडशेक विफलताओं जैसे मुद्दों का समाधान करें।

सन्दर्भ एवं स्रोत

एसओएलआर और ज़ूकीपर में एसएसएल को कॉन्फ़िगर करने पर स्पष्टीकरण आधिकारिक सोलर दस्तावेज़ पर आधारित था: अपाचे सोलर गाइड
एसएसएल समस्याओं के लिए समस्या निवारण चरण ज़ूकीपर दस्तावेज़ से प्राप्त किए गए थे: ज़ुकीपर आधिकारिक दस्तावेज़ीकरण
जावा एसएसएल सॉकेट कॉन्फ़िगरेशन पर अतिरिक्त विवरण यहां दिए गए थे: ओरेकल जेएसएसई संदर्भ गाइड

Ubuntu 24.04.1 के SOLR 9.6.1 और Zookeeper 3.8.1 में SSL कॉन्फ़िगरेशन समस्याओं को ठीक करना