उबंटू 24.04.1 च्या SOLR 9.6.1 आणि Zookeeper 3.8.1 मधील SSL कॉन्फिगरेशन समस्यांचे निराकरण करणे

झूकीपर इंटिग्रेशनसह SOLR साठी SSL सक्षम करण्यात आव्हाने

SOLR-Zookeeper सेटअपमध्ये SSL सक्षम करणे अवघड असू शकते, विशेषत: Ubuntu 24.04.1 सर्व्हरसह काम करताना. ही कॉन्फिगरेशन प्रक्रिया नोड्स दरम्यान सुरक्षित संप्रेषण सुनिश्चित करते, परंतु अगदी किरकोळ चुकीचे कॉन्फिगरेशन देखील SOLR Admin UI सारख्या सेवांना योग्यरित्या कार्य करण्यापासून रोखू शकते. जर तुम्ही अलीकडे SSL सक्षम करण्याचा प्रयत्न केला असेल आणि समस्या आल्या, तर तुम्ही एकटे नाही आहात.

या लेखात, आम्ही स्थानिक उबंटू सर्व्हरवर Zookeeper 3.8.1 सह समाकलित केल्यावर SOLR 9.6.1 मध्ये SSL सक्रियकरणादरम्यान भेडसावलेल्या सामान्य समस्येवर चर्चा करू. प्रश्नातील सेटअपमध्ये SOLR आणि Zookeeper एकाच सर्व्हरवर एकाच शार्डसह चालवणे, अनेक प्रतिकृती आणि मूलभूत प्रमाणीकरण यांचा समावेश आहे. SSL सेटिंग्ज अद्यतनित केल्यानंतर उद्भवणाऱ्या त्रुटींचे निराकरण करण्यावर लक्ष केंद्रित केले जाईल.

SSL चुकीच्या कॉन्फिगरेशनमुळे लॉग फाइल्समध्ये "प्रशासक UI लाँच होत नाही" किंवा "तुटलेले पाईप" संदेश यांसारख्या त्रुटी उद्भवतात, ज्या समस्यानिवारण करणे आव्हानात्मक असू शकते. या त्रुटी विशेषत: प्रमाणपत्र समस्या किंवा SOLR किंवा Zookeeper नोड्समधील SSL कनेक्शन अयशस्वी झाल्यामुळे उद्भवतात, ज्यामुळे सेवांमधील संवाद तुटतो.

पुढील विभागांमध्ये, आम्ही लॉग फाइल्समध्ये खोलवर जाऊ, या SSL-संबंधित त्रुटींच्या संभाव्य कारणांचे विश्लेषण करू आणि तुमच्या SOLR आणि Zookeeper सेटअपसाठी एक सुरळीत SSL कॉन्फिगरेशन सुनिश्चित करण्यासाठी चरण-दर-चरण उपाय देऊ.

SOLR आणि Zookeeper साठी SSL कॉन्फिगरेशन आणि स्क्रिप्टिंगचे विश्लेषण करणे

SSL कॉन्फिगरेशन योग्यरित्या लागू केल्याची खात्री करताना पहिली स्क्रिप्ट SOLR आणि Zookeeper रीस्टार्ट करण्याची प्रक्रिया स्वयंचलित करते. हे Zookeeper उदाहरणे लूप करण्यासाठी आणि अद्यतनित SSL सेटिंग्जसह रीस्टार्ट करण्यासाठी बॅश स्क्रिप्टिंग वापरते. या स्क्रिप्टचे महत्त्व एकाधिक झूकीपर नोड्स व्यवस्थापित करण्यामध्ये आहे, कारण SSL कॉन्फिगरेशन संपूर्ण क्लस्टरवर एकसमानपणे लागू करणे आवश्यक आहे. `zkServer.sh रीस्टार्ट` चा वापर सुनिश्चित करतो की प्रत्येक Zookeeper नोड त्याच्या संबंधित कॉन्फिगरेशन फाइलसह योग्यरित्या रीस्टार्ट झाला आहे, ज्यामुळे स्क्रिप्ट मल्टी-नोड सेटअपमध्ये क्लस्टर व्यवस्थापनासाठी कार्यक्षम बनते.

स्क्रिप्ट `सोलर रीस्टार्ट` वापरून SOLR उदाहरणाच्या रीस्टार्टला देखील संबोधित करते. HTTPS विनंत्या हाताळण्यासाठी SOLR जेट्टीवर अवलंबून असते आणि स्क्रिप्ट खात्री करते की SSL-संबंधित सेटिंग्ज जसे की कीस्टोर आणि ट्रस्टस्टोअर पथ योग्यरित्या रीलोड केले आहेत. हे SOLR Admin UI मध्ये प्रवेश करताना संभाव्य SSL हँडशेक अपयशांना प्रतिबंधित करते, जे कालबाह्य किंवा चुकीच्या कॉन्फिगर केलेल्या SSL प्रमाणपत्रांमुळे उद्भवू शकते. ही कार्ये स्वयंचलित करून, स्क्रिप्ट मॅन्युअल त्रुटी कमी करते, विशेषत: एकाच सर्व्हरवरील एकाधिक सेवांवर SSL प्रमाणपत्रे व्यवस्थापित करताना.

दुसरी स्क्रिप्ट SOLR आणि Zookeeper दोन्हीमध्ये SSL साठी Java KeyStores तयार आणि व्यवस्थापित करण्यासाठी वापरली जाते. Java ची Keytool युटिलिटी की जोड्या व्युत्पन्न करण्यासाठी आणि कीस्टोअरमध्ये प्रमाणपत्रे आयात करण्यासाठी वापरली जाते. कमांड `keytool -genkeypair` आवश्यक SSL प्रमाणपत्रे व्युत्पन्न करते, तर `keytool -import` विश्वसनीय रूट आणि इंटरमीडिएट प्रमाणपत्रे जोडण्यासाठी वापरली जाते. ही प्रमाणपत्रे खात्री करतात की नोड्समधील SSL संवाद विश्वसनीय आणि सुरक्षित आहे. ही स्क्रिप्ट SSL प्रमाणपत्रे योग्यरित्या सेट करण्यासाठी आणि व्यवस्थापित करण्यासाठी महत्त्वपूर्ण आहे, जी सेवांमधील सुरक्षित संवाद सक्षम करण्यात मध्यवर्ती भूमिका बजावते.

शेवटी, Python स्क्रिप्ट प्रदान केलेले लॉग मॉनिटरिंग साधन म्हणून कार्य करते जे विशेषतः SSL हँडशेक त्रुटी शोधण्यासाठी डिझाइन केलेले आहे. रिअल टाइममध्ये SSL लॉग सतत वाचून, ही स्क्रिप्ट SSL-संबंधित समस्या ओळखू शकते जसे की `SSL हँडशेक अयशस्वी`. लॉगिंगचा हा स्तर जटिल वातावरणात समस्यांचे निदान करण्यासाठी आवश्यक आहे जेथे झुकीपर आणि SOLR सारख्या सेवा एनक्रिप्टेड चॅनेलवर संवाद साधतात. रिअल-टाइम मॉनिटरिंग SSL अयशस्वी होण्याचे मूळ कारण त्वरीत ओळखण्यात मदत करते, जे प्रमाणपत्र विसंगत, चुकीचे कॉन्फिगरेशन किंवा कालबाह्य प्रमाणपत्रांमुळे उद्भवू शकते. हे समस्यानिवारण साधन बहुविध नोड्स आणि SSL जटिलता असलेल्या वातावरणात विशेषतः मौल्यवान आहे.

#!/bin/bash
# Script to automate SOLR and Zookeeper restart with SSL configuration
# Paths to configuration files
ZOOKEEPER_DIR="/opt/zookeeper"
SOLR_DIR="/opt/solr"
SSL_KEYSTORE="/opt/solr-9.6.1/server/etc/solr-ssl.jks"
ZOOKEEPER_CONFIG="$ZOOKEEPER_DIR/conf/zoo.cfg"
SOLR_CONFIG="$SOLR_DIR/server/etc/jetty-ssl.xml"

# Restart Zookeeper with SSL configuration
echo "Restarting Zookeeper..."
for i in {1..3}; do
    /bin/bash $ZOOKEEPER_DIR/bin/zkServer.sh restart $ZOOKEEPER_DIR/data/z$i/zoo.cfg
done

# Restart SOLR with SSL configuration
echo "Restarting SOLR..."
/bin/bash $SOLR_DIR/bin/solr restart -c -p 8983 -z localhost:2181,localhost:2182,localhost:2183 -m 5g -force

१

import subprocess
import time

def monitor_ssl_logs(log_file):
    with open(log_file, 'r') as f:
        f.seek(0, 2)  # Move to the end of file
        while True:
            line = f.readline()
            if not line:
                time.sleep(0.1)
                continue
            if "SSL handshake failed" in line:
                print(f"Error: {line.strip()}")

# Start monitoring Zookeeper SSL logs
monitor_ssl_logs("/opt/zookeeper/logs/zookeeper.log")

SSL हँडशेक आणि SOLR आणि Zookeeper मधील कॉन्फिगरेशन गुंतागुंत

SOLR आणि Zookeeper मध्ये SSL सक्षम करताना संबोधित करण्यासाठी एक महत्त्वाचा पैलू म्हणजे कसे SSL हँडशेक प्रक्रिया कार्य करते. हँडशेकमध्ये क्लायंट आणि सर्व्हरमधील प्रमाणपत्रांची देवाणघेवाण समाविष्ट असते, एनक्रिप्टेड डेटा ट्रान्समिशन सुरू होण्यापूर्वी विश्वासाची पडताळणी करणे. SOLR आणि Zookeeper या दोन्ही कॉन्फिगरेशनमध्ये प्रमाणपत्रे योग्यरित्या सेट न केल्यास अनेकदा समस्या उद्भवतात. उदाहरणार्थ, जुळत नसलेले प्रमाणपत्र साखळी किंवा कीस्टोअर पासवर्ड सिस्टमला SSL कनेक्शन यशस्वीपणे सुरू करण्यापासून रोखू शकतात. SSL कम्युनिकेशन व्यवस्थापित करण्यासाठी SOLR जेट्टीवर अवलंबून आहे, जेट्टी कॉन्फिगरेशन तुमच्या कीस्टोअर सेटिंग्जसह समक्रमित असल्याची खात्री करणे महत्त्वाचे बनवते.

आणखी एक सामान्य आव्हान म्हणजे एकाधिक नोड्सवर SSL सेट करणे, विशेषत: झूकीपर कोरममध्ये. एकाधिक झुकीपर नोड्ससह, सुरक्षित क्लायंट-टू-सर्व्हर आणि सर्व्हर-टू-सर्व्हर संप्रेषण सक्षम करण्यासाठी सर्व सर्व्हरवर SSL कॉन्फिगरेशन सुसंगत असणे आवश्यक आहे. प्रत्येक नोडमध्ये समान कीस्टोर आणि ट्रस्टस्टोअर सेटअप, तसेच एकसारखे SSL प्रोटोकॉल असणे आवश्यक आहे जसे की TLSv1.2. हे कॉन्फिगरेशन `zoo.cfg` फाइलमध्ये आढळतात. नोड्समधील कोणत्याही विसंगतीमुळे "तुटलेली पाईप" किंवा "सॉकेट बंद आहे" त्रुटींसारख्या समस्या उद्भवू शकतात, जसे की समस्या परिस्थितीत दिसून येते.

झूकीपर SSL सक्षम असलेले कोरम संप्रेषण कसे हाताळतो याचा विचार करणे देखील आवश्यक आहे. `ssl.quorum.enabledProtocols` सेट करून, तुम्ही TLS सारख्या विश्वासार्ह प्रोटोकॉलवर झूकीपर नोड्समधील सुरक्षित संप्रेषण सुनिश्चित करता. याव्यतिरिक्त, यजमाननावांऐवजी आयपीद्वारे झूकीपर नोड्सचा संदर्भ दिला जातो अशा प्रकरणांमध्ये `ssl.quorum.hostnameVerification=false` ठेवणे आवश्यक असू शकते, कारण होस्टनाव जुळत नसल्यामुळे SSL हँडशेकमध्ये व्यत्यय येऊ शकतो. या सेटिंग्ज फाईन-ट्यूनिंगमुळे तुमच्या वितरित सेटअपमध्ये सुरक्षित संप्रेषण लक्षणीयरीत्या सुधारू शकते.