द्रुपाल को गति देना: प्रेसफ्लो + नेग्नेक्स + वार्निश

यह लेख पर्याप्त विस्तार से दर्शाता है कि आप गंभीर तनाव सहिष्णुता और बड़े ट्रैफ़िक को संभालने की क्षमता के साथ ड्रुपल साइटों के विकास में कैसे जा सकते हैं।



यह इस तरह के एक सेटअप का मेरा पहला अनुभव है, लेकिन जैसा कि आंकड़ों से देखा जाएगा, यह सफलतापूर्वक अपने मुख्य कार्य - साइट को गति देने के साथ मुकाबला करता है। सेटिंग्स को सुनना और देखना दिलचस्प होगा, हर किसी से अतिरिक्त सामग्री, जिन्होंने समान कार्यों का सामना किया है, क्योंकि RuNet में अभी भी इस विषय पर ड्रुपल सिस्टम के बारे में बहुत कम मुफ्त और उच्च गुणवत्ता वाली जानकारी है।



विकास के लिए काफी समय के लिए, मैंने डिफ़ॉल्ट सर्वर सेटिंग्स के साथ Drupal + Nginx का एक गुच्छा उपयोग किया:



server {

listen 62.xxx.xx.xx:80;

server_name mysite.com www.mysite.com;

rewrite>^(/manager/.*)$>https://$host$1>permanent;

location ~* ^/(webstat/|awstats|webmail/|myadmin/|manimg/) {

proxy_pass 62.xxx.xx.xx:8080;

proxy_redirect mysite.com:8080/ /;

proxy_set_header Host $host;

proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;

proxy_set_header X-Real-IP $remote_addr;

}

location / {

proxy_pass mysite.com:8080;

proxy_redirect mysite.com:8080/ /;

proxy_set_header Host $host;

proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;

proxy_set_header X-Real-IP $remote_addr;

}

location ~* ^.+\.(jpg|jpeg|gif|png|svg|js|css|mp3|ogg|mpe?g|avi|zip|gz|bz2?|rar)$ {

root /home/pathto/drupal613;

access_log /home/httpd-logs/mysite.com.access.log;

error_page 404 = @fallback;

}

location @fallback {

proxy_pass 62.xxx.xx.xx:8080;

proxy_set_header Host $host;

proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;

proxy_set_header X-Real-IP $remote_addr;

}

}











इन सेटिंग्स का सार सरल है - अपाचे को अनलोड करें और उस पर केवल php प्रक्रियाओं को छोड़ दें, और सभी स्टैटिक्स (चित्र, फाइलें) को Nginx में फेंक दें। मेरी अपाचे को पोर्ट 8080 के लिए कॉन्फ़िगर किया गया है, और 80 के लिए नेग्नेक्स। सामने के छोर पर नेग्नेक्स विश्लेषण करता है कि यह क्या अनुरोध करता है और स्थैतिक डेटा को खुद ही फेंक देता है या अपाचे को सब कुछ फेंक देता है। यह दृष्टिकोण सर्वर को ऑफलोड करता है और प्रदर्शन में थोड़ा सुधार करता है।



Drupal पर साइट का विश्लेषण करने के लिए, मैंने उत्कृष्ट सेवा LoadImpact.com का उपयोग किया, जिसने मुझे यह रिपोर्ट दी:







साइट पर अधिक ट्रैफ़िक को समझने के लिए विश्लेषण करने में अधिक समय नहीं लगता है, जितना अधिक आपको सर्वर से प्रतिक्रिया के लिए इंतजार करना होगा। यह बुरा है। मुझे निम्नलिखित बंडल में समाधान मिला:

प्रेसफ्लो + नेग्नेक्स + वार्निश

प्रेसफ्लो एक ड्रुपल डिस्ट्रीब्यूशन है जिसमें प्रदर्शन, विस्तार, दक्षता और परीक्षण के लिए एकीकृत संवर्द्धन है।

प्रेसफ्लो का प्रत्येक संस्करण Drupal के उसी संस्करण के बराबर एपीआई है। उदाहरण के लिए, Pressflow 6 सभी Drupal 6 मॉड्यूल के साथ संगत है। प्रेसफ्लो 6 में ड्रुपल 7 से एक इंटीग्रेटेड सिंपलेस्ट सिस्टम और सीडीएन सपोर्ट के लिए एक पैच भी है।

यहां प्रेसफ्लो के लिए डाउनलोड लिंक दिए गए हैं:

fourkitchens.com/pressflow-makes-drupal-scale/downloads

launchpad.net/pressflow/+download

वार्निश आपकी साइट को गति देने के लिए महत्वपूर्ण सॉफ्टवेयर है।

वार्निश एक ओपन सोर्स सॉफ्टवेयर है जो मानकीकृत है और इसके लिए कम संसाधनों की आवश्यकता होती है।

वार्निश डाउनलोड लिंक:

www.varnish-cache.org/releases



इस बंडल का विचार अधिक जटिल नहीं है: हम नॅग्नेक्स के माध्यम से सर्वर अनुरोध के माध्यम से स्टैटिक्स को फेंक देते हैं, अन्यथा हम वार्निश + प्रेसफ्लो के लिए कैश किए गए डेटा के लिए जाते हैं, और अगर हमें पीएचपी से कुछ चाहिए तो अपाचे के लिए।

चरण 1: प्रेसफ्लो स्थापित करें

प्रेसफ़्लो स्थापित करना वास्तव में Drupal को स्थापित करने से अलग नहीं है :)

fourkitchens.com/pressflow-makes-drupal-scale/installation

चरण 2: प्रेसफ्लो कॉन्फ़िगर करें

Mysite.com/admin/settings/performance पर जाएं और कैशिंग सक्षम करें। बस इतना ही।

चरण 3: वार्निश स्थापित करें

यदि आप SSH और Linux की अवधारणाओं से दूर हैं, तो वार्निश स्थापित करने के लिए अपने मेजबानों से अनुरोध बनाने का प्रयास करें। मैंने इस मैनुअल का उपयोग FreeBSD www.varnish-cache.org/installation/freebsd के तहत किया। सब कुछ काफी सरल है।

चरण 4: वार्निश कॉन्फ़िगर करें

यह संपूर्ण सिस्टम को कॉन्फ़िगर करने के लिए सबसे कठिन बिंदुओं में से एक है:



1. कॉन्फ़िगरेशन फ़ाइल /etc/rc.conf में वार्निश डेमोन और वार्निश लॉग के लॉन्च को जोड़ें:

varnishd_enable = "YES"

varnishlog_enable = "YES"

2. अपने लिए डिफाइन वार्निश की डिफ़ॉल्ट सेटिंग्स बदलें:

${varnishd_enable:="NO"}

${varnishd_pidfile:="/var/run/${name}.pid"}

${varnishd_listen:=":8081"}

${varnishd_admin:="localhost:8090"}

${varnishd_backend:="localhost:8080"}

${varnishd_config:="/usr/local/etc/varnish/default.vcl"}

${varnishd_storage:="file,/usr/local/varnish.cache,1G"}

${varnishd_hash:="classic,16383"}

${varnishd_user:="www"}

${varnishd_group:="www"}





जैसा कि पहले उल्लेख किया गया है, मेरे सर्वर पर, नग्नेक्स पोर्ट 80, और अपाचे 8080 पर सुनता है। हम वार्निश को पोर्ट 8081 पर सेट करते हैं, और फिर हम इसे अपाचे, अर्थात पोर्ट 8080 पर स्थानांतरित करेंगे।



यहां:

-varnishd_config - डिफ़ॉल्ट वार्निश व्यवहार सेटिंग फ़ाइल का पथ

-varnishd_storage - आकार और पथ कैश फ़ाइल के लिए



3. प्रेसफ्लो के साथ काम करने के लिए वार्निश सेट करें:

backend default {

.host = "127.0.0.1";

.port = "8080";

.connect_timeout = 600s;

.first_byte_timeout = 600s;

.between_bytes_timeout = 600s;

}



sub vcl_recv {

if (req.request != "GET" &&

req.request != "HEAD" &&

req.request != "PUT" &&

req.request != "POST" &&

req.request != "TRACE" &&

req.request != "OPTIONS" &&

req.request != "DELETE") {

/* Non-RFC2616 or CONNECT which is weird. */

return (pipe);

}



if (req.request != "GET" && req.request != "HEAD") {

/* We only deal with GET and HEAD by default */

return (pass);

}



// Remove has_js and Google Analytics cookies.

set req.http.Cookie = regsuball(req.http.Cookie, "(^|;\s*)(__[az]+)=[^;]*", "");



// To users: if you have additional cookies being set by your system (eg

// from a javascript analytics file or similar) you will need to add VCL

// at this point to strip these cookies from the req object, otherwise

// Varnish will not cache the response. This is safe for cookies that your

// backed (Drupal) doesn't process.

//

// Again, the common example is an analytics or other Javascript add-on.

// You should do this here, before the other cookie stuff, or by adding

// to the regular-expression above.



// Remove a ";" prefix, if present.

set req.http.Cookie = regsub(req.http.Cookie, "^;\s*", "");

// Remove empty cookies.

if (req.http.Cookie ~ "^\s*$") {

unset req.http.Cookie;

}



if (req.http.Authorization || req.http.Cookie) {

/* Not cacheable by default */

return (pass);

}



// Skip the Varnish cache for install, update, and cron

if (req.url ~ "install\.php|update\.php|cron\.php") {

return (pass);

}



// Normalize the Accept-Encoding header

// as per: varnish-cache.org/wiki/FAQ/Compression

if (req.http.Accept-Encoding) {

if (req.url ~ "\.(jpg|png|gif|gz|tgz|bz2|tbz|mp3|ogg)$") {

# No point in compressing these

remove req.http.Accept-Encoding;

}

elsif (req.http.Accept-Encoding ~ "gzip") {

set req.http.Accept-Encoding = "gzip";

}

else {

# Unknown or deflate algorithm

remove req.http.Accept-Encoding;

}

}



// Let's have a little grace

set req.grace = 30s;



return (lookup);

}



sub vcl_hash {

if (req.http.Cookie) {

set req.hash += req.http.Cookie;

}

}



// Strip any cookies before an image/js/css is inserted into cache.

sub vcl_fetch {

if (req.url ~ "\.(png|gif|jpg|swf|css|js)$") {

// This is for Varnish 2.0; replace obj with beresp if you're running

// Varnish 2.1 or later.

unset beresp.http.set-cookie;

}

}



sub vcl_error {

// Let's deliver a friendlier error page.

// You can customize this as you wish.

set obj.http.Content-Type = "text/html; charset=utf-8";

synthetic {"

<?xml version="1.0" encoding="utf-8"?>

<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Strict//EN"

"http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd">

"} obj.status " " obj.response {"

< type="text/css">

#page {width: 400px; padding: 10px; margin: 20px auto; border: 1px solid black; background-color: #FFF;}

p {margin-left:20px;}

body {background-color: #DDD; margin: auto;}

</>



<1>Page Could Not Be Loaded</1>

We're very sorry, but the page could not be loaded properly. This should be fixed very soon, and we apologize for any inconvenience.

< /> <4>Debug Info:</4>

<>

Status: "} obj.status {"

Response: "} obj.response {"

XID: "} req.xid {"

</>

<>< href="http://www.varnish-cache.org/">Varnish</></>







"};

return (deliver);

}





3. वार्निश के साथ काम करने के लिए Ngnix कॉन्फ़िगर करें:

server {

listen 62.xxx.xx.xx:80;

server_name mysite.com www.mysite.com;

rewrite ^(/manager/.*)$>https://$host$1>permanent;

rewrite>^(/manager/.*)$>https://$host$1>permanent;

location ~* ^/(webstat/|awstats|webmail/|myadmin/|manimg/) {

proxy_pass 62.xxx.xx.xx:8080;

proxy_redirect mysite.com:8080/ /;

proxy_set_header Host $host;

proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;

proxy_set_header X-Real-IP $remote_addr;

}

location / {

proxy_pass 62.xxx.xx.xx:8081;

proxy_redirect mysite.com:8081/ /;

proxy_set_header Host $host;

proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;

proxy_set_header X-Real-IP $remote_addr;

}

location ~* ^.+\.(jpg|jpeg|gif|png|svg|js|css|mp3|ogg|mpe?g|avi|zip|gz|bz2?|rar)$ {

root /home/cross/data/www/mysite.com;

access_log /home/httpd-logs/mysite.com.access.log;

error_page 404 = @fallback;

}

location @fallback {

proxy_pass 62.xxx.xx.xx:8080;

proxy_set_header Host $host;

proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;

proxy_set_header X-Real-IP $remote_addr;

}

}





चरण 5: सर्वर को रिबूट करना



अब आपको यह सुनिश्चित करने की आवश्यकता है कि वार्निश चल रहा है - टर्मिनल पर 'शीर्ष' कमांड चलाने की कोशिश करें और जांचें कि वार्निश प्रक्रिया चल रही है।

सुनिश्चित करें कि वार्निश + प्रेसफ्लो काम करता है - SSH के तहत वार्निशलॉग कमांड चलाएं और अपनी साइट mysite.com खोलने की कोशिश करें, वार्निशलॉग तब HTTP हेडर दिखाएगा, इसका मतलब यह होगा कि सब कुछ ठीक काम करता है।



इन सभी सेटिंग्स के बाद, मैंने एक बार फिर से एक लोडिम्पैक्ट टेस्ट चलाया और मिला:







अब स्थिति काफी बेहतर है, सर्वर से देरी स्थिर है और ट्रैफिक बढ़ने पर सर्वर क्रैश नहीं होता है।



ये सरल सेटिंग्स Drupal को गति देने के लिए अपने सर्वर पर Pressflow + Nginx + वार्निश लॉन्च करेंगे।



यह भी पता चला कि नगीनक्स में ड्रुपल के लिए विशेष सेटिंग्स हैं - wiki.nginx.org/Drupal ।



अतिरिक्त लिंक:

• www.varnish-cache.org/docs/2.1 - वार्निश प्रलेखन
• wiki.fourkitchens.com/display/PF/Documentation - Pressflow प्रलेखन