विशेष रूप से आंकड़ों के मुद्दे पर, और विशेष रूप से नेटफ्लो में, काफी कुछ व्यापक लेख हैं (जिनमें से अध्ययन के लिए एक अच्छी मात्रा में समय की आवश्यकता होती है)। यहां मैं अपने एसेंट को मासिक आंकड़ों को इकट्ठा करने और भेजने के लिए एक कठिन तकनीकी कार्य के लिए स्क्रिप्ट के रूप में दे दूंगा।

पृष्ठभूमि

कई किरायेदारों को एनएटी के माध्यम से इंटरनेट मिलता है (एनएटी खुद को नीति-मार्ग के माध्यम से दो प्रदाताओं से बंधा हुआ है)। प्रत्येक किरायेदार का अपना विलेन है। विलन को एक प्रबंधित स्विच के माध्यम से किरायेदार के नेटवर्क में "तैनात" किया जाता है। प्रत्येक किरायेदार को पड़ोसी क्षेत्रों में जाने पर प्रतिबंध के साथ स्थानीय नेटवर्क का अपना खंड दिया जाता है।



उद्देश्य : महीने के अंत में प्रत्येक किरायेदार और भवन प्रबंधक को बताएं कि उसने कितना इंटरनेट खाया और उन उपयोगकर्ताओं पर प्रहार किया, जिन्होंने बहुत अधिक ट्रैफ़िक का पुन: उपयोग किया है। यानी हमें जरूरत है: खंड के लिए सारांश आँकड़े, खाते में लिए गए नेटवर्क में प्रत्येक पते (गंतव्य) द्वारा इंटरनेट की खपत।



उपकरण: tsiska पर नेटफ्लो, लिनक्स पर प्रवाह-उपकरण, MTA, क्रोन।

सिद्धांत

राउटर समान पैकेट के बारे में जानकारी को प्रवाह में जोड़ता है। समान src / dst IP / port संयोजन वाले पैकेट को समान माना जाता है। यानी फ़ाइल वॉश से डाउनलोड की गई फ़ाइल के आईपी पैकेट को एक स्ट्रीम में मर्ज कर दिया जाएगा। प्रत्येक स्ट्रीम के बारे में जानकारी इसमें शामिल है कि किससे (4 फ़ील्ड, पता और पोर्ट), पैकेट की संख्या, इंटरफ़ेस जिसके माध्यम से पैकेट भेजा गया था, प्रेषित डेटा का आकार और समय (टाइमस्टैम्प)। यह डेटा कलेक्टर को udp पैकेट में समय-समय पर भेजा जाता है - यह डेटा प्राप्त करने के लिए तैयार सर्वर। यह स्पष्ट है कि कलेक्टर कई प्रेषकों से डेटा एकत्र कर सकता है, इसलिए डेटा की बचत करते समय, प्रेषक आमतौर पर वहां भी लिखा जाता है। आपको यह समझने की आवश्यकता है कि आंकड़े सभी बंदरगाहों पर एकत्र किए जाते हैं जहां उन्हें इकट्ठा करने के लिए कहा जाता है। यदि आप कहते हैं कि "सभी बंदरगाहों पर सब कुछ इकट्ठा करें", तो यातायात दो बार गिना जाएगा - रिसेप्शन के समय (आने वाले के रूप में) और क्लाइंट इंटरफ़ेस को भेजने के समय (आउटगोइंग के रूप में)। सौभाग्य से, नेट प्राप्त करने और भेजने के बीच होता है, इसलिए NAT के साथ हम केवल एक (आंतरिक) इंटरफ़ेस के लिए प्रवाह में आंतरिक पते देखेंगे।

राउटर कॉन्फ़िगरेशन

मैं इसे पूरी तरह से उद्धृत नहीं करूंगा, मैं केवल netflow से संबंधित भाग (यानी, ACLs, NAT, DHCP को उन लोगों के लिए कहूंगा, जो इसके लिए पूछते हैं, आदि को छोड़ दिया जाता है), इसके अलावा, केवल एक किरायेदार इंटरफ़ेस दिखाया गया है (बाकी सख्ती से अनुरूप हैं) :

 इंटरफ़ेस Vlan31
  विवरण किराए: OOO AVTOTRADE कमरा 315,316,317,318
  आईपी ​​एड्रेस 192.168.31.1 255.255.255.0
  आईपी ​​प्रवाह अंतर्ग्रहण
  आईपी ​​फ्लो इग्रेशन
  आईपी ​​अंदर

 आईपी ​​प्रवाह-निर्यात स्रोत Vlan255
 आईपी ​​प्रवाह-निर्यात संस्करण 5
 आईपी ​​फ्लो-एक्सपोर्ट डेस्टिनेशन 192.168.255.254 3000

जैसा कि आप जानते हैं, vlan31 (192.168.31 / 24) किरायेदार हैं, इसी तरह बाकी किरायेदार भी हैं। Vlan255 - Vlan जिसके माध्यम से डेटा (सेवा) भेजना है। शेष मान स्पष्ट हैं। (netflow के संस्करण पर ध्यान दें, प्रवाह-उपकरण 9 वें संस्करण का समर्थन नहीं करते हैं)।

प्रवाह-उपकरण विन्यास

रिसीवर

इसे स्थापित करने की आवश्यकता है (डेबियन के लिए: aptitude install flow-tools



)। /Etc/flow-tools/capture.conf में सेटिंग्स:

 -w / srv / netflow / 0/0/3000

नोट: netflow अंतरिक्ष का एक बहुत खाता है। दर्जनों गीगाबाइट डेटा के लिए तैयार हो जाएं, जिन्हें आपको स्टोर करने की भी आवश्यकता है। इस डेटा को एक अलग सेक्शन पर रखना बेहतर है।

सांख्यिकी प्रसंस्करण

दरअसल, यह बिल्कुल लेख का विषय है। हमें पहले फ़िल्टर को कॉन्फ़िगर करने की आवश्यकता है जिसके द्वारा हम जानकारी का चयन करेंगे, और दूसरी बात, एक स्क्रिप्ट जो इस जानकारी को किसी को भी भेज देगी। फिलहाल, बहुत सारे किरायेदार नहीं हैं, इसलिए प्रत्येक के लिए सब कुछ अलग-अलग कॉन्फ़िगर किया गया है।

फिल्टर

फ्लो-नेफिल्टर प्रोग्राम के लिए फिल्टर की आवश्यकता होती है, जो इनपुट को बाइनरी फ्लो लेता है, इसे फ़िल्टर करता है और फिर से बाइनरी फ्लो देता है।



/Etc/flow-tools/cfg/filter.cfg में फ़िल्टर करें। इनमें आदिम (मोटे तौर पर बोलने वाले, फिल्टर तत्वों के नाम) और फिल्टर होते हैं। फ्लो-नेफिल्टर को कॉल करते समय, इसे फ़िल्टर का नाम दिखाया जाता है जिसके द्वारा फ़िल्टर किया जाता है।



यहाँ दो किरायेदारों के लिए एक उदाहरण है:

 फिल्टर-आदिम किराया31-रेंज
   IP- पता-उपसर्ग टाइप करें
   परमिट 192.168.31.0/24
   डिफ़ॉल्ट इनकार

 फ़िल्टर-आदिम किराया 3233-रेंज
   IP- पता-उपसर्ग टाइप करें
   परमिट 192.168.32.0/24
   परमिट 192.168.33.0/24
   डिफ़ॉल्ट इनकार


 फ़िल्टर-परिभाषा rent31-out
   मैच dst-ip-addr Rent31- श्रेणी

 फ़िल्टर-परिभाषा rent3233-out
   मैच dst-ip-addr ren32t33- श्रेणी

लिपि

असल में, मुख्य बात:

 #! / बिन / श
 #args: 
 # $ 1 - किराया (01,02, ...), 
 # $ 2 ... $ N - ईमेल भेजने के लिए मानता है
 वर्ष = `तिथि - तिथि = '- 1 महीना' +% वाई`
 महीना = `तारीख - तारीख = '- 1 महीना' +% m`
 net = $ १
 कुल = `प्रवाह-कैट / एसआरवी / नेटफ्लो / $ वर्ष / $ वर्ष- $ महीना | प्रवाह-एनफिल्टर-एफ किराया $ नेट-आउट | प्रवाह-आईडी 15 | grep -v" # "| awk 'प्रिंट $ 3 } ''
 पाली
 (इको "टोटल इनकमिंग: $ टोटल एमबी"; फ्लो-कैट / एसआरवी / नेटफ्लो / $ वर्ष / $- $ माह | फ्लो-नेफिल्टर -F किराया $ नेट-आउट | फ्लो-स्टेट -f 8) | मेल-मेल "नेट 192.168 के लिए रिपोर्ट। $ नेट के लिए $ 24 / 24- $ महीने" $ *

मुख्य बिंदु: स्क्रिप्ट पिछले महीने के आंकड़े भेजती है। (संबंधित तिथि विकल्प के लिए धन्यवाद)। प्रवाह को दो बार संसाधित किया जाता है (जबकि गति मुझे सूट करती है, अगर यह धीमा होना शुरू हो जाता है, तो फ़ाइल को फ़िल्टर करना और दो रिपोर्ट अलग-अलग चलाना आवश्यक होगा)। पहला प्रसंस्करण हमें मेगाबाइट में एक मानव-पठनीय संख्या देता है, दूसरा - एक प्लेट जिसके बारे में कितना खाता है।



यदि आवश्यक हो (संघर्ष / विवाद) प्रत्येक श्रृंखला के लिए पूर्ण आंकड़े देने के लिए हाथों (प्रवाह-प्रिंट और grep का उपयोग करके) संभव होगा।

क्रॉन

मैं डेबियन में क्रोन सुविधाओं का उपयोग करता हूं, यह यूनिक्स में सामान्य से थोड़ा अधिक सुविधाजनक है - इसमें /etc/cron.monthly निर्देशिका है। फ़ाइल /etc/cron.monthly/rent-acc में है:

 / usr / स्थानीय / बिन / किराया-एसीसी 31 admin@domain.ru rentuser@example.com manager@company.ru
 / usr / स्थानीय / बिन / किराया-आरोप 3233 admin@domain.ru rentuser2@foobar.baz manager@company.ru

यह फ़ाइल, उसी समय, किरायेदारों के लिए भी एक कॉन्फ़िगरेशन फ़ाइल है (हालांकि, नए के लिए फ़िल्टर हाथ से पंजीकृत होना चाहिए!)। इस फ़ाइल पर chmod + x के बारे में मत भूलना।

परिणाम

यह कुछ इस तरह दिखता है:

 कुल आवक: 67673.187 एमबी

 --- ---- ---- ---- सूचना सूचना --- --- ---
 #
 # फ़ील्ड: कुल
 # प्रतीक: अक्षम
 # छँटाई: कोई नहीं
 # नाम: गंतव्य आईपी
 #
 # आर्ग्स: प्रवाह-स्टेट -f 8 
 #
 #
 # IPaddr में ऑक्टेट के पैकेट बहते हैं
 #
 192.168.2.16 1321968 4301821906 24858456
 192.168.2.2 2118220 62029649663 51512160
 192.168.2.3 226383 193301694 1129250
 192.168.2.8 105319 350858966 3027875
 192.168.2.5 3240 60888068 681056
 192.168.2.4 31289 13434866 217217
 192.168.2.15 200 32104404 97818
 192.168.2.14 1356 137727274 1977666
 192.168.2.7 35310 553217946 10290038

Disclamer

कृपया ध्यान दें कि संचार सेवाओं के प्रावधान के लिए लाइसेंस की आवश्यकता होती है। सेवाओं के लिए प्रदाता से एकमात्र बचाव का फिर से चालान है। यह इसके लिए है कि आंकड़ों को पढ़ा जाना चाहिए। हालाँकि, उपरोक्त सभी प्रमाणित बिलिंग नहीं है, अर्थात भुगतानकर्ता की ओर से एक निश्चित मित्रता की आवश्यकता होती है।