एक अच्छा शब्द:
सीआरओएन = प्रोग्रामिंग तकनीक जो निर्दिष्ट अंतराल पर कार्यों को स्वचालित रूप से शेड्यूल करती है

वेब क्या?

परियोजनाओं आदि पर शोध करते समय, हम आम तौर पर विभिन्न साइटों से जानकारी लिखते हैं - चाहे वह डायरी/एक्सेल/डॉक्टर आदि में हो।
हम वेब को स्क्रैप कर रहे हैं और मैन्युअल रूप से डेटा निकाल रहे हैं।

वेब स्क्रैपिंग इसे स्वचालित कर रही है।

उदाहरण

जब गूगल पर स्नीकर्स ऑनलाइन कहा जाता है, तो यह उत्पादों और कीमतों के साथ वेबसाइटों की एक सूची दिखाता है। शॉपिंग टैब पर अधिक विस्तृत रिकॉर्ड है ना?
Google ने आपके लिए विभिन्न साइटों से स्नीकर्स दिखाने के लिए बस वेबसाइटें निकाली हैं।
इस techinque का उपयोग लगभग सभी बड़ी कंपनियां अपने व्यवसायों के लिए करती हैं क्योंकि डेटा तेजी से बढ़ रहा है।

वेब क्रॉलर

यह एक ऐसी तकनीक है जो हालांकि जानकारी प्राप्त करती है लेकिन स्क्रैपिंग से इस अर्थ में भिन्न है कि यह सर्वोत्तम वेबसाइटों की खोज करती है और उन्हें अनुक्रमित करती है जबकि स्क्रैपिंग एक ही वेबसाइट में की जाती है।

इसका उपयोग एसईओ विश्लेषण (स्क्रैपिंग - डेटा एकत्र करना) के लिए किया जाता है।

प्रसिद्ध वेब स्क्रैपिंग प्रौद्योगिकियां:

• कठपुतली
• खूबसूरत सूप
• ब्राइटडेटा

समस्याएँ!

ध्यान दें कि यह कोई उपयोगकर्ता नहीं है जो साइट से जानकारी प्राप्त करने का अनुरोध कर रहा है, यह कोड लिखा हुआ है! यदि वेबसाइटों को पता है कि यह कार्य स्वचालित है, तो वे तुरंत आईपी पते को ब्लॉक कर देंगी।
और इस चेक ने

1. कैप्चा
2. दर सीमित करना
3. गतिशील सामग्री

लक्ष्य: मनुष्य कैसे काम करते हैं इसका अनुकरण करें!

उज्ज्वल डेटा कार्य को स्वचालित करता है। यहां तक ​​कि यह उपयोगकर्ता को अज्ञात बनाने के लिए आईपी को घुमाता है और उपयोगकर्ता के लिए साइटों को अनब्लॉक करता है (भुगतान किया गया संस्करण!)।

अद्भुत स्पष्टीकरण के लिए जेएसएम को धन्यवाद।
पुनश्च:

ज़ोर-ज़ोर से हंसना!