{"id":479639,"date":"2023-08-09T10:42:55","date_gmt":"2023-08-09T10:42:55","guid":{"rendered":""},"modified":"2023-09-05T11:19:16","modified_gmt":"2023-09-05T11:19:16","slug":"web-crawler","status":"publish","type":"wiki","link":"https:\/\/oneproxy.pro\/in\/wiki\/web-crawler\/","title":{"rendered":"\u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u0930"},"content":{"rendered":"<p>\u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u0930, \u091c\u093f\u0938\u0947 \u0938\u094d\u092a\u093e\u0907\u0921\u0930 \u0915\u0947 \u0930\u0942\u092a \u092e\u0947\u0902 \u092d\u0940 \u091c\u093e\u0928\u093e \u091c\u093e\u0924\u093e \u0939\u0948, \u090f\u0915 \u0938\u094d\u0935\u091a\u093e\u0932\u093f\u0924 \u0938\u0949\u092b\u093c\u094d\u091f\u0935\u0947\u092f\u0930 \u0909\u092a\u0915\u0930\u0923 \u0939\u0948 \u091c\u093f\u0938\u0915\u093e \u0909\u092a\u092f\u094b\u0917 \u0916\u094b\u091c \u0907\u0902\u091c\u0928 \u0926\u094d\u0935\u093e\u0930\u093e \u0907\u0902\u091f\u0930\u0928\u0947\u091f \u092a\u0930 \u0928\u0947\u0935\u093f\u0917\u0947\u091f \u0915\u0930\u0928\u0947, \u0935\u0947\u092c\u0938\u093e\u0907\u091f\u094b\u0902 \u0938\u0947 \u0921\u0947\u091f\u093e \u090f\u0915\u0924\u094d\u0930 \u0915\u0930\u0928\u0947 \u0914\u0930 \u092a\u0941\u0928\u0930\u094d\u092a\u094d\u0930\u093e\u092a\u094d\u0924\u093f \u0915\u0947 \u0932\u093f\u090f \u091c\u093e\u0928\u0915\u093e\u0930\u0940 \u0915\u094b \u0905\u0928\u0941\u0915\u094d\u0930\u092e\u093f\u0924 \u0915\u0930\u0928\u0947 \u0915\u0947 \u0932\u093f\u090f \u0915\u093f\u092f\u093e \u091c\u093e\u0924\u093e \u0939\u0948\u0964 \u092f\u0939 \u0935\u094d\u092f\u0935\u0938\u094d\u0925\u093f\u0924 \u0930\u0942\u092a \u0938\u0947 \u0935\u0947\u092c \u092a\u0947\u091c\u094b\u0902 \u0915\u0940 \u0916\u094b\u091c, \u0939\u093e\u0907\u092a\u0930\u0932\u093f\u0902\u0915\u094d\u0938 \u0915\u093e \u0905\u0928\u0941\u0938\u0930\u0923 \u0915\u0930\u0915\u0947 \u0914\u0930 \u0921\u0947\u091f\u093e \u090f\u0915\u0924\u094d\u0930 \u0915\u0930\u0915\u0947 \u0916\u094b\u091c \u0907\u0902\u091c\u0928 \u0915\u0947 \u0915\u093e\u092e\u0915\u093e\u091c \u092e\u0947\u0902 \u090f\u0915 \u092e\u094c\u0932\u093f\u0915 \u092d\u0942\u092e\u093f\u0915\u093e \u0928\u093f\u092d\u093e\u0924\u093e \u0939\u0948, \u091c\u093f\u0938\u0947 \u092c\u093e\u0926 \u092e\u0947\u0902 \u0906\u0938\u093e\u0928 \u092a\u0939\u0941\u0902\u091a \u0915\u0947 \u0932\u093f\u090f \u0935\u093f\u0936\u094d\u0932\u0947\u0937\u0923 \u0914\u0930 \u0905\u0928\u0941\u0915\u094d\u0930\u092e\u093f\u0924 \u0915\u093f\u092f\u093e \u091c\u093e\u0924\u093e \u0939\u0948\u0964 \u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u0930 \u0926\u0941\u0928\u093f\u092f\u093e \u092d\u0930 \u0915\u0947 \u0909\u092a\u092f\u094b\u0917\u0915\u0930\u094d\u0924\u093e\u0913\u0902 \u0915\u094b \u0938\u091f\u0940\u0915 \u0914\u0930 \u0905\u0926\u094d\u092f\u0924\u093f\u0924 \u0916\u094b\u091c \u092a\u0930\u093f\u0923\u093e\u092e \u092a\u094d\u0930\u0926\u093e\u0928 \u0915\u0930\u0928\u0947 \u092e\u0947\u0902 \u092e\u0939\u0924\u094d\u0935\u092a\u0942\u0930\u094d\u0923 \u0939\u0948\u0902\u0964<\/p>\n<h2>\u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u0930 \u0915\u0940 \u0909\u0924\u094d\u092a\u0924\u094d\u0924\u093f \u0915\u093e \u0907\u0924\u093f\u0939\u093e\u0938 \u0914\u0930 \u0907\u0938\u0915\u093e \u092a\u0939\u0932\u093e \u0909\u0932\u094d\u0932\u0947\u0916<\/h2>\n<p>\u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u093f\u0902\u0917 \u0915\u0940 \u0905\u0935\u0927\u093e\u0930\u0923\u093e \u0907\u0902\u091f\u0930\u0928\u0947\u091f \u0915\u0947 \u0936\u0941\u0930\u0941\u0906\u0924\u0940 \u0926\u093f\u0928\u094b\u0902 \u0938\u0947 \u091a\u0932\u0940 \u0906 \u0930\u0939\u0940 \u0939\u0948\u0964 \u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u0930 \u0915\u093e \u092a\u0939\u0932\u093e \u0909\u0932\u094d\u0932\u0947\u0916 1990 \u092e\u0947\u0902 \u092e\u0948\u0915\u0917\u093f\u0932 \u0935\u093f\u0936\u094d\u0935\u0935\u093f\u0926\u094d\u092f\u093e\u0932\u092f \u0915\u0947 \u090f\u0915 \u091b\u093e\u0924\u094d\u0930 \u090f\u0932\u0928 \u090f\u092e\u091f\u0947\u091c \u0915\u0947 \u0915\u093e\u092e \u0938\u0947 \u0915\u093f\u092f\u093e \u091c\u093e \u0938\u0915\u0924\u093e \u0939\u0948\u0964 \u0909\u0928\u094d\u0939\u094b\u0902\u0928\u0947 &quot;\u0906\u0930\u094d\u091a\u0940&quot; \u0916\u094b\u091c \u0907\u0902\u091c\u0928 \u0935\u093f\u0915\u0938\u093f\u0924 \u0915\u093f\u092f\u093e, \u091c\u094b \u092e\u0942\u0932 \u0930\u0942\u092a \u0938\u0947 \u090f\u0915 \u0906\u0926\u093f\u092e \u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u0930 \u0925\u093e \u091c\u093f\u0938\u0947 \u090f\u092b\u093c\u091f\u0940\u092a\u0940 \u0938\u093e\u0907\u091f\u094b\u0902 \u0915\u094b \u0905\u0928\u0941\u0915\u094d\u0930\u092e\u093f\u0924 \u0915\u0930\u0928\u0947 \u0914\u0930 \u090f\u0915 \u0921\u0947\u091f\u093e\u092c\u0947\u0938 \u092c\u0928\u093e\u0928\u0947 \u0915\u0947 \u0932\u093f\u090f \u0921\u093f\u091c\u093c\u093e\u0907\u0928 \u0915\u093f\u092f\u093e \u0917\u092f\u093e \u0925\u093e\u0964 \u0921\u093e\u0909\u0928\u0932\u094b\u0921 \u0915\u0930\u0928\u0947 \u092f\u094b\u0917\u094d\u092f \u092b\u093c\u093e\u0907\u0932\u094b\u0902 \u0915\u0940. \u0907\u0938\u0928\u0947 \u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u093f\u0902\u0917 \u0924\u0915\u0928\u0940\u0915 \u0915\u0940 \u0936\u0941\u0930\u0941\u0906\u0924 \u0915\u094b \u091a\u093f\u0939\u094d\u0928\u093f\u0924 \u0915\u093f\u092f\u093e\u0964<\/p>\n<h2>\u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u0930 \u0915\u0947 \u092c\u093e\u0930\u0947 \u092e\u0947\u0902 \u0935\u093f\u0938\u094d\u0924\u0943\u0924 \u091c\u093e\u0928\u0915\u093e\u0930\u0940. \u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u0930 \u0935\u093f\u0937\u092f \u0915\u093e \u0935\u093f\u0938\u094d\u0924\u093e\u0930\u0964<\/h2>\n<p>\u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u0930 \u0935\u0930\u094d\u0932\u094d\u0921 \u0935\u093e\u0907\u0921 \u0935\u0947\u092c \u0915\u0947 \u0935\u093f\u0936\u093e\u0932 \u0935\u093f\u0938\u094d\u0924\u093e\u0930 \u0915\u094b \u0928\u0947\u0935\u093f\u0917\u0947\u091f \u0915\u0930\u0928\u0947 \u0915\u0947 \u0932\u093f\u090f \u0921\u093f\u091c\u093c\u093e\u0907\u0928 \u0915\u093f\u090f \u0917\u090f \u092a\u0930\u093f\u0937\u094d\u0915\u0943\u0924 \u092a\u094d\u0930\u094b\u0917\u094d\u0930\u093e\u092e \u0939\u0948\u0902\u0964 \u0935\u0947 \u0928\u093f\u092e\u094d\u0928\u0932\u093f\u0916\u093f\u0924 \u0924\u0930\u0940\u0915\u0947 \u0938\u0947 \u0915\u093e\u0930\u094d\u092f \u0915\u0930\u0924\u0947 \u0939\u0948\u0902:<\/p>\n<ol>\n<li>\n<p><strong>\u092c\u0940\u091c \u092f\u0942\u0906\u0930\u090f\u0932<\/strong>: \u092a\u094d\u0930\u0915\u094d\u0930\u093f\u092f\u093e \u092c\u0940\u091c \u092f\u0942\u0906\u0930\u090f\u0932 \u0915\u0940 \u090f\u0915 \u0938\u0942\u091a\u0940 \u0915\u0947 \u0938\u093e\u0925 \u0936\u0941\u0930\u0942 \u0939\u094b\u0924\u0940 \u0939\u0948, \u091c\u094b \u0915\u094d\u0930\u0949\u0932\u0930 \u0915\u094b \u092a\u094d\u0930\u0926\u093e\u0928 \u0915\u093f\u090f \u0917\u090f \u0915\u0941\u091b \u0936\u0941\u0930\u0941\u0906\u0924\u0940 \u092c\u093f\u0902\u0926\u0941 \u0939\u0948\u0902\u0964 \u092f\u0947 \u0932\u094b\u0915\u092a\u094d\u0930\u093f\u092f \u0935\u0947\u092c\u0938\u093e\u0907\u091f\u094b\u0902 \u092f\u093e \u0915\u093f\u0938\u0940 \u0935\u093f\u0936\u093f\u0937\u094d\u091f \u0935\u0947\u092c \u092a\u0947\u091c \u0915\u0947 \u092f\u0942\u0906\u0930\u090f\u0932 \u0939\u094b \u0938\u0915\u0924\u0947 \u0939\u0948\u0902\u0964<\/p>\n<\/li>\n<li>\n<p><strong>\u092a\u094d\u0930\u093e\u092a\u094d\u0924 \u0915\u0930 \u0930\u0939\u093e \u0939\u0948<\/strong>: \u0915\u094d\u0930\u0949\u0932\u0930 \u0938\u0940\u0921 \u092f\u0942\u0906\u0930\u090f\u0932 \u092a\u0930 \u091c\u093e\u0915\u0930 \u0914\u0930 \u0938\u0902\u092c\u0902\u0927\u093f\u0924 \u0935\u0947\u092c \u092a\u0947\u091c\u094b\u0902 \u0915\u0940 \u0938\u093e\u092e\u0917\u094d\u0930\u0940 \u0915\u094b \u0921\u093e\u0909\u0928\u0932\u094b\u0921 \u0915\u0930\u0915\u0947 \u0936\u0941\u0930\u0942 \u0939\u094b\u0924\u093e \u0939\u0948\u0964<\/p>\n<\/li>\n<li>\n<p><strong>\u092a\u0926\u091a\u094d\u091b\u0947\u0926<\/strong>: \u090f\u0915 \u092c\u093e\u0930 \u0935\u0947\u092c \u092a\u0947\u091c \u0932\u093e\u0928\u0947 \u0915\u0947 \u092c\u093e\u0926, \u0915\u094d\u0930\u0949\u0932\u0930 \u092a\u094d\u0930\u093e\u0938\u0902\u0917\u093f\u0915 \u091c\u093e\u0928\u0915\u093e\u0930\u0940, \u091c\u0948\u0938\u0947 \u0932\u093f\u0902\u0915, \u091f\u0947\u0915\u094d\u0938\u094d\u091f \u0938\u093e\u092e\u0917\u094d\u0930\u0940, \u091b\u0935\u093f\u092f\u093e\u0902 \u0914\u0930 \u092e\u0947\u091f\u093e\u0921\u0947\u091f\u093e \u0928\u093f\u0915\u093e\u0932\u0928\u0947 \u0915\u0947 \u0932\u093f\u090f HTML \u0915\u094b \u092a\u093e\u0930\u094d\u0938 \u0915\u0930\u0924\u093e \u0939\u0948\u0964<\/p>\n<\/li>\n<li>\n<p><strong>\u0932\u093f\u0902\u0915 \u0928\u093f\u0937\u094d\u0915\u0930\u094d\u0937\u0923<\/strong>: \u0915\u094d\u0930\u0949\u0932\u0930 \u092a\u0943\u0937\u094d\u0920 \u092a\u0930 \u092e\u094c\u091c\u0942\u0926 \u0938\u092d\u0940 \u0939\u093e\u0907\u092a\u0930\u0932\u093f\u0902\u0915 \u0915\u094b \u092a\u0939\u091a\u093e\u0928\u0924\u093e \u0939\u0948 \u0914\u0930 \u0928\u093f\u0915\u093e\u0932\u0924\u093e \u0939\u0948, \u091c\u093f\u0938\u0938\u0947 \u0905\u0917\u0932\u0940 \u092c\u093e\u0930 \u0926\u0947\u0916\u0928\u0947 \u0915\u0947 \u0932\u093f\u090f \u092f\u0942\u0906\u0930\u090f\u0932 \u0915\u0940 \u090f\u0915 \u0938\u0942\u091a\u0940 \u092c\u0928\u0924\u0940 \u0939\u0948\u0964<\/p>\n<\/li>\n<li>\n<p><strong>\u092f\u0942\u0906\u0930\u090f\u0932 \u092b\u094d\u0930\u0902\u091f\u093f\u092f\u0930<\/strong>: \u0928\u093f\u0915\u093e\u0932\u0947 \u0917\u090f \u092f\u0942\u0906\u0930\u090f\u0932 \u0915\u094b &quot;\u092f\u0942\u0906\u0930\u090f\u0932 \u092b\u094d\u0930\u0902\u091f\u093f\u092f\u0930&quot; \u0928\u093e\u092e\u0915 \u090f\u0915 \u0915\u0924\u093e\u0930 \u092e\u0947\u0902 \u091c\u094b\u0921\u093c\u093e \u091c\u093e\u0924\u093e \u0939\u0948, \u091c\u094b \u092f\u0942\u0906\u0930\u090f\u0932 \u092a\u0930 \u091c\u093e\u0928\u0947 \u0915\u0940 \u092a\u094d\u0930\u093e\u0925\u092e\u093f\u0915\u0924\u093e \u0914\u0930 \u0915\u094d\u0930\u092e \u0915\u094b \u092a\u094d\u0930\u092c\u0902\u0927\u093f\u0924 \u0915\u0930\u0924\u093e \u0939\u0948\u0964<\/p>\n<\/li>\n<li>\n<p><strong>\u0935\u093f\u0928\u092e\u094d\u0930\u0924\u093e \u0928\u0940\u0924\u093f<\/strong>: \u0938\u0930\u094d\u0935\u0930 \u092a\u0930 \u0926\u092c\u093e\u0935 \u0921\u093e\u0932\u0928\u0947 \u0914\u0930 \u0935\u094d\u092f\u0935\u0927\u093e\u0928 \u092a\u0948\u0926\u093e \u0915\u0930\u0928\u0947 \u0938\u0947 \u092c\u091a\u0928\u0947 \u0915\u0947 \u0932\u093f\u090f, \u0915\u094d\u0930\u0949\u0932\u0930 \u0905\u0915\u094d\u0938\u0930 &quot;\u0935\u093f\u0928\u092e\u094d\u0930\u0924\u093e \u0928\u0940\u0924\u093f&quot; \u0915\u093e \u092a\u093e\u0932\u0928 \u0915\u0930\u0924\u0947 \u0939\u0948\u0902 \u091c\u094b \u0915\u093f\u0938\u0940 \u0935\u093f\u0936\u0947\u0937 \u0935\u0947\u092c\u0938\u093e\u0907\u091f \u092a\u0930 \u0905\u0928\u0941\u0930\u094b\u0927\u094b\u0902 \u0915\u0940 \u0906\u0935\u0943\u0924\u094d\u0924\u093f \u0914\u0930 \u0938\u092e\u092f \u0915\u094b \u0928\u093f\u092f\u0902\u0924\u094d\u0930\u093f\u0924 \u0915\u0930\u0924\u0940 \u0939\u0948\u0964<\/p>\n<\/li>\n<li>\n<p><strong>\u092a\u094d\u0930\u0924\u094d\u092f\u093e\u0935\u0930\u094d\u0924\u0928<\/strong>: \u092f\u0939 \u092a\u094d\u0930\u0915\u094d\u0930\u093f\u092f\u093e \u0926\u094b\u0939\u0930\u093e\u0908 \u091c\u093e\u0924\u0940 \u0939\u0948 \u0915\u094d\u092f\u094b\u0902\u0915\u093f \u0915\u094d\u0930\u0949\u0932\u0930 \u092f\u0942\u0906\u0930\u090f\u0932 \u092b\u094d\u0930\u0902\u091f\u093f\u092f\u0930 \u092e\u0947\u0902 \u092f\u0942\u0906\u0930\u090f\u0932 \u092a\u0930 \u091c\u093e\u0924\u093e \u0939\u0948, \u0928\u090f \u092a\u0947\u091c \u0932\u093e\u0924\u093e \u0939\u0948, \u0932\u093f\u0902\u0915 \u0928\u093f\u0915\u093e\u0932\u0924\u093e \u0939\u0948, \u0914\u0930 \u0915\u0924\u093e\u0930 \u092e\u0947\u0902 \u0914\u0930 \u092f\u0942\u0906\u0930\u090f\u0932 \u091c\u094b\u0921\u093c\u0924\u093e \u0939\u0948\u0964 \u092f\u0939 \u092a\u0941\u0928\u0930\u093e\u0935\u0930\u094d\u0924\u0940 \u092a\u094d\u0930\u0915\u094d\u0930\u093f\u092f\u093e \u0924\u092c \u0924\u0915 \u091c\u093e\u0930\u0940 \u0930\u0939\u0924\u0940 \u0939\u0948 \u091c\u092c \u0924\u0915 \u0915\u093f \u092a\u0942\u0930\u094d\u0935-\u0928\u093f\u0930\u094d\u0927\u093e\u0930\u093f\u0924 \u0930\u094b\u0915 \u0915\u0940 \u0938\u094d\u0925\u093f\u0924\u093f \u092a\u0942\u0930\u0940 \u0928\u0939\u0940\u0902 \u0939\u094b \u091c\u093e\u0924\u0940\u0964<\/p>\n<\/li>\n<li>\n<p><strong>\u0906\u0927\u093e\u0930 \u0938\u093e\u092e\u0917\u094d\u0930\u0940 \u092d\u0902\u0921\u093e\u0930\u0923<\/strong>: \u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u0930 \u0926\u094d\u0935\u093e\u0930\u093e \u090f\u0915\u0924\u094d\u0930 \u0915\u093f\u092f\u093e \u0917\u092f\u093e \u0921\u0947\u091f\u093e \u0906\u092e\u0924\u094c\u0930 \u092a\u0930 \u0916\u094b\u091c \u0907\u0902\u091c\u0928 \u0926\u094d\u0935\u093e\u0930\u093e \u0906\u0917\u0947 \u0915\u0940 \u092a\u094d\u0930\u0915\u094d\u0930\u093f\u092f\u093e \u0914\u0930 \u0905\u0928\u0941\u0915\u094d\u0930\u092e\u0923 \u0915\u0947 \u0932\u093f\u090f \u0921\u0947\u091f\u093e\u092c\u0947\u0938 \u092e\u0947\u0902 \u0938\u0902\u0917\u094d\u0930\u0939\u0940\u0924 \u0915\u093f\u092f\u093e \u091c\u093e\u0924\u093e \u0939\u0948\u0964<\/p>\n<\/li>\n<\/ol>\n<h2>\u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u0930 \u0915\u0940 \u0906\u0902\u0924\u0930\u093f\u0915 \u0938\u0902\u0930\u091a\u0928\u093e. \u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u0930 \u0915\u0948\u0938\u0947 \u0915\u093e\u092e \u0915\u0930\u0924\u093e \u0939\u0948.<\/h2>\n<p>\u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u0930 \u0915\u0940 \u0906\u0902\u0924\u0930\u093f\u0915 \u0938\u0902\u0930\u091a\u0928\u093e \u092e\u0947\u0902 \u0915\u0908 \u0906\u0935\u0936\u094d\u092f\u0915 \u0918\u091f\u0915 \u0939\u094b\u0924\u0947 \u0939\u0948\u0902 \u091c\u094b \u0915\u0941\u0936\u0932 \u0914\u0930 \u0938\u091f\u0940\u0915 \u0915\u094d\u0930\u0949\u0932\u093f\u0902\u0917 \u0938\u0941\u0928\u093f\u0936\u094d\u091a\u093f\u0924 \u0915\u0930\u0928\u0947 \u0915\u0947 \u0932\u093f\u090f \u092e\u093f\u0932\u0915\u0930 \u0915\u093e\u092e \u0915\u0930\u0924\u0947 \u0939\u0948\u0902:<\/p>\n<ol>\n<li>\n<p><strong>\u092b\u094d\u0930\u0902\u091f\u093f\u092f\u0930 \u092e\u0948\u0928\u0947\u091c\u0930<\/strong>: \u092f\u0939 \u0918\u091f\u0915 \u092f\u0942\u0906\u0930\u090f\u0932 \u092b\u094d\u0930\u0902\u091f\u093f\u092f\u0930 \u0915\u093e \u092a\u094d\u0930\u092c\u0902\u0927\u0928 \u0915\u0930\u0924\u093e \u0939\u0948, \u0915\u094d\u0930\u0949\u0932 \u0911\u0930\u094d\u0921\u0930 \u0938\u0941\u0928\u093f\u0936\u094d\u091a\u093f\u0924 \u0915\u0930\u0924\u093e \u0939\u0948, \u0921\u0941\u092a\u094d\u0932\u093f\u0915\u0947\u091f \u092f\u0942\u0906\u0930\u090f\u0932 \u0938\u0947 \u092c\u091a\u0924\u093e \u0939\u0948, \u0914\u0930 \u092f\u0942\u0906\u0930\u090f\u0932 \u092a\u094d\u0930\u093e\u0925\u092e\u093f\u0915\u0924\u093e \u0915\u094b \u0938\u0902\u092d\u093e\u0932\u0924\u093e \u0939\u0948\u0964<\/p>\n<\/li>\n<li>\n<p><strong>\u0921\u093e\u0909\u0928\u0932\u094b\u0921\u0930<\/strong>: \u0907\u0902\u091f\u0930\u0928\u0947\u091f \u0938\u0947 \u0935\u0947\u092c \u092a\u0947\u091c \u0932\u093e\u0928\u0947 \u0915\u0947 \u0932\u093f\u090f \u091c\u093f\u092e\u094d\u092e\u0947\u0926\u093e\u0930, \u0921\u093e\u0909\u0928\u0932\u094b\u0921\u0930 \u0915\u094b \u0935\u0947\u092c \u0938\u0930\u094d\u0935\u0930 \u0915\u0947 \u0928\u093f\u092f\u092e\u094b\u0902 \u0915\u093e \u0938\u092e\u094d\u092e\u093e\u0928 \u0915\u0930\u0924\u0947 \u0939\u0941\u090f HTTP \u0905\u0928\u0941\u0930\u094b\u0927\u094b\u0902 \u0914\u0930 \u092a\u094d\u0930\u0924\u093f\u0915\u094d\u0930\u093f\u092f\u093e\u0913\u0902 \u0915\u094b \u0938\u0902\u092d\u093e\u0932\u0928\u093e \u0939\u094b\u0917\u093e\u0964<\/p>\n<\/li>\n<li>\n<p><strong>\u092a\u093e\u0930\u094d\u0938\u0930<\/strong>: \u092a\u093e\u0930\u094d\u0938\u0930 \u092a\u094d\u0930\u093e\u092a\u094d\u0924 \u0935\u0947\u092c \u092a\u0947\u091c\u094b\u0902 \u0938\u0947 \u092e\u0942\u0932\u094d\u092f\u0935\u093e\u0928 \u0921\u0947\u091f\u093e \u0928\u093f\u0915\u093e\u0932\u0928\u0947 \u0915\u0947 \u0932\u093f\u090f \u091c\u093f\u092e\u094d\u092e\u0947\u0926\u093e\u0930 \u0939\u0948, \u091c\u0948\u0938\u0947 \u0932\u093f\u0902\u0915, \u091f\u0947\u0915\u094d\u0938\u094d\u091f \u0914\u0930 \u092e\u0947\u091f\u093e\u0921\u0947\u091f\u093e\u0964 \u092f\u0939 \u0905\u0915\u094d\u0938\u0930 \u0910\u0938\u093e \u0915\u0930\u0928\u0947 \u0915\u0947 \u0932\u093f\u090f HTML \u092a\u093e\u0930\u094d\u0938\u093f\u0902\u0917 \u0932\u093e\u0907\u092c\u094d\u0930\u0947\u0930\u0940 \u0915\u093e \u0909\u092a\u092f\u094b\u0917 \u0915\u0930\u0924\u093e \u0939\u0948\u0964<\/p>\n<\/li>\n<li>\n<p><strong>\u0921\u0941\u092a\u094d\u0932\u093f\u0915\u0947\u091f \u090f\u0932\u093f\u092e\u093f\u0928\u0947\u091f\u0930<\/strong>: \u090f\u0915 \u0939\u0940 \u092a\u0947\u091c \u0915\u094b \u0915\u0908 \u092c\u093e\u0930 \u0926\u094b\u092c\u093e\u0930\u093e \u0926\u0947\u0916\u0928\u0947 \u0938\u0947 \u092c\u091a\u0928\u0947 \u0915\u0947 \u0932\u093f\u090f, \u0921\u0941\u092a\u094d\u0932\u093f\u0915\u0947\u091f \u090f\u0932\u093f\u092e\u093f\u0928\u0947\u091f\u0930 \u0909\u0928 \u092f\u0942\u0906\u0930\u090f\u0932 \u0915\u094b \u092b\u093c\u093f\u0932\u094d\u091f\u0930 \u0915\u0930 \u0926\u0947\u0924\u093e \u0939\u0948 \u091c\u093f\u0928\u094d\u0939\u0947\u0902 \u092a\u0939\u0932\u0947 \u0939\u0940 \u0915\u094d\u0930\u0949\u0932 \u0914\u0930 \u0938\u0902\u0938\u093e\u0927\u093f\u0924 \u0915\u093f\u092f\u093e \u091c\u093e \u091a\u0941\u0915\u093e \u0939\u0948\u0964<\/p>\n<\/li>\n<li>\n<p><strong>\u0921\u0940\u090f\u0928\u090f\u0938 \u0930\u093f\u091c\u093c\u0949\u0932\u094d\u0935\u0930<\/strong>: DNS \u0930\u093f\u091c\u093c\u0949\u0932\u094d\u0935\u0930 \u0921\u094b\u092e\u0947\u0928 \u0928\u093e\u092e\u094b\u0902 \u0915\u094b \u0906\u0908\u092a\u0940 \u092a\u0924\u0947 \u092e\u0947\u0902 \u092a\u0930\u093f\u0935\u0930\u094d\u0924\u093f\u0924 \u0915\u0930\u0924\u093e \u0939\u0948, \u091c\u093f\u0938\u0938\u0947 \u0915\u094d\u0930\u0949\u0932\u0930 \u0915\u094b \u0935\u0947\u092c \u0938\u0930\u094d\u0935\u0930 \u0915\u0947 \u0938\u093e\u0925 \u0938\u0902\u091a\u093e\u0930 \u0915\u0930\u0928\u0947 \u0915\u0940 \u0905\u0928\u0941\u092e\u0924\u093f \u092e\u093f\u0932\u0924\u0940 \u0939\u0948\u0964<\/p>\n<\/li>\n<li>\n<p><strong>\u0935\u093f\u0928\u092e\u094d\u0930\u0924\u093e \u0928\u0940\u0924\u093f \u092a\u094d\u0930\u0935\u0930\u094d\u0924\u0915<\/strong>\u092f\u0939 \u0918\u091f\u0915 \u0938\u0941\u0928\u093f\u0936\u094d\u091a\u093f\u0924 \u0915\u0930\u0924\u093e \u0939\u0948 \u0915\u093f \u0915\u094d\u0930\u0949\u0932\u0930 \u0935\u093f\u0928\u092e\u094d\u0930\u0924\u093e \u0928\u0940\u0924\u093f \u0915\u093e \u092a\u093e\u0932\u0928 \u0915\u0930\u0924\u093e \u0939\u0948, \u091c\u093f\u0938\u0938\u0947 \u0938\u0930\u094d\u0935\u0930 \u092a\u0930 \u0905\u0927\u093f\u0915 \u092d\u093e\u0930 \u092a\u0921\u093c\u0928\u0947 \u0914\u0930 \u0935\u094d\u092f\u0935\u0927\u093e\u0928 \u0909\u0924\u094d\u092a\u0928\u094d\u0928 \u0939\u094b\u0928\u0947 \u0938\u0947 \u0930\u094b\u0915\u093e \u091c\u093e \u0938\u0915\u0947\u0964<\/p>\n<\/li>\n<li>\n<p><strong>\u0921\u0947\u091f\u093e\u092c\u0947\u0938<\/strong>: \u090f\u0915\u0924\u094d\u0930\u093f\u0924 \u0921\u0947\u091f\u093e \u0915\u094b \u090f\u0915 \u0921\u0947\u091f\u093e\u092c\u0947\u0938 \u092e\u0947\u0902 \u0938\u0902\u0917\u094d\u0930\u0939\u0940\u0924 \u0915\u093f\u092f\u093e \u091c\u093e\u0924\u093e \u0939\u0948, \u091c\u094b \u0916\u094b\u091c \u0907\u0902\u091c\u0928\u094b\u0902 \u0926\u094d\u0935\u093e\u0930\u093e \u0915\u0941\u0936\u0932 \u0905\u0928\u0941\u0915\u094d\u0930\u092e\u0923 \u0914\u0930 \u092a\u0941\u0928\u0930\u094d\u092a\u094d\u0930\u093e\u092a\u094d\u0924\u093f \u0915\u0940 \u0905\u0928\u0941\u092e\u0924\u093f \u0926\u0947\u0924\u093e \u0939\u0948\u0964<\/p>\n<\/li>\n<\/ol>\n<h2>\u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u0930 \u0915\u0940 \u092a\u094d\u0930\u092e\u0941\u0916 \u0935\u093f\u0936\u0947\u0937\u0924\u093e\u0913\u0902 \u0915\u093e \u0935\u093f\u0936\u094d\u0932\u0947\u0937\u0923\u0964<\/h2>\n<p>\u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u0930 \u092e\u0947\u0902 \u0915\u0908 \u092a\u094d\u0930\u092e\u0941\u0916 \u0935\u093f\u0936\u0947\u0937\u0924\u093e\u090f\u0902 \u0939\u094b\u0924\u0940 \u0939\u0948\u0902 \u091c\u094b \u0909\u0928\u0915\u0940 \u092a\u094d\u0930\u092d\u093e\u0935\u0936\u0940\u0932\u0924\u093e \u0914\u0930 \u0915\u093e\u0930\u094d\u092f\u0915\u094d\u0937\u092e\u0924\u093e \u092e\u0947\u0902 \u092f\u094b\u0917\u0926\u093e\u0928 \u0915\u0930\u0924\u0940 \u0939\u0948\u0902:<\/p>\n<ol>\n<li>\n<p><strong>\u0905\u0928\u0941\u092e\u093e\u092a\u0915\u0924\u093e<\/strong>\u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u0930 \u0915\u094b \u0907\u0902\u091f\u0930\u0928\u0947\u091f \u0915\u0947 \u0935\u093f\u0936\u093e\u0932 \u092a\u0948\u092e\u093e\u0928\u0947 \u0915\u094b \u0938\u0902\u092d\u093e\u0932\u0928\u0947 \u0915\u0947 \u0932\u093f\u090f \u0921\u093f\u091c\u093c\u093e\u0907\u0928 \u0915\u093f\u092f\u093e \u0917\u092f\u093e \u0939\u0948, \u091c\u094b \u0905\u0930\u092c\u094b\u0902 \u0935\u0947\u092c \u092a\u0947\u091c\u094b\u0902 \u0915\u094b \u0915\u0941\u0936\u0932\u0924\u093e\u092a\u0942\u0930\u094d\u0935\u0915 \u0915\u094d\u0930\u0949\u0932 \u0915\u0930\u0924\u093e \u0939\u0948\u0964<\/p>\n<\/li>\n<li>\n<p><strong>\u092e\u091c\u092c\u0942\u0924\u0940<\/strong>: \u0909\u0928\u094d\u0939\u0947\u0902 \u0935\u093f\u0935\u093f\u0927 \u0935\u0947\u092c \u092a\u0947\u091c \u0938\u0902\u0930\u091a\u0928\u093e\u0913\u0902, \u0924\u094d\u0930\u0941\u091f\u093f\u092f\u094b\u0902 \u0914\u0930 \u0935\u0947\u092c \u0938\u0930\u094d\u0935\u0930 \u0915\u0940 \u0905\u0938\u094d\u0925\u093e\u092f\u0940 \u0905\u0928\u0941\u092a\u0932\u092c\u094d\u0927\u0924\u093e \u0915\u094b \u0938\u0902\u092d\u093e\u0932\u0928\u0947 \u0915\u0947 \u0932\u093f\u090f \u0932\u091a\u0940\u0932\u093e \u0939\u094b\u0928\u093e \u091a\u093e\u0939\u093f\u090f\u0964<\/p>\n<\/li>\n<li>\n<p><strong>\u0936\u0940\u0932<\/strong>: \u0915\u094d\u0930\u0949\u0932\u0930 \u0935\u0947\u092c \u0938\u0930\u094d\u0935\u0930 \u092a\u0930 \u092c\u094b\u091d \u0921\u093e\u0932\u0928\u0947 \u0938\u0947 \u092c\u091a\u0928\u0947 \u0915\u0947 \u0932\u093f\u090f \u0935\u093f\u0928\u092e\u094d\u0930\u0924\u093e \u0928\u0940\u0924\u093f\u092f\u094b\u0902 \u0915\u093e \u092a\u093e\u0932\u0928 \u0915\u0930\u0924\u0947 \u0939\u0948\u0902 \u0914\u0930 \u0935\u0947\u092c\u0938\u093e\u0907\u091f \u092e\u093e\u0932\u093f\u0915\u094b\u0902 \u0926\u094d\u0935\u093e\u0930\u093e \u0928\u093f\u0930\u094d\u0927\u093e\u0930\u093f\u0924 \u0926\u093f\u0936\u093e\u0928\u093f\u0930\u094d\u0926\u0947\u0936\u094b\u0902 \u0915\u093e \u092a\u093e\u0932\u0928 \u0915\u0930\u0924\u0947 \u0939\u0948\u0902\u0964<\/p>\n<\/li>\n<li>\n<p><strong>\u092a\u0941\u0928\u0903 \u0915\u094d\u0930\u0949\u0932 \u0928\u0940\u0924\u093f<\/strong>: \u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u0930\u094d\u0938 \u0915\u0947 \u092a\u093e\u0938 \u0938\u092e\u092f-\u0938\u092e\u092f \u092a\u0930 \u0905\u092a\u0928\u0947 \u0907\u0902\u0921\u0947\u0915\u094d\u0938 \u0915\u094b \u0924\u093e\u091c\u093c\u093e \u091c\u093e\u0928\u0915\u093e\u0930\u0940 \u0915\u0947 \u0938\u093e\u0925 \u0905\u092a\u0921\u0947\u091f \u0915\u0930\u0928\u0947 \u0915\u0947 \u0932\u093f\u090f \u092a\u0939\u0932\u0947 \u0938\u0947 \u0915\u094d\u0930\u0949\u0932 \u0915\u093f\u090f \u0917\u090f \u092a\u0943\u0937\u094d\u0920\u094b\u0902 \u0915\u094b \u092b\u093f\u0930 \u0938\u0947 \u0926\u0947\u0916\u0928\u0947 \u0915\u0940 \u0935\u094d\u092f\u0935\u0938\u094d\u0925\u093e \u0939\u094b\u0924\u0940 \u0939\u0948\u0964<\/p>\n<\/li>\n<li>\n<p><strong>\u0935\u093f\u0924\u0930\u093f\u0924 \u0915\u094d\u0930\u0949\u0932\u093f\u0902\u0917<\/strong>: \u092c\u0921\u093c\u0947 \u092a\u0948\u092e\u093e\u0928\u0947 \u092a\u0930 \u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u0930 \u0905\u0915\u094d\u0938\u0930 \u0915\u094d\u0930\u0949\u0932\u093f\u0902\u0917 \u0914\u0930 \u0921\u0947\u091f\u093e \u092a\u094d\u0930\u094b\u0938\u0947\u0938\u093f\u0902\u0917 \u092e\u0947\u0902 \u0924\u0947\u091c\u0940 \u0932\u093e\u0928\u0947 \u0915\u0947 \u0932\u093f\u090f \u0935\u093f\u0924\u0930\u093f\u0924 \u0906\u0930\u094d\u0915\u093f\u091f\u0947\u0915\u094d\u091a\u0930 \u0915\u093e \u0909\u092a\u092f\u094b\u0917 \u0915\u0930\u0924\u0947 \u0939\u0948\u0902\u0964<\/p>\n<\/li>\n<li>\n<p><strong>\u092b\u094b\u0915\u0938\u094d\u0921 \u0915\u094d\u0930\u0949\u0932\u093f\u0902\u0917<\/strong>: \u0915\u0941\u091b \u0915\u094d\u0930\u0949\u0932\u0930 \u0917\u0939\u0928 \u091c\u093e\u0928\u0915\u093e\u0930\u0940 \u090f\u0915\u0924\u094d\u0930 \u0915\u0930\u0928\u0947 \u0915\u0947 \u0932\u093f\u090f \u0935\u093f\u0936\u093f\u0937\u094d\u091f \u0935\u093f\u0937\u092f\u094b\u0902 \u092f\u093e \u0921\u094b\u092e\u0947\u0928 \u092a\u0930 \u0927\u094d\u092f\u093e\u0928 \u0915\u0947\u0902\u0926\u094d\u0930\u093f\u0924 \u0915\u0930\u0924\u0947 \u0939\u0941\u090f, \u0915\u0947\u0902\u0926\u094d\u0930\u093f\u0924 \u0915\u094d\u0930\u0949\u0932\u093f\u0902\u0917 \u0915\u0947 \u0932\u093f\u090f \u0921\u093f\u091c\u093c\u093e\u0907\u0928 \u0915\u093f\u090f \u0917\u090f \u0939\u0948\u0902\u0964<\/p>\n<\/li>\n<\/ol>\n<h2>\u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u0930 \u0915\u0947 \u092a\u094d\u0930\u0915\u093e\u0930<\/h2>\n<p>\u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u0930 \u0915\u094b \u0909\u0928\u0915\u0947 \u0907\u091a\u094d\u091b\u093f\u0924 \u0909\u0926\u094d\u0926\u0947\u0936\u094d\u092f \u0914\u0930 \u0935\u094d\u092f\u0935\u0939\u093e\u0930 \u0915\u0947 \u0906\u0927\u093e\u0930 \u092a\u0930 \u0935\u0930\u094d\u0917\u0940\u0915\u0943\u0924 \u0915\u093f\u092f\u093e \u091c\u093e \u0938\u0915\u0924\u093e \u0939\u0948\u0964 \u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u0930 \u0915\u0947 \u0938\u093e\u092e\u093e\u0928\u094d\u092f \u092a\u094d\u0930\u0915\u093e\u0930 \u0928\u093f\u092e\u094d\u0928\u0932\u093f\u0916\u093f\u0924 \u0939\u0948\u0902:<\/p>\n<table>\n<thead>\n<tr>\n<th>\u092a\u094d\u0930\u0915\u093e\u0930<\/th>\n<th>\u0935\u093f\u0935\u0930\u0923<\/th>\n<\/tr>\n<\/thead>\n<tbody>\n<tr>\n<td>\u0938\u093e\u092e\u093e\u0928\u094d\u092f \u0909\u0926\u094d\u0926\u0947\u0936\u094d\u092f<\/td>\n<td>\u0907\u0928 \u0915\u094d\u0930\u0949\u0932\u0930\u094d\u0938 \u0915\u093e \u0932\u0915\u094d\u0937\u094d\u092f \u0935\u093f\u0935\u093f\u0927 \u0921\u094b\u092e\u0947\u0928 \u0914\u0930 \u0935\u093f\u0937\u092f\u094b\u0902 \u0938\u0947 \u0935\u0947\u092c \u092a\u0947\u091c\u094b\u0902 \u0915\u0940 \u090f\u0915 \u0935\u093f\u0938\u094d\u0924\u0943\u0924 \u0936\u094d\u0930\u0943\u0902\u0916\u0932\u093e \u0915\u094b \u0905\u0928\u0941\u0915\u094d\u0930\u092e\u093f\u0924 \u0915\u0930\u0928\u093e \u0939\u0948\u0964<\/td>\n<\/tr>\n<tr>\n<td>\u0927\u094d\u092f\u093e\u0928 \u0915\u0947\u0902\u0926\u094d\u0930\u093f\u0924<\/td>\n<td>\u092b\u094b\u0915\u0938\u094d\u0921 \u0915\u094d\u0930\u0949\u0932\u0930 \u0935\u093f\u0936\u093f\u0937\u094d\u091f \u0935\u093f\u0937\u092f\u094b\u0902 \u092f\u093e \u0921\u094b\u092e\u0947\u0928 \u092a\u0930 \u0927\u094d\u092f\u093e\u0928 \u0915\u0947\u0902\u0926\u094d\u0930\u093f\u0924 \u0915\u0930\u0924\u0947 \u0939\u0948\u0902, \u091c\u093f\u0938\u0915\u093e \u0932\u0915\u094d\u0937\u094d\u092f \u0915\u093f\u0938\u0940 \u0935\u093f\u0937\u092f \u0915\u0947 \u092c\u093e\u0930\u0947 \u092e\u0947\u0902 \u0917\u0939\u0928 \u091c\u093e\u0928\u0915\u093e\u0930\u0940 \u0907\u0915\u091f\u094d\u0920\u093e \u0915\u0930\u0928\u093e \u0939\u094b\u0924\u093e \u0939\u0948\u0964<\/td>\n<\/tr>\n<tr>\n<td>\u0907\u0902\u0915\u094d\u0930\u0940\u092e\u0947\u0902\u091f\u0932<\/td>\n<td>\u0935\u0943\u0926\u094d\u0927\u093f\u0936\u0940\u0932 \u0915\u094d\u0930\u0949\u0932\u0930 \u0928\u0908 \u092f\u093e \u0905\u092a\u0921\u0947\u091f \u0915\u0940 \u0917\u0908 \u0938\u093e\u092e\u0917\u094d\u0930\u0940 \u0915\u094b \u0915\u094d\u0930\u0949\u0932 \u0915\u0930\u0928\u0947 \u0915\u094b \u092a\u094d\u0930\u093e\u0925\u092e\u093f\u0915\u0924\u093e \u0926\u0947\u0924\u0947 \u0939\u0948\u0902, \u091c\u093f\u0938\u0938\u0947 \u0938\u0902\u092a\u0942\u0930\u094d\u0923 \u0935\u0947\u092c \u0915\u094b \u092a\u0941\u0928\u0903 \u0915\u094d\u0930\u0949\u0932 \u0915\u0930\u0928\u0947 \u0915\u0940 \u0906\u0935\u0936\u094d\u092f\u0915\u0924\u093e \u0915\u092e \u0939\u094b \u091c\u093e\u0924\u0940 \u0939\u0948\u0964<\/td>\n<\/tr>\n<tr>\n<td>\u0939\u093e\u0907\u092c\u094d\u0930\u093f\u0921<\/td>\n<td>\u0939\u093e\u0907\u092c\u094d\u0930\u093f\u0921 \u0915\u094d\u0930\u0949\u0932\u0930 \u090f\u0915 \u0938\u0902\u0924\u0941\u0932\u093f\u0924 \u0915\u094d\u0930\u0949\u0932\u093f\u0902\u0917 \u0926\u0943\u0937\u094d\u091f\u093f\u0915\u094b\u0923 \u092a\u094d\u0930\u0926\u093e\u0928 \u0915\u0930\u0928\u0947 \u0915\u0947 \u0932\u093f\u090f \u0938\u093e\u092e\u093e\u0928\u094d\u092f-\u0909\u0926\u094d\u0926\u0947\u0936\u094d\u092f \u0914\u0930 \u0915\u0947\u0902\u0926\u094d\u0930\u093f\u0924 \u0915\u094d\u0930\u0949\u0932\u0930 \u0926\u094b\u0928\u094b\u0902 \u0915\u0947 \u0924\u0924\u094d\u0935\u094b\u0902 \u0915\u094b \u091c\u094b\u0921\u093c\u0924\u0947 \u0939\u0948\u0902\u0964<\/td>\n<\/tr>\n<\/tbody>\n<\/table>\n<h2>\u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u0930 \u0915\u093e \u0909\u092a\u092f\u094b\u0917 \u0915\u0930\u0928\u0947 \u0915\u0947 \u0924\u0930\u0940\u0915\u0947, \u0909\u092a\u092f\u094b\u0917 \u0938\u0947 \u0938\u0902\u092c\u0902\u0927\u093f\u0924 \u0938\u092e\u0938\u094d\u092f\u093e\u090f\u0901 \u0914\u0930 \u0909\u0928\u0915\u0947 \u0938\u092e\u093e\u0927\u093e\u0928\u0964<\/h2>\n<p>\u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u0930 \u0916\u094b\u091c \u0907\u0902\u091c\u0928 \u0905\u0928\u0941\u0915\u094d\u0930\u092e\u0923 \u0938\u0947 \u092a\u0930\u0947 \u0935\u093f\u092d\u093f\u0928\u094d\u0928 \u0909\u0926\u094d\u0926\u0947\u0936\u094d\u092f\u094b\u0902 \u0915\u0940 \u092a\u0942\u0930\u094d\u0924\u093f \u0915\u0930\u0924\u0947 \u0939\u0948\u0902:<\/p>\n<ol>\n<li>\n<p><strong>\u0921\u0947\u091f\u093e \u0916\u0928\u0928<\/strong>: \u0915\u094d\u0930\u0949\u0932\u0930 \u0935\u093f\u092d\u093f\u0928\u094d\u0928 \u0905\u0928\u0941\u0938\u0902\u0927\u093e\u0928 \u0909\u0926\u094d\u0926\u0947\u0936\u094d\u092f\u094b\u0902, \u091c\u0948\u0938\u0947 \u092d\u093e\u0935\u0928\u093e \u0935\u093f\u0936\u094d\u0932\u0947\u0937\u0923, \u092c\u093e\u091c\u093e\u0930 \u0905\u0928\u0941\u0938\u0902\u0927\u093e\u0928 \u0914\u0930 \u092a\u094d\u0930\u0935\u0943\u0924\u094d\u0924\u093f \u0935\u093f\u0936\u094d\u0932\u0947\u0937\u0923 \u0915\u0947 \u0932\u093f\u090f \u0921\u0947\u091f\u093e \u090f\u0915\u0924\u094d\u0930 \u0915\u0930\u0924\u0947 \u0939\u0948\u0902\u0964<\/p>\n<\/li>\n<li>\n<p><strong>\u090f\u0938\u0908\u0913 \u0935\u093f\u0936\u094d\u0932\u0947\u0937\u0923<\/strong>\u0935\u0947\u092c\u092e\u093e\u0938\u094d\u091f\u0930\u094d\u0938 \u0905\u092a\u0928\u0940 \u0935\u0947\u092c\u0938\u093e\u0907\u091f\u094b\u0902 \u0915\u093e \u0935\u093f\u0936\u094d\u0932\u0947\u0937\u0923 \u0915\u0930\u0928\u0947 \u0914\u0930 \u0909\u0928\u094d\u0939\u0947\u0902 \u0916\u094b\u091c \u0907\u0902\u091c\u0928 \u0930\u0948\u0902\u0915\u093f\u0902\u0917 \u0915\u0947 \u0932\u093f\u090f \u0905\u0928\u0941\u0915\u0942\u0932\u093f\u0924 \u0915\u0930\u0928\u0947 \u0939\u0947\u0924\u0941 \u0915\u094d\u0930\u0949\u0932\u0930\u094d\u0938 \u0915\u093e \u0909\u092a\u092f\u094b\u0917 \u0915\u0930\u0924\u0947 \u0939\u0948\u0902\u0964<\/p>\n<\/li>\n<li>\n<p><strong>\u0915\u0940\u092e\u0924 \u0915\u0940 \u0924\u0941\u0932\u0928\u093e<\/strong>: \u092e\u0942\u0932\u094d\u092f \u0924\u0941\u0932\u0928\u093e \u0935\u0947\u092c\u0938\u093e\u0907\u091f\u0947\u0902 \u0935\u093f\u092d\u093f\u0928\u094d\u0928 \u0911\u0928\u0932\u093e\u0907\u0928 \u0938\u094d\u091f\u094b\u0930\u094b\u0902 \u0938\u0947 \u0909\u0924\u094d\u092a\u093e\u0926 \u091c\u093e\u0928\u0915\u093e\u0930\u0940 \u090f\u0915\u0924\u094d\u0930 \u0915\u0930\u0928\u0947 \u0915\u0947 \u0932\u093f\u090f \u0915\u094d\u0930\u0949\u0932\u0930 \u0928\u093f\u092f\u0941\u0915\u094d\u0924 \u0915\u0930\u0924\u0940 \u0939\u0948\u0902\u0964<\/p>\n<\/li>\n<li>\n<p><strong>\u0938\u093e\u092e\u0917\u094d\u0930\u0940 \u090f\u0915\u0924\u094d\u0930\u0940\u0915\u0930\u0923<\/strong>: \u0938\u092e\u093e\u091a\u093e\u0930 \u090f\u0917\u094d\u0930\u0940\u0917\u0947\u091f\u0930 \u0915\u0908 \u0938\u094d\u0930\u094b\u0924\u094b\u0902 \u0938\u0947 \u0938\u093e\u092e\u0917\u094d\u0930\u0940 \u0907\u0915\u091f\u094d\u0920\u093e \u0915\u0930\u0928\u0947 \u0914\u0930 \u092a\u094d\u0930\u0926\u0930\u094d\u0936\u093f\u0924 \u0915\u0930\u0928\u0947 \u0915\u0947 \u0932\u093f\u090f \u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u0930 \u0915\u093e \u0909\u092a\u092f\u094b\u0917 \u0915\u0930\u0924\u0947 \u0939\u0948\u0902\u0964<\/p>\n<\/li>\n<\/ol>\n<p>\u0939\u093e\u0932\u093e\u0901\u0915\u093f, \u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u0930 \u0915\u093e \u0909\u092a\u092f\u094b\u0917 \u0915\u0930\u0928\u0947 \u092e\u0947\u0902 \u0915\u0941\u091b \u091a\u0941\u0928\u094c\u0924\u093f\u092f\u093e\u0901 \u0906\u0924\u0940 \u0939\u0948\u0902:<\/p>\n<ul>\n<li>\n<p><strong>\u0915\u093e\u0928\u0942\u0928\u0940 \u092e\u0941\u0926\u094d\u0926\u094b\u0902<\/strong>: \u0915\u093e\u0928\u0942\u0928\u0940 \u091c\u091f\u093f\u0932\u0924\u093e\u0913\u0902 \u0938\u0947 \u092c\u091a\u0928\u0947 \u0915\u0947 \u0932\u093f\u090f \u0915\u094d\u0930\u0949\u0932\u0930\u094d\u0938 \u0915\u094b \u0935\u0947\u092c\u0938\u093e\u0907\u091f \u092e\u093e\u0932\u093f\u0915\u094b\u0902 \u0915\u0940 \u0938\u0947\u0935\u093e \u0915\u0940 \u0936\u0930\u094d\u0924\u094b\u0902 \u0914\u0930 robots.txt \u092b\u093c\u093e\u0907\u0932\u094b\u0902 \u0915\u093e \u092a\u093e\u0932\u0928 \u0915\u0930\u0928\u093e \u0939\u094b\u0917\u093e\u0964<\/p>\n<\/li>\n<li>\n<p><strong>\u0928\u0948\u0924\u093f\u0915 \u091a\u093f\u0902\u0924\u093e\u090f\u0902<\/strong>: \u092c\u093f\u0928\u093e \u0905\u0928\u0941\u092e\u0924\u093f \u0915\u0947 \u0928\u093f\u091c\u0940 \u092f\u093e \u0938\u0902\u0935\u0947\u0926\u0928\u0936\u0940\u0932 \u0921\u0947\u091f\u093e \u0915\u094b \u0938\u094d\u0915\u094d\u0930\u0948\u092a \u0915\u0930\u0928\u093e \u0928\u0948\u0924\u093f\u0915 \u092e\u0941\u0926\u094d\u0926\u0947 \u0909\u0920\u093e \u0938\u0915\u0924\u093e \u0939\u0948\u0964<\/p>\n<\/li>\n<li>\n<p><strong>\u0917\u0924\u093f\u0936\u0940\u0932 \u0938\u093e\u092e\u0917\u094d\u0930\u0940<\/strong>: \u091c\u093e\u0935\u093e\u0938\u094d\u0915\u094d\u0930\u093f\u092a\u094d\u091f \u0915\u0947 \u092e\u093e\u0927\u094d\u092f\u092e \u0938\u0947 \u0909\u0924\u094d\u092a\u0928\u094d\u0928 \u0917\u0924\u093f\u0936\u0940\u0932 \u0938\u093e\u092e\u0917\u094d\u0930\u0940 \u0935\u093e\u0932\u0947 \u0935\u0947\u092c \u092a\u0947\u091c\u094b\u0902 \u0938\u0947 \u0921\u0947\u091f\u093e \u0928\u093f\u0915\u093e\u0932\u0928\u093e \u0915\u094d\u0930\u0949\u0932\u0930\u094d\u0938 \u0915\u0947 \u0932\u093f\u090f \u091a\u0941\u0928\u094c\u0924\u0940\u092a\u0942\u0930\u094d\u0923 \u0939\u094b \u0938\u0915\u0924\u093e \u0939\u0948\u0964<\/p>\n<\/li>\n<li>\n<p><strong>\u0926\u0930 \u0938\u0940\u092e\u093f\u0924<\/strong>: \u0935\u0947\u092c\u0938\u093e\u0907\u091f\u0947\u0902 \u0905\u092a\u0928\u0947 \u0938\u0930\u094d\u0935\u0930 \u092a\u0930 \u0913\u0935\u0930\u0932\u094b\u0921\u093f\u0902\u0917 \u0930\u094b\u0915\u0928\u0947 \u0915\u0947 \u0932\u093f\u090f \u0915\u094d\u0930\u0949\u0932\u0930\u094d\u0938 \u092a\u0930 \u0926\u0930 \u0938\u0940\u092e\u093e \u0932\u0917\u093e \u0938\u0915\u0924\u0940 \u0939\u0948\u0902\u0964<\/p>\n<\/li>\n<\/ul>\n<p>\u0907\u0928 \u0938\u092e\u0938\u094d\u092f\u093e\u0913\u0902 \u0915\u0947 \u0938\u092e\u093e\u0927\u093e\u0928 \u092e\u0947\u0902 \u0935\u093f\u0928\u092e\u094d\u0930\u0924\u093e \u0928\u0940\u0924\u093f\u092f\u094b\u0902 \u0915\u094b \u0932\u093e\u0917\u0942 \u0915\u0930\u0928\u093e, robots.txt \u0928\u093f\u0930\u094d\u0926\u0947\u0936\u094b\u0902 \u0915\u093e \u0938\u092e\u094d\u092e\u093e\u0928 \u0915\u0930\u0928\u093e, \u0917\u0924\u093f\u0936\u0940\u0932 \u0938\u093e\u092e\u0917\u094d\u0930\u0940 \u0915\u0947 \u0932\u093f\u090f \u0939\u0947\u0921\u0932\u0947\u0938 \u092c\u094d\u0930\u093e\u0909\u091c\u093c\u0930 \u0915\u093e \u0909\u092a\u092f\u094b\u0917 \u0915\u0930\u0928\u093e \u0914\u0930 \u0917\u094b\u092a\u0928\u0940\u092f\u0924\u093e \u0914\u0930 \u0915\u093e\u0928\u0942\u0928\u0940 \u0928\u093f\u092f\u092e\u094b\u0902 \u0915\u093e \u0905\u0928\u0941\u092a\u093e\u0932\u0928 \u0938\u0941\u0928\u093f\u0936\u094d\u091a\u093f\u0924 \u0915\u0930\u0928\u0947 \u0915\u0947 \u0932\u093f\u090f \u090f\u0915\u0924\u094d\u0930 \u0915\u093f\u090f \u0917\u090f \u0921\u0947\u091f\u093e \u0915\u0947 \u092a\u094d\u0930\u0924\u093f \u0938\u091a\u0947\u0924 \u0930\u0939\u0928\u093e \u0936\u093e\u092e\u093f\u0932 \u0939\u0948\u0964<\/p>\n<h2>\u092e\u0941\u0916\u094d\u092f \u0935\u093f\u0936\u0947\u0937\u0924\u093e\u090f\u0901 \u0914\u0930 \u0938\u092e\u093e\u0928 \u0936\u092c\u094d\u0926\u094b\u0902 \u0915\u0947 \u0938\u093e\u0925 \u0905\u0928\u094d\u092f \u0924\u0941\u0932\u0928\u093e\u090f\u0901<\/h2>\n<table>\n<thead>\n<tr>\n<th>\u0905\u0935\u0927\u093f<\/th>\n<th>\u0935\u093f\u0935\u0930\u0923<\/th>\n<\/tr>\n<\/thead>\n<tbody>\n<tr>\n<td>\u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u0930<\/td>\n<td>\u090f\u0915 \u0938\u094d\u0935\u091a\u093e\u0932\u093f\u0924 \u092a\u094d\u0930\u094b\u0917\u094d\u0930\u093e\u092e \u091c\u094b \u0907\u0902\u091f\u0930\u0928\u0947\u091f \u092a\u0930 \u0928\u0947\u0935\u093f\u0917\u0947\u091f \u0915\u0930\u0924\u093e \u0939\u0948, \u0935\u0947\u092c \u092a\u0947\u091c\u094b\u0902 \u0938\u0947 \u0921\u0947\u091f\u093e \u090f\u0915\u0924\u094d\u0930 \u0915\u0930\u0924\u093e \u0939\u0948 \u0914\u0930 \u0907\u0938\u0947 \u0916\u094b\u091c \u0907\u0902\u091c\u0928\u094b\u0902 \u0915\u0947 \u0932\u093f\u090f \u0905\u0928\u0941\u0915\u094d\u0930\u092e\u093f\u0924 \u0915\u0930\u0924\u093e \u0939\u0948\u0964<\/td>\n<\/tr>\n<tr>\n<td>\u0935\u0947\u092c \u0938\u094d\u092a\u093e\u0907\u0921\u0930<\/td>\n<td>\u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u0930 \u0915\u0947 \u0932\u093f\u090f \u090f\u0915 \u0914\u0930 \u0936\u092c\u094d\u0926, \u091c\u093f\u0938\u0947 \u0905\u0915\u094d\u0938\u0930 &quot;\u0915\u094d\u0930\u0949\u0932\u0930&quot; \u092f\u093e &quot;\u092c\u0949\u091f&quot; \u0915\u0947 \u0938\u093e\u0925 \u092a\u0930\u0938\u094d\u092a\u0930 \u0909\u092a\u092f\u094b\u0917 \u0915\u093f\u092f\u093e \u091c\u093e\u0924\u093e \u0939\u0948\u0964<\/td>\n<\/tr>\n<tr>\n<td>\u0935\u0947\u092c \u0938\u094d\u0915\u094d\u0930\u0948\u092a\u0930<\/td>\n<td>\u0921\u0947\u091f\u093e \u0915\u094b \u0905\u0928\u0941\u0915\u094d\u0930\u092e\u093f\u0924 \u0915\u0930\u0928\u0947 \u0935\u093e\u0932\u0947 \u0915\u094d\u0930\u0949\u0932\u0930\u094d\u0938 \u0915\u0947 \u0935\u093f\u092a\u0930\u0940\u0924, \u0935\u0947\u092c \u0938\u094d\u0915\u094d\u0930\u0948\u092a\u0930\u094d\u0938 \u0935\u093f\u0936\u094d\u0932\u0947\u0937\u0923 \u0915\u0947 \u0932\u093f\u090f \u0935\u0947\u092c\u0938\u093e\u0907\u091f\u094b\u0902 \u0938\u0947 \u0935\u093f\u0936\u093f\u0937\u094d\u091f \u091c\u093e\u0928\u0915\u093e\u0930\u0940 \u0928\u093f\u0915\u093e\u0932\u0928\u0947 \u092a\u0930 \u0927\u094d\u092f\u093e\u0928 \u0915\u0947\u0902\u0926\u094d\u0930\u093f\u0924 \u0915\u0930\u0924\u0947 \u0939\u0948\u0902\u0964<\/td>\n<\/tr>\n<tr>\n<td>\u0916\u094b\u091c \u0907\u0902\u091c\u0928<\/td>\n<td>\u090f\u0915 \u0935\u0947\u092c \u0905\u0928\u0941\u092a\u094d\u0930\u092f\u094b\u0917 \u091c\u094b \u0909\u092a\u092f\u094b\u0917\u0915\u0930\u094d\u0924\u093e\u0913\u0902 \u0915\u094b \u0915\u0940\u0935\u0930\u094d\u0921 \u0915\u093e \u0909\u092a\u092f\u094b\u0917 \u0915\u0930\u0915\u0947 \u0907\u0902\u091f\u0930\u0928\u0947\u091f \u092a\u0930 \u091c\u093e\u0928\u0915\u093e\u0930\u0940 \u0916\u094b\u091c\u0928\u0947 \u0915\u0940 \u0905\u0928\u0941\u092e\u0924\u093f \u0926\u0947\u0924\u093e \u0939\u0948 \u0914\u0930 \u092a\u0930\u093f\u0923\u093e\u092e \u092a\u094d\u0930\u0926\u093e\u0928 \u0915\u0930\u0924\u093e \u0939\u0948\u0964<\/td>\n<\/tr>\n<tr>\n<td>\u0907\u0902\u0921\u0947\u0915\u094d\u0938\u093f\u0902\u0917<\/td>\n<td>\u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u0930\u094d\u0938 \u0926\u094d\u0935\u093e\u0930\u093e \u090f\u0915\u0924\u094d\u0930\u093f\u0924 \u0921\u0947\u091f\u093e \u0915\u094b \u0916\u094b\u091c \u0907\u0902\u091c\u0928 \u0926\u094d\u0935\u093e\u0930\u093e \u0924\u094d\u0935\u0930\u093f\u0924 \u092a\u0941\u0928\u0930\u094d\u092a\u094d\u0930\u093e\u092a\u094d\u0924\u093f \u0915\u0947 \u0932\u093f\u090f \u0921\u0947\u091f\u093e\u092c\u0947\u0938 \u092e\u0947\u0902 \u0935\u094d\u092f\u0935\u0938\u094d\u0925\u093f\u0924 \u0914\u0930 \u0938\u0902\u0917\u094d\u0930\u0939\u0940\u0924 \u0915\u0930\u0928\u0947 \u0915\u0940 \u092a\u094d\u0930\u0915\u094d\u0930\u093f\u092f\u093e\u0964<\/td>\n<\/tr>\n<\/tbody>\n<\/table>\n<h2>\u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u0930 \u0938\u0947 \u0938\u0902\u092c\u0902\u0927\u093f\u0924 \u092d\u0935\u093f\u0937\u094d\u092f \u0915\u0947 \u092a\u0930\u093f\u092a\u094d\u0930\u0947\u0915\u094d\u0937\u094d\u092f \u0914\u0930 \u092a\u094d\u0930\u094c\u0926\u094d\u092f\u094b\u0917\u093f\u0915\u093f\u092f\u093e\u0902\u0964<\/h2>\n<p>\u091c\u0948\u0938\u0947-\u091c\u0948\u0938\u0947 \u0924\u0915\u0928\u0940\u0915 \u0935\u093f\u0915\u0938\u093f\u0924 \u0939\u094b\u0924\u0940 \u0939\u0948, \u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u0930 \u0905\u0927\u093f\u0915 \u092a\u0930\u093f\u0937\u094d\u0915\u0943\u0924 \u0914\u0930 \u0915\u0941\u0936\u0932 \u0939\u094b\u0924\u0947 \u091c\u093e\u0928\u0947 \u0915\u0940 \u0938\u0902\u092d\u093e\u0935\u0928\u093e \u0939\u0948\u0964 \u0915\u0941\u091b \u092d\u0935\u093f\u0937\u094d\u092f \u0915\u0947 \u092a\u0930\u093f\u092a\u094d\u0930\u0947\u0915\u094d\u0937\u094d\u092f \u0914\u0930 \u092a\u094d\u0930\u094c\u0926\u094d\u092f\u094b\u0917\u093f\u0915\u093f\u092f\u094b\u0902 \u092e\u0947\u0902 \u0936\u093e\u092e\u093f\u0932 \u0939\u0948\u0902:<\/p>\n<ol>\n<li>\n<p><strong>\u092f\u0902\u0924\u094d\u0930 \u0905\u0927\u093f\u0917\u092e<\/strong>\u0915\u094d\u0930\u0949\u0932\u093f\u0902\u0917 \u0926\u0915\u094d\u0937\u0924\u093e, \u0905\u0928\u0941\u0915\u0942\u0932\u0928\u0936\u0940\u0932\u0924\u093e \u0914\u0930 \u0938\u093e\u092e\u0917\u094d\u0930\u0940 \u0928\u093f\u0937\u094d\u0915\u0930\u094d\u0937\u0923 \u092e\u0947\u0902 \u0938\u0941\u0927\u093e\u0930 \u0915\u0947 \u0932\u093f\u090f \u092e\u0936\u0940\u0928 \u0932\u0930\u094d\u0928\u093f\u0902\u0917 \u090f\u0932\u094d\u0917\u094b\u0930\u093f\u0926\u092e \u0915\u093e \u090f\u0915\u0940\u0915\u0930\u0923\u0964<\/p>\n<\/li>\n<li>\n<p><strong>\u092a\u094d\u0930\u093e\u0915\u0943\u0924\u093f\u0915 \u092d\u093e\u0937\u093e \u092a\u094d\u0930\u0938\u0902\u0938\u094d\u0915\u0930\u0923 (\u090f\u0928\u090f\u0932\u092a\u0940)<\/strong>: \u0935\u0947\u092c \u092a\u0947\u091c\u094b\u0902 \u0915\u0947 \u0938\u0902\u0926\u0930\u094d\u092d \u0915\u094b \u0938\u092e\u091d\u0928\u0947 \u0914\u0930 \u0916\u094b\u091c \u092a\u094d\u0930\u093e\u0938\u0902\u0917\u093f\u0915\u0924\u093e \u092e\u0947\u0902 \u0938\u0941\u0927\u093e\u0930 \u0915\u0930\u0928\u0947 \u0915\u0947 \u0932\u093f\u090f \u0909\u0928\u094d\u0928\u0924 \u090f\u0928\u090f\u0932\u092a\u0940 \u0924\u0915\u0928\u0940\u0915\u0947\u0902\u0964<\/p>\n<\/li>\n<li>\n<p><strong>\u0917\u0924\u093f\u0936\u0940\u0932 \u0938\u093e\u092e\u0917\u094d\u0930\u0940 \u092a\u094d\u0930\u092c\u0902\u0927\u0928<\/strong>: \u0909\u0928\u094d\u0928\u0924 \u0939\u0947\u0921\u0932\u0947\u0938 \u092c\u094d\u0930\u093e\u0909\u091c\u093c\u0930 \u092f\u093e \u0938\u0930\u094d\u0935\u0930-\u0938\u093e\u0907\u0921 \u0930\u0947\u0902\u0921\u0930\u093f\u0902\u0917 \u0924\u0915\u0928\u0940\u0915\u094b\u0902 \u0915\u093e \u0909\u092a\u092f\u094b\u0917 \u0915\u0930\u0915\u0947 \u0917\u0924\u093f\u0936\u0940\u0932 \u0938\u093e\u092e\u0917\u094d\u0930\u0940 \u0915\u093e \u092c\u0947\u0939\u0924\u0930 \u092a\u094d\u0930\u092c\u0902\u0927\u0928\u0964<\/p>\n<\/li>\n<li>\n<p><strong>\u092c\u094d\u0932\u0949\u0915\u091a\u0947\u0928-\u0906\u0927\u093e\u0930\u093f\u0924 \u0915\u094d\u0930\u0949\u0932\u093f\u0902\u0917<\/strong>: \u092c\u0947\u0939\u0924\u0930 \u0938\u0941\u0930\u0915\u094d\u0937\u093e \u0914\u0930 \u092a\u093e\u0930\u0926\u0930\u094d\u0936\u093f\u0924\u093e \u0915\u0947 \u0932\u093f\u090f \u092c\u094d\u0932\u0949\u0915\u091a\u0947\u0928 \u0924\u0915\u0928\u0940\u0915 \u0915\u093e \u0909\u092a\u092f\u094b\u0917 \u0915\u0930\u0915\u0947 \u0935\u093f\u0915\u0947\u0928\u094d\u0926\u094d\u0930\u0940\u0915\u0943\u0924 \u0915\u094d\u0930\u0949\u0932\u093f\u0902\u0917 \u0938\u093f\u0938\u094d\u091f\u092e \u0932\u093e\u0917\u0942 \u0915\u0930\u0928\u093e\u0964<\/p>\n<\/li>\n<li>\n<p><strong>\u0921\u0947\u091f\u093e \u0917\u094b\u092a\u0928\u0940\u092f\u0924\u093e \u0914\u0930 \u0928\u0948\u0924\u093f\u0915\u0924\u093e<\/strong>: \u0909\u092a\u092f\u094b\u0917\u0915\u0930\u094d\u0924\u093e \u091c\u093e\u0928\u0915\u093e\u0930\u0940 \u0915\u0940 \u0938\u0941\u0930\u0915\u094d\u0937\u093e \u0915\u0947 \u0932\u093f\u090f \u0921\u0947\u091f\u093e \u0917\u094b\u092a\u0928\u0940\u092f\u0924\u093e \u0914\u0930 \u0928\u0948\u0924\u093f\u0915 \u0915\u094d\u0930\u0949\u0932\u093f\u0902\u0917 \u092a\u094d\u0930\u0925\u093e\u0913\u0902 \u0915\u094b \u0938\u0941\u0928\u093f\u0936\u094d\u091a\u093f\u0924 \u0915\u0930\u0928\u0947 \u0915\u0947 \u0932\u093f\u090f \u0909\u0928\u094d\u0928\u0924 \u0909\u092a\u093e\u092f\u0964<\/p>\n<\/li>\n<\/ol>\n<h2>\u092a\u094d\u0930\u0949\u0915\u094d\u0938\u0940 \u0938\u0930\u094d\u0935\u0930 \u0915\u093e \u0909\u092a\u092f\u094b\u0917 \u0915\u0948\u0938\u0947 \u0915\u093f\u092f\u093e \u091c\u093e \u0938\u0915\u0924\u093e \u0939\u0948 \u092f\u093e \u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u0930 \u0915\u0947 \u0938\u093e\u0925 \u0915\u0948\u0938\u0947 \u0938\u0902\u092c\u0926\u094d\u0927 \u0915\u093f\u092f\u093e \u091c\u093e \u0938\u0915\u0924\u093e \u0939\u0948\u0964<\/h2>\n<p>\u092a\u094d\u0930\u0949\u0915\u094d\u0938\u0940 \u0938\u0930\u094d\u0935\u0930 \u0928\u093f\u092e\u094d\u0928\u0932\u093f\u0916\u093f\u0924 \u0915\u093e\u0930\u0923\u094b\u0902 \u0938\u0947 \u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u093f\u0902\u0917 \u092e\u0947\u0902 \u092e\u0939\u0924\u094d\u0935\u092a\u0942\u0930\u094d\u0923 \u092d\u0942\u092e\u093f\u0915\u093e \u0928\u093f\u092d\u093e\u0924\u0947 \u0939\u0948\u0902:<\/p>\n<ol>\n<li>\n<p><strong>\u0906\u0908\u092a\u0940 \u090f\u0921\u094d\u0930\u0947\u0938 \u0930\u094b\u091f\u0947\u0936\u0928<\/strong>: \u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u0930 \u0905\u092a\u0928\u0947 \u0906\u0908\u092a\u0940 \u092a\u0924\u0947 \u0915\u094b \u0918\u0941\u092e\u093e\u0928\u0947, \u0906\u0908\u092a\u0940 \u092c\u094d\u0932\u0949\u0915 \u0938\u0947 \u092c\u091a\u0928\u0947 \u0914\u0930 \u0917\u0941\u092e\u0928\u093e\u092e\u0940 \u0938\u0941\u0928\u093f\u0936\u094d\u091a\u093f\u0924 \u0915\u0930\u0928\u0947 \u0915\u0947 \u0932\u093f\u090f \u092a\u094d\u0930\u0949\u0915\u094d\u0938\u0940 \u0938\u0930\u094d\u0935\u0930 \u0915\u093e \u0909\u092a\u092f\u094b\u0917 \u0915\u0930 \u0938\u0915\u0924\u0947 \u0939\u0948\u0902\u0964<\/p>\n<\/li>\n<li>\n<p><strong>\u092d\u094c\u0917\u094b\u0932\u093f\u0915 \u092a\u094d\u0930\u0924\u093f\u092c\u0902\u0927\u094b\u0902 \u0915\u094b \u0926\u0930\u0915\u093f\u0928\u093e\u0930 \u0915\u0930\u0924\u0947 \u0939\u0941\u090f<\/strong>: \u092a\u094d\u0930\u0949\u0915\u094d\u0938\u0940 \u0938\u0930\u094d\u0935\u0930 \u0915\u094d\u0930\u0949\u0932\u0930\u094d\u0938 \u0915\u094b \u0935\u093f\u092d\u093f\u0928\u094d\u0928 \u0938\u094d\u0925\u093e\u0928\u094b\u0902 \u0938\u0947 \u0906\u0908\u092a\u0940 \u092a\u0924\u0947 \u0915\u093e \u0909\u092a\u092f\u094b\u0917 \u0915\u0930\u0915\u0947 \u0915\u094d\u0937\u0947\u0924\u094d\u0930-\u092a\u094d\u0930\u0924\u093f\u092c\u0902\u0927\u093f\u0924 \u0938\u093e\u092e\u0917\u094d\u0930\u0940 \u0924\u0915 \u092a\u0939\u0941\u0902\u091a\u0928\u0947 \u0915\u0940 \u0905\u0928\u0941\u092e\u0924\u093f \u0926\u0947\u0924\u0947 \u0939\u0948\u0902\u0964<\/p>\n<\/li>\n<li>\n<p><strong>\u0930\u0947\u0902\u0917\u0928\u0947 \u0915\u0940 \u0917\u0924\u093f<\/strong>: \u0915\u094d\u0930\u0949\u0932\u093f\u0902\u0917 \u0915\u093e\u0930\u094d\u092f\u094b\u0902 \u0915\u094b \u0915\u0908 \u092a\u094d\u0930\u0949\u0915\u094d\u0938\u0940 \u0938\u0930\u094d\u0935\u0930\u094b\u0902 \u0915\u0947 \u092c\u0940\u091a \u0935\u093f\u0924\u0930\u093f\u0924 \u0915\u0930\u0928\u0947 \u0938\u0947 \u092a\u094d\u0930\u0915\u094d\u0930\u093f\u092f\u093e \u0924\u0947\u091c \u0939\u094b \u0938\u0915\u0924\u0940 \u0939\u0948 \u0914\u0930 \u0926\u0930 \u0938\u0940\u092e\u093f\u0924 \u0939\u094b\u0928\u0947 \u0915\u093e \u091c\u094b\u0916\u093f\u092e \u0915\u092e \u0939\u094b \u0938\u0915\u0924\u093e \u0939\u0948\u0964<\/p>\n<\/li>\n<li>\n<p><strong>\u0935\u0947\u092c \u0938\u094d\u0915\u094d\u0930\u0947\u092a\u093f\u0902\u0917<\/strong>: \u092a\u094d\u0930\u0949\u0915\u094d\u0938\u0940 \u0938\u0930\u094d\u0935\u0930 \u0935\u0947\u092c \u0938\u094d\u0915\u094d\u0930\u0948\u092a\u0930\u094d\u0938 \u0915\u094b \u0906\u0908\u092a\u0940-\u0906\u0927\u093e\u0930\u093f\u0924 \u0926\u0930 \u0938\u0940\u092e\u093f\u0924 \u0915\u0930\u0928\u0947 \u092f\u093e \u090f\u0902\u091f\u0940-\u0938\u094d\u0915\u094d\u0930\u0948\u092a\u093f\u0902\u0917 \u0909\u092a\u093e\u092f\u094b\u0902 \u0915\u0947 \u0938\u093e\u0925 \u0935\u0947\u092c\u0938\u093e\u0907\u091f\u094b\u0902 \u0924\u0915 \u092a\u0939\u0941\u0902\u091a\u0928\u0947 \u092e\u0947\u0902 \u0938\u0915\u094d\u0937\u092e \u092c\u0928\u093e\u0924\u0947 \u0939\u0948\u0902\u0964<\/p>\n<\/li>\n<li>\n<p><strong>\u0917\u0941\u092e\u0928\u093e\u092e\u0940<\/strong>: \u092a\u094d\u0930\u0949\u0915\u094d\u0938\u0940 \u0938\u0930\u094d\u0935\u0930 \u0921\u0947\u091f\u093e \u0938\u0902\u0917\u094d\u0930\u0939 \u0915\u0947 \u0926\u094c\u0930\u093e\u0928 \u0917\u0941\u092e\u0928\u093e\u092e\u0940 \u092a\u094d\u0930\u0926\u093e\u0928 \u0915\u0930\u0924\u0947 \u0939\u0941\u090f, \u0915\u094d\u0930\u0949\u0932\u0930 \u0915\u0947 \u0935\u093e\u0938\u094d\u0924\u0935\u093f\u0915 \u0906\u0908\u092a\u0940 \u092a\u0924\u0947 \u0915\u094b \u091b\u093f\u092a\u093e \u0926\u0947\u0924\u0947 \u0939\u0948\u0902\u0964<\/p>\n<\/li>\n<\/ol>\n<h2>\u0938\u092e\u094d\u092c\u0902\u0927\u093f\u0924 \u0932\u093f\u0902\u0915\u094d\u0938<\/h2>\n<p>\u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u0930 \u0915\u0947 \u092c\u093e\u0930\u0947 \u092e\u0947\u0902 \u0905\u0927\u093f\u0915 \u091c\u093e\u0928\u0915\u093e\u0930\u0940 \u0915\u0947 \u0932\u093f\u090f, \u0928\u093f\u092e\u094d\u0928\u0932\u093f\u0916\u093f\u0924 \u0938\u0902\u0938\u093e\u0927\u0928\u094b\u0902 \u0915\u0940 \u0916\u094b\u091c \u092a\u0930 \u0935\u093f\u091a\u093e\u0930 \u0915\u0930\u0947\u0902:<\/p>\n<ol>\n<li><a href=\"https:\/\/en.wikipedia.org\/wiki\/Web_crawler\" target=\"_new\" rel=\"noopener nofollow\">\u0935\u093f\u0915\u093f\u092a\u0940\u0921\u093f\u092f\u093e - \u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u0930<\/a><\/li>\n<li><a href=\"https:\/\/computer.howstuffworks.com\/internet\/basics\/web-crawler.htm\" target=\"_new\" rel=\"noopener nofollow\">\u0939\u093e\u0909\u0938\u094d\u091f\u092b\u0935\u0930\u094d\u0915\u094d\u0938 \u2013 \u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u0930 \u0915\u0948\u0938\u0947 \u0915\u093e\u092e \u0915\u0930\u0924\u0947 \u0939\u0948\u0902<\/a><\/li>\n<li><a href=\"https:\/\/www.semrush.com\/blog\/the-anatomy-of-a-web-crawler\/\" target=\"_new\" rel=\"noopener nofollow\">\u0938\u0947\u092e\u0930\u0936 - \u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u0930 \u0915\u0940 \u0936\u093e\u0930\u0940\u0930\u093f\u0915 \u0930\u091a\u0928\u093e<\/a><\/li>\n<li><a href=\"https:\/\/developers.google.com\/search\/docs\/advanced\/robots\/intro\" target=\"_new\" rel=\"noopener nofollow\">Google \u0921\u0947\u0935\u0932\u092a\u0930\u094d\u0938 - robots.txt \u0935\u093f\u0936\u093f\u0937\u094d\u091f\u0924\u093e\u090f\u0901<\/a><\/li>\n<li><a href=\"https:\/\/scrapy.org\/\" target=\"_new\" rel=\"noopener nofollow\">\u0938\u094d\u0915\u094d\u0930\u0948\u092a\u0940 - \u090f\u0915 \u0913\u092a\u0928-\u0938\u094b\u0930\u094d\u0938 \u0935\u0947\u092c \u0915\u094d\u0930\u0949\u0932\u093f\u0902\u0917 \u092b\u094d\u0930\u0947\u092e\u0935\u0930\u094d\u0915<\/a><\/li>\n<\/ol>","protected":false},"featured_media":470902,"menu_order":0,"template":"","meta":{"_acf_changed":false,"content-type":"","inline_featured_image":false,"footnotes":""},"class_list":["post-479639","wiki","type-wiki","status-publish","has-post-thumbnail","hentry"],"acf":{"faq_title":"Frequently Asked Questions about <mark>Web Crawler: A Comprehensive Overview<\/mark>","faq_items":[{"question":"What is a Web crawler?","answer":"<p>A Web crawler, also known as a spider, is an automated software tool used by search engines to navigate the internet, collect data from websites, and index the information for retrieval. It systematically explores web pages, following hyperlinks, and gathering data to provide accurate and up-to-date search results to users.<\/p>"},{"question":"Who developed the first Web crawler?","answer":"<p>The concept of web crawling can be traced back to Alan Emtage, a student at McGill University, who developed the \"Archie\" search engine in 1990. It was a primitive web crawler designed to index FTP sites and create a database of downloadable files.<\/p>"},{"question":"How does a Web crawler work?","answer":"<p>Web crawlers start with a list of seed URLs and fetch web pages from the internet. They parse the HTML to extract relevant information and identify and extract hyperlinks from the page. The extracted URLs are added to a queue known as the \"URL Frontier,\" which manages the crawl order. The process repeats recursively, visiting new URLs and extracting data until a stopping condition is met.<\/p>"},{"question":"What are the different types of Web crawlers?","answer":"<p>There are various types of web crawlers, including:<\/p><ol><li>General-purpose crawlers: Index a wide range of web pages from diverse domains.<\/li><li>Focused crawlers: Concentrate on specific topics or domains to gather in-depth information.<\/li><li>Incremental crawlers: Prioritize crawling new or updated content to reduce re-crawling.<\/li><li>Hybrid crawlers: Combine elements of both general-purpose and focused crawlers.<\/li><\/ol>"},{"question":"How are Web crawlers used?","answer":"<p>Web crawlers serve multiple purposes beyond search engine indexing, including data mining, SEO analysis, price comparison, and content aggregation.<\/p>"},{"question":"What challenges do Web crawlers face?","answer":"<p>Web crawlers encounter challenges such as legal issues, ethical concerns, handling dynamic content, and managing rate limiting from websites.<\/p>"},{"question":"How can proxy servers enhance Web crawler performance?","answer":"<p>Proxy servers can help web crawlers by rotating IP addresses, bypassing geographical restrictions, increasing crawling speed, and providing anonymity during data collection.<\/p>"},{"question":"What does the future hold for Web crawlers?","answer":"<p>The future of web crawlers includes integrating machine learning, advanced NLP techniques, dynamic content handling, and blockchain-based crawling for enhanced security and efficiency.<\/p>"}]},"_links":{"self":[{"href":"https:\/\/oneproxy.pro\/in\/wp-json\/wp\/v2\/wiki\/479639","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/oneproxy.pro\/in\/wp-json\/wp\/v2\/wiki"}],"about":[{"href":"https:\/\/oneproxy.pro\/in\/wp-json\/wp\/v2\/types\/wiki"}],"version-history":[{"count":0,"href":"https:\/\/oneproxy.pro\/in\/wp-json\/wp\/v2\/wiki\/479639\/revisions"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/oneproxy.pro\/in\/wp-json\/wp\/v2\/media\/470902"}],"wp:attachment":[{"href":"https:\/\/oneproxy.pro\/in\/wp-json\/wp\/v2\/media?parent=479639"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}