Robots.txt Editor

ਵੇਰਵਾ

Robots.txt ਰੋਬੋਟ ਐਕਸਕਲੂਜ਼ਨ ਫਾਈਲਾਂ ਅਤੇ ਇੱਕ ਲੌਗ ਐਨਾਲਾਈਜ਼ਰ ਸੌਫਟਵੇਅਰ ਲਈ ਇੱਕ ਵਿਜ਼ੂਅਲ ਐਡੀਟਰ ਹੈ। ਇਹ ਉਪਭੋਗਤਾ ਨੂੰ ਖੋਜ ਇੰਜਣ ਮੱਕੜੀਆਂ ਨੂੰ ਨਿਰਦੇਸ਼ ਦੇਣ ਲਈ ਲੋੜੀਂਦੀਆਂ robots.txt ਫਾਈਲਾਂ ਨੂੰ ਤੇਜ਼ੀ ਨਾਲ ਅਤੇ ਆਸਾਨੀ ਨਾਲ ਬਣਾਉਣ ਦੀ ਇਜਾਜ਼ਤ ਦਿੰਦਾ ਹੈ, ਜੋ ਕਿ ਕਿਸੇ ਵੈੱਬ ਸਾਈਟ ਦੇ ਹਿੱਸੇ ਹਨ, ਨੂੰ ਸੂਚੀਬੱਧ ਨਹੀਂ ਕੀਤਾ ਜਾਣਾ ਚਾਹੀਦਾ ਹੈ ਅਤੇ ਆਮ ਵੈੱਬ ਜਨਤਾ ਦੁਆਰਾ ਖੋਜਯੋਗ ਨਹੀਂ ਬਣਾਇਆ ਜਾਣਾ ਚਾਹੀਦਾ ਹੈ ਅਤੇ ਫਿਰ ਮੱਕੜੀਆਂ ਦੀ ਪਛਾਣ ਕਰਨ ਲਈ, ਜੋ ਕਿ ਨਹੀਂ ਹਨ। ਉਹਨਾਂ ਹਦਾਇਤਾਂ ਨੂੰ ਜਾਰੀ ਰੱਖੋ। ਪ੍ਰੋਗਰਾਮ ਉਪਭੋਗਤਾ ਨੂੰ ਉਸਦੇ FTP ਜਾਂ ਸਥਾਨਕ ਨੈਟਵਰਕ ਸਰਵਰ 'ਤੇ ਲੌਗਇਨ ਕਰਨ ਦਾ ਤਰੀਕਾ ਪ੍ਰਦਾਨ ਕਰਦਾ ਹੈ ਅਤੇ ਫਿਰ ਉਹਨਾਂ ਦਸਤਾਵੇਜ਼ਾਂ ਅਤੇ ਡਾਇਰੈਕਟਰੀਆਂ ਦੀ ਚੋਣ ਕਰਦਾ ਹੈ ਜੋ ਖੋਜਣ ਯੋਗ ਨਹੀਂ ਬਣਾਏ ਜਾਣੇ ਹਨ। ਇਸ ਪ੍ਰੋਗਰਾਮ ਦੇ ਜ਼ਰੀਏ ਤੁਸੀਂ ਉਦਯੋਗਿਕ ਮਿਆਰੀ robots.txt ਫਾਈਲਾਂ ਨੂੰ ਦ੍ਰਿਸ਼ਟੀਗਤ ਰੂਪ ਵਿੱਚ ਤਿਆਰ ਕਰਨ ਦੇ ਯੋਗ ਹੋਵੋਗੇ; ਖਤਰਨਾਕ ਅਤੇ ਅਣਚਾਹੇ ਮੱਕੜੀਆਂ ਦੀ ਪਛਾਣ ਕਰੋ ਅਤੇ ਉਹਨਾਂ ਨੂੰ ਆਪਣੀ ਸਾਈਟ ਤੋਂ ਪਾਬੰਦੀ ਲਗਾਓ; ਬਹੁ-ਭਾਸ਼ਾਈ ਸਾਈਟਾਂ ਲਈ ਢੁਕਵੇਂ ਪੰਨਿਆਂ 'ਤੇ ਸਿੱਧੇ ਖੋਜ ਇੰਜਨ ਕ੍ਰਾਲਰ; ਮੱਕੜੀਆਂ ਨੂੰ ਆਪਣੀ ਵੈੱਬਸਾਈਟ ਦੇ ਸੰਵੇਦਨਸ਼ੀਲ ਅਤੇ ਨਿੱਜੀ ਖੇਤਰਾਂ ਤੋਂ ਬਾਹਰ ਰੱਖੋ; ਮੱਕੜੀ ਦੇ ਦੌਰੇ ਅਤੇ ਹੋਰ ਨੂੰ ਟਰੈਕ ਕਰੋ। ਮੁਫ਼ਤ ਪ੍ਰੋਗਰਾਮ ਦੇ ਅੱਪਡੇਟ ਅਤੇ ਅੱਪਗਰੇਡ ਸਮੇਂ ਵਿੱਚ ਅਪ੍ਰਬੰਧਿਤ; ਨਾਲ ਕੰਮ ਕਰਨ ਲਈ ਬੇਅੰਤ ਵੈੱਬ ਸਾਈਟਾਂ।