Μια αράχνη είναι ένα πρόγραμμα ή σενάριο γραμμένο για να περιηγηθείτε στο World Wide Web με συστηματικό τρόπο για το σκοπό της ευρετηρίασης ιστοσελίδων. Μια αράχνη μπορεί επίσης να αναφέρεται ως ένα bot bot, web crawler ή web robot .

Για παράδειγμα, οι αράχνες συχνά χρησιμοποιούνται για τη συλλογή λέξεων-κλειδιών από ιστοσελίδες που ταξινομούνται έπειτα ώστε οι χρήστες να μπορούν να εντοπίσουν τις εν λόγω σελίδες μέσω μιας μηχανής αναζήτησης στο Internet.

Bots, Ανίχνευση, Όροι Διαδικτύου, Ρομπότ, Robots.txt, Ιστοσελίδα, Ιστοσελίδα