Napisałem pierwszego bota

Udało mi się napisać pierwszego robota sieciowego, jest on bardzo prosty i jedyne co potrafi to sprawdzić pozycję strony na daną frazę w wyszukiwarce google. Bota napisałem w PHP korzystając z książki “Webbots, Spiders and Screen Scrapers”. Z PHP miałem doczynienia dosyć dawno i parę rzeczy musiałem sobie przypomnieć ale pisanie robotów sieciowych jest wciągające. Trzeba poświęcić na to dosyć dużo czasu i wnikliwie zapoznać się z budową strony, którą będzie parsował bot, aby mógł on działać bezbłędnie i osiągnąć pożądane wyniki. Za jakiś czas postaram się napisać jak krok po kroku stworzyć prostego bota. Chciałbym też nauczyć się programować boty w Pythonie, bo z moich prób z tym językiem wynika, że posiada on pewne kostrukcje językowe ułatwiające programowanie pajączków.

Roboty sieciowe

Robotami sieciowymi zainteresowałem się dosyć dawno ale nie wgłębiałem się zbytnio w  tą tematykę. Teraz postanowiłem dowiedzieć się więcej w tym temacie i za jakiś czas może uda mi się stworzyć własnego robota sieciowego, który ułatwi mi wykonowanie pewnych zadań w internetowej sieci. Na razie znalazłem dosyć ciekawą książkę dotyczącą podstaw programowania i pracy z robotami sieciowymi. Czytam ją i na bieżąco wypróbowuję prezentowane w niej rozwiązania.

Roboty sieciowe to takie sprytne programy, które przeszukują internet w poszukiwaniu informacji. O  tym jakich informacji poszukuje i co z nimi robi dany robot, decyduje jego twórca. Istnieją różne rodzaje robotów, roboty indeksujące przeszukują Internet strona po stronie i zapisują ich zawartość w  specjalnych bazach danych, istnieją też roboty przemierzające Internet w poszukiwaniu konkretnych informacji, nazywane są harvesterami – przeszukują one strony internetowe w poszukiwaniu np. adresów e-mail, zapisują w swoich bazach ceny produktów sprzedawanych w sklepach internetowych i wiele innych danych, na które jest akurat zapotrzebowanie.

Roboty sieciowe to również ciemna strona internetu, gdyż celem wielu z nich jest przede wszystkim spamowanie stron internetowych, w których użytkownicy mogą zamieszczać komentarze lub w inny sposób brać udział w tworzeniu strony – roboty spamerskie wykorzystują formularze, przeznaczone dla użytkowników danej strony, do umieszcza linków do stron o różnej treści. Cele takiego działania są różne, może to być sposób na wypozycjonowanie danej strony w wyszukiwarkach internetowych a może to być sposób na pozyskanie nowych użytkowników, którzy z ciekawości klikną w link zamieszczony przez robota.  Zdarza się również, że linki dodawane przez spamerskiego bota prowadzą do stron, w których kodzie znajduje się oprogramowanie próbujące zdobyć dostęp do komputerów odwiedzających ją internautów.