[Klasa] Scout 1.8.0, Detekcja OS, Browsera i geolokalizacja Opcje

[Bastion]

Final 1.0.0 :

Wykrywa ponad 3mln adresów IP z bazy OpenGEO, warto zaznaczyc ze
baza CSV OpenGEO zajmuje 300MB a baza ScoutGEO 300kB i zawiera
dodatkowe informacje o polozeniu geograficznym w systemie BL i XY :

Działa tak :

Z automatyczna detekcja IP / User agent :
Demo : http://www.vertis.com.pl/demo/scout/examples/example01.php

[PHP] pobierz, plaintext 
<?php
 
	require_once('../libs/class5.scout.php');
 
	$scout = new Scout;
 
	print '<b>Podstawowe informacje :</b>';
	print '<br />User IP : '.	   $scout->get_ip();
	print '<br />User Proxy : '.	$scout->get_proxy();
	print '<br />User UserAgent : '.$scout->get_useragent();
 
	print '<br /><br /><b>System operacyjny : </b>';
	print '<br />Nazwa : '.		 $scout->os('name');
	print '<br />Wersja : '.		$scout->os('version');
	print '<br />Pełna : '.		 $scout->os();
 
	print '<br /><br /><b>Przeglądarka : </b>';
	print '<br />Nazwa : '.		 $scout->browser('name');
	print '<br />Wersja : '.		$scout->browser('version');
	print '<br />Dodatek : '.	   $scout->browser('addon');
	print '<br />Pełna : '.		 $scout->browser();
 
	print '<br /><br /><b>Geolokalizacja : </b>';
	if ($scout->is_geo())
	{
		print '<br />(BL) North : '.	$scout->geo('n');
		print '<br />(BL) East : '.	 $scout->geo('e');
		print '<br />(XY) X : '.		$scout->geo('x');
		print '<br />(XY) Y : '.		$scout->geo('y');
		print '<br />Miasto : '.		$scout->geo('town');
		print '<br />Województwo : '.   $scout->geo('province');
	} else
	{
		print '<br />... brak adresu w bazie danych';
	}
 
?>
[PHP] pobierz, plaintext 

Lub z wymuszeniem :
Demo : http://www.vertis.com.pl/demo/scout/examples/example02.php

[PHP] pobierz, plaintext 
<?php
 
	require_once('../libs/class5.scout.php');
 
	$scout = new Scout;
 
	$scout -> set_ip('212.126.1.2');
	$scout -> set_useragent('Mozilla/4.0 (compatible; MSIE 7.0b; Windows NT 6.0)');
 
	print '<b>Podstawowe informacje :</b>';
	print '<br />User IP : '.	   $scout->get_ip();
	print '<br />User Proxy : '.	$scout->get_proxy();
	print '<br />User UserAgent : '.$scout->get_useragent();
 
	print '<br /><br /><b>System operacyjny : </b>';
	print '<br />Nazwa : '.		 $scout->os('name');
	print '<br />Wersja : '.		$scout->os('version');
	print '<br />Pełna : '.		 $scout->os();
 
	print '<br /><br /><b>Przeglądarka : </b>';
	print '<br />Nazwa : '.		 $scout->browser('name');
	print '<br />Wersja : '.		$scout->browser('version');
	print '<br />Dodatek : '.	   $scout->browser('addon');
	print '<br />Pełna : '.		 $scout->browser();
 
	print '<br /><br /><b>Geolokalizacja : </b>';
	if ($scout->is_geo())
	{
		print '<br />(BL) North : '.	$scout->geo('n');
		print '<br />(BL) East : '.	 $scout->geo('e');
		print '<br />(XY) X : '.		$scout->geo('x');
		print '<br />(XY) Y : '.		$scout->geo('y');
		print '<br />Miasto : '.		$scout->geo('town');
		print '<br />Województwo : '.   $scout->geo('province');
	} else
	{
		print '<br />... brak adresu w bazie danych';
	}
 
?>
[PHP] pobierz, plaintext 

a pobrać można jak zwykle tu : http://www.vertis.com.pl/

Ten post edytował Bastion 15.07.2006, 15:43:45

[Vomit]

Bastion: skad brales dane dla ScoutGeo ?

[Bastion]

z www.opengeo.pl - niestety ich CSV to 300MB wiec trzeba bylo uszczuplic,
a jesli pytasz o wspolrzedne geograficzne - to z roznych rzeczy - atlasy, encykloipedie, internet
bez obrazy ale niektorych wiosek trudno znalesc jakies wspolrzedne bylo nawet ze dzwonilem do jakiejs miejscowosci o wspolrzedne bo nigdzie nie szlo znalesc ;]

Ten post edytował Bastion 25.02.2006, 14:40:59

[vieri_pl]

Bastion Ty na prawdę poswiecasz sie swojej pracy. Co rusz nowe projekty i klasy

Brawo !

[hwao]

Bastion Ty na prawdę poswiecasz sie swojej pracy. Co rusz nowe projekty i klasy

Brawo !

yhy, brawo brawo popieram

Widac ze sie chlopak uczy.

Bardzo ciekawy pomysl, ale jednka rozdzielil bym te klasy na 2...
1. analiza danych o userze z user_agenta
2. lokalizacja skad jest po ip

[Bastion]

@hwao : szczerze tez nad tym myslalem, ale padlo na monolit - w nastepnym relase bedzie specjanle narzedzie do dopasowania siatki geolokalizacyjnej do mapy bitowej mapy Polski, zeby latwo mozna bylo nanosic punkty B,L

@vieri_pl: staram sie powoli juz nabiera ksztaltow ten CMS o ktorym wspominalem

[Vomit]

class Jolantha?
Domyslam sie skad taka nazwa, ale za co bedzie odpowiadala ?

[Bastion]

klasa odpowiedzialna za bezpieczenstwo i poprawnosc przekazywania danych, wykrywanie prob atakow, podawania blednych akcji, kombinowanie z parametrami, logowanie, powiadamianie admina.... a czemu Jolantha ? Bo bedzie taka sama jak moja żonka - nic sie przed nia nie ukryje

Ten post edytował Bastion 25.02.2006, 18:57:45

[FiDO]

Hehe

Z nieba mi spadles z ta klasa.. wlasnie ostatnio sie zastanawialem nad jakims parserem user_agent'a. Teraz juz nie bede musial Za jakis czas (jak juz bede na etapie, ze bede tego potrzebowal) potestuje ja troche glebiej i podziele sie dokladniejszymi uwagami.

[TomASS]

Nie wiem dlaczego, ale ex01 pokazuje ok:

System operacyjny :
Nazwa : Windows
Wersja : XP
Pełna : Windows XP

Miasto : Wrocław
Województwo : dolno¶l±skie

A ex02:

System operacyjny :
Nazwa : Windows
Wersja : Vista
Pełna : Windows Vista

Miasto : Poznań
Województwo : wielkopolskie

Może ja się nie znam :/

[Bastion]

ex02 - wyswietla wymoszony adres ip i useragenta - wiec jest ok

Kod

    $scout -> set_ip('212.126.1.2');
    $scout -> set_useragent('Mozilla/4.0 (compatible; MSIE 7.0b; Windows NT 6.0)');

@FiDO cieszy mnie to ogromnie

Ten post edytował Bastion 25.02.2006, 23:49:43

[TomASS]

W takim razie Panowie czapki z głów.... kawał dobrej robty.

[FiDO]

Ok potestowalem to troche dluzej i mam nastepujace uwagi:

1) klasa do IP faktycznie powinna byc osobno.. mi np. ta funkcjonalnosc jest kompletnie niepotrzebna, a troche tego kodu do tego jest (no i baza ip'kow)

2) przydaloby sie wykrywanie botow wyszukiwarek (+ jakas metoda isBot() )

Narazie tyle ;]

[Bastion]

Ad1) Klasa rozdzielona w wersji CVS
Ad2) Prace w toku od wczoraj

[dragomir]

hm, mieszkam sobie w poznaniu, a to chyba duze miasto, i z pierwszego przykladu mi wyszlo, ze nie ma tej lokacji w bazie

[Bastion]

jesli nie ma twojego adresu w bazie danych to nie ma musialbys zarejestrowac swoje IP w OpenGEO : http://www.opengeo.pl/ .

[spenalzo]

A mi po raz pierwszy od dawna ten skrypt pokazał (korzystam z neozdrady), że faktycznie mieszkam w Poznaniu a nie w jakiejś dziurze na północy polski

Miasto : Poznań
Województwo : wielkopolskie

[Bastion]

postanowilem rozbic klase na 3 moduly :

Scout - przegladarki / systemy operacyjne / boty
GeoScout - geolokalizacja
MobileScout - telefony komorkowe / urzadzenia przenosne ( jestem na etapie zbierania USER_AGENTow roznych marek i modeli - oraz wybranych parametrow - wlasnie jakie parametry bylyby intresujace do rozpoznania ? chodzi o to czy np. scout ma tez podwac np. rozdzialke wyswietlacza etc? czy jest to raczej zbedne )

Niemniej cala trojka bedzie dostepna w jednej paczce Jakies sugestie?

Ten post edytował Bastion 2.03.2006, 14:09:16

[xarr]

Ja mam podobny zestaw klas (bez wykrywania regionu, tylko panstwa na zasadzie bazy ipkow oraz ustawien jezykowych browsera).

Rozpiska tego wyglada mniej wiecej tak:

klasa User (pobiera podstawowe dane, czyli user_agent oraz IP)
klasa Identification dziedziczy po User (rozpoznaje tylko czy to bot, czy nie)
klasa BotIdentification dziedziczy po Identification (probuje zidentyfikowac bota na podstawie user_agenta oraz bazki z botami oraz ustawia odpowiednia flage: zly, neutralny, niezidentyfikowany robal )
klasa UserIdentification dziedziczy po Identification (tutaj oczywiscie szczegolowe info: typ,nazwa,wersja przegladary, os, kraj)

Pisane to bylo jakies 10 mc temu i dzisiaj rowniez nie jestem przekonany, co do poprawnego rozbicia tego na tyle klas, ot chociazby Identification, ktora odpowiada tylko ze stwierdzenie, czy mamy do czynienia z botem, czy userem, ew. czy bardziej prawdopodobne jest, ze jest to bot/user. Nie jestem tez pewny, czy w ogole dobrym pomyslem jest tutaj dziedziczenie, a przynajmniej w takiej postaci. Co sadzicie?

Bastion w tym threadzie wspomnial o kilku ciekawych rzeczach, ktorych u mnie brakuje. Ot, te regiony i detekcja telefonu komorkowego. To dla mnie bodziec by dopisac linijke w swoim ToDo

Co do twoich pytan nadal uwazam, ze tego typu skrypty pelnia role glownie statystyczna. Jak tylko ktos probuje te wszystkie detekcje wykorzystac do sposobu ladowania takiego, czy innego layoutu (bo browser x kuma czesc css3, a y czesc css2) to kopie sobie dolki, w ktore kiedys sam wpadnie. Uwazam, ze zbieranie tak bardzo szczegolowych informacji o parametrach wykrytej komorki (wyswietlacz) jest zbedne. Do niczego Ci sie to raczej nie przyda. Informacja, ze jest to komorka styka, a jak jeszcze dorzucisz jaki model (Nokia 6210) to juz "swiat i ludzie" (z takiej informacji, przy pomocy google i tak zawsze bedziesz w stanie wyszukac wszystkie szczegoly odnosnie danego modelu )

Odnosnie sugestii to dokladnie nie przygladalem sie twojej paczce, ale nie wspominales tu o probie detekcji innych rzeczy zainstalowanych u usera. Ot jakies pluginy, enabled js, itd. Za to wprawdzie glownie odpowiadac bedzie javascript (bo get_browser pokazuje tylko mozliwosci browsera), ale moze bedziesz mial checi i uda Ci sie cos fajnego znalezc/napisac. Przyznam sie, ze ja kiedys poleglem na tym.

Pozdrawiam

[sztosz]

Pierwsza klasa:

Podstawowe informacje :
User Proxy :
User UserAgent : TERMINATOR

System operacyjny :
Nazwa :
Wersja :
Pełna :

Przeglądarka :
Nazwa :
Wersja :
Dodatek :
Pełna :

Geolokalizacja : 1394331646
Miasto : Poznań
Województwo : wielkopolskie

Druga:

Podstawowe informacje :
User Proxy :
User UserAgent : Mozilla/4.0 (compatible; MSIE 7.0b; Windows NT 6.0)

System operacyjny :
Nazwa : Windows
Wersja : Vista
Pełna : Windows Vista

Przeglądarka :
Nazwa : Internet Explorer
Wersja : 7.0b
Dodatek :
Pełna : Internet Explorer 7.0b

Geolokalizacja : 3565027586
Miasto : Poznań
Województwo : wielkopolskie

Co do pierwszej klasy:
UserAgent jest OK.
Chyba nie zgadza sie lokalizacja. Jestem neozdrajcą z Wałbrzycha, więc moja centrala to chyba Wrocław, ale moge się mylić.

Co do drógiej:
UserAgent wymuszony więc OK.

Ale czemu Vista? Mam win2003, nLitniętego ale nadal 2003. I czemu IE 7? Korzystam z Firefoxa z mnóstwem swietnych pluginów, chociaż owszem mam zainstalowane IE 7 2nd Preview. czy to może dlatego że win2003 + IE 7 w chwili obecnej jest teoretycznie niemożliwe i trzeba sie w podmianę plików bawić, o refleksie nie wspominajac?
No i ten poznań

Ten post edytował sztosz 2.03.2006, 15:55:11