Otomatik proxy algılama. Kişisel bir web proxy'si oluşturun

1. Giriş

Bu makale PHP'nin standart olmayan kullanımını tartışacaktır: sanal bir proxy sunucusu olarak kullanılabilecek trafiği sıkıştıran bir PHP betiği oluşturmak için. PHP cephesinin profesyonellerinin burada yeni bir şey bulması pek olası değil: php'nin bu uygulaması benim bilgim değil ve hiçbir özel php işlevi kullanılmıyor. Bu makalenin geri kalanı, internette gezinirken kilo-mega-gigabaytlardan tasarruf etmenin yeni bir yolunu öğrenecek. Girişimci biri bu makaleyi okuduktan sonra yarın megabaytlarını biriktirmeye başlarsa şaşırmayacağım. Özellikle bu sanal proxy'nin şeffaf çalışması için bir şema oluşturmayı öğrendikten sonra.

Çevirmeli ağ gençliğimin ilk günlerinde, modemler sıkıştırılmış veri alışverişi yaparak, bir zip dosyası indirmekten daha hızlı internette gezinme hızlarıyla sonuçlandı. Böylece istemci, sıkıştırma sırasında modem işlemcilere yüklenen yük nedeniyle zamandan ve paradan tasarruf etti. Başka zamanlar geldi: çevirmeli ağ, kiralık hatların saldırısı altında yavaş yavaş zemin kaybediyor. Ve burada, kural olarak, bir başkasının işlemci gücü üzerinde herhangi bir trafik sıkıştırmasından söz edilmez: trafik, bir bayta sıkıştırılmamış orijinal biçiminde gider.
(eğer buna dikkat edilmezse
sunucu). Ama sıkılabilir!..

Bunu yapmak için, tarayıcı ile web sunucusu arasında, modem gibi tüm gelen (tarayıcı için gelen) trafiği sıkıştıracak başka bir bağlantıya ihtiyacımız var. Bu bağlantı, uzak bir web sunucusunda normal görünümlü bir php betiği olacaktır. Özel olarak oluşturulmuş bir isteğe yanıt olarak, ihtiyacınız olan sayfayı indirecek ve tarayıcıya sıkıştırılmış bir biçimde verecek olan bu komut dosyasıdır. Bu php betiğinin bulunduğu barındırma için temel gereksinimler: barındırma banner'larının olmaması, CURL ve GZIP kullanma yeteneği (komut dosyasını bir işlev çağrısı ile çalıştırarak bunların kullanılabilirliğini kontrol edebilirsiniz)
phpinfo).

Ara trafik sıkıştırma sisteminin çalışma mekanizmasını daha iyi anlamak için, çalışma teknolojisini daha ayrıntılı olarak ele alalım.

Aşağıdaki şekil, bir sayfa yüklemek için üç seçeneğin bir diyagramını göstermektedir: normal bir arama, bir ara sunucuda veri sıkıştırma ve bir ara sunucuda sayfa sıkıştırma ile şeffaf çalışma. Her durumda ne olduğunu görelim.

2. Tarayıcı sayfasını ağdan alma

2.1. normal arama

Diyelim ki kullanıcı site.com sunucusunda page.html ile ilgileniyor. Adres çubuğuna site.com/page.html URL'sini yazar. Tarayıcı daha sonra ağ üzerinden http://site.com/page.html sayfası için bir http isteği yapar (şekilde soldan ilk ince noktalı ok). Bu isteğe yanıt olarak, site.com web sunucusu tarayıcıya bir http yanıtı ve ardından page.html sayfasının gövdesini gönderir (şekilde - soldan ikinci kalın bir ok). Bundan sonra tarayıcı, alınan sayfanın içeriğini kullanıcıya monitör ekranında görüntüler.

2.2. Bir ara sunucudaki verileri sıkıştırma

Tarayıcı ile site.com web sunucusu arasında verilerin sıkıştırılacağı bir ara webzip.com sunucusunu tanıtalım. page.html sayfasını alma algoritması, tarayıcının sayfayı doğrudan site.com'dan değil, webzip.com aracılığıyla istemesi dışında önceki durumdakiyle aynıdır. Ayrıca, tam boyutlu (sıkıştırılmamış veriler) yalnızca site.com ve webzip.com arasında, tarayıcı ve webzip.com arasında gider, sayfanın gövdesi sıkıştırılmış bir biçimde gider (şekilde - kalın noktalı bir ok, üçüncü ayrıldı). php'nin sayfayı sıkıştırma yeteneklerinin kullanılması nedeniyle, tarayıcı tarafından istenen adresinin http://webzip.com/myzip.php?url=http://site.com/page.html biçimini alacağını unutmayın. Bu isteği alan web sunucusu (webzip.com), myzip.php betiğini çağırır ve bu komut dosyası, bir istekte bulunmak için çağrının get-parametresini ("url" adlı parametre olsun) kullanır. http://site.com /sayfa.html myzip.php betiği, elde edilen sayfayı tarayıcıya sıkıştırılmış bir biçimde verir.

2.3. Bir ara sunucuda sayfa sıkıştırma ile şeffaf çalışma

Bu, tarayıcı ve buna bağlı olarak kullanıcı için sanal sıkıştırma proxy'sinin çalışmasının görünmemesi nedeniyle önceki durumdan farklıdır. Bu, webzip.com ve tarayıcı arasında başka bir bağlantı tanıtılarak elde edilir. Bu bağlantı, diğer şeylerin yanı sıra giden http istek başlıklarını yeniden yazan normal bir http proxy'sidir (örneğin, http://site.com/page.html'den
http://webzip.com/myzip.php?url=http://site.com/page.html).

3. Şeffaf işlemi ayarlayın

3.1. Komut dosyalarını yükleme

Yukarıdakilerin tümünü uygulayan komut dosyalarını buradan indirebilirsiniz. V
üç dosya: myzip.php, func.inc.php, log.php. Birincisi, istemci tarafından erişilen ana dosyadır. İkincisi, birincisi için fonksiyon tanımlarını içerir. Üçüncüsü, proxy işlem istatistiklerini görüntülemek için tasarlanmıştır (bir istatistik sayfası şablonu içerir, özü log.log'dan alınır ve
say.log).

Daha önce de belirtildiği gibi, komut dosyaları PHP, CURL, ZLIB desteği olan ve afiş olmayan herhangi bir barındırmaya yerleştirilmelidir. İnternette bu, ayda 30 rubleye kolayca bulunabilir.

Ücretli barındırmadan korkmayın - kolayca öder. Örneğin, 0,05 $/MB öderseniz, barındırma için ödeme yapmak için 20 kayıtlı megabayta ihtiyacınız olacak, o zaman avantaj. Tecrübelerime göre, bu yaklaşık 100-150 MB web sörfüdür (ortalama sıkıştırma 4-7 kattır, ancak 12'ye kadar bulunabilir).

Tarayıcıya aşağıdaki adresi yazarak doğru işlemi kontrol edebilirsiniz: http://webzip.com/myzip.php?url=http://ya.ru. Her şey doğru yapılırsa, Yandex sayfası biraz değiştirilmiş bir başlıkla yüklenir
(Başlık).

3.2. proksomitron kurulumu

Kullanılmış Proxomitron ver. Naoko 4.4 (http://www.proxomitron.ru).

Bu nedenle, proxomitron'dan web proxy'leri ile şeffaf çalışma, başka bir deyişle, tarayıcıdan giden URL'lerin gizli bir dönüşümü olasılığını elde etmek istiyoruz. Bunu yapmak için proxomitronun ana penceresinde "Başlıklar" düğmesine basın. Açılan pencerede (“HTTP Başlık Filtreleri” / “HTTP Başlık Filtreleri”), “URL: Alias ​​​​Redirector (Out)” satırına gidin, seçin. "Düzenle" düğmesine tıklayın
genişletilmiş pencerede (“Başlık filtresi düzenleyicisi” / “HTTP Üstbilgisi filtresi düzenleyicisi”) alanları aşağıdaki gibi doldurun (birincisi hariç tümü):

HTTP başlığı (HTTP Başlığı) (!değiştirmeyin!) URL: Alias ​​​​Redirector (Out)
URL Eşleşmesi (URL Eşleşmesi) *
Başlık Değeri Eşleşmesi *
Yedek metin $RDIR(http://webzip.com/myzip.php?url=\u)
http://webzip.com/ sitenizin URL'si olduğunda, myzip.php siteye yüklediğiniz komut dosyasının adıdır.

Bütün mesele son satırdadır: proxomitron, tarayıcıdaki herhangi bir URL'yi ("\u" parametresi) http://webzip.com/myzip.php?url=\u olarak değiştirir. $RDIR yerine $JUMP komutunu yazarsanız, proxomitronun çalışması yarı saydam olacaktır: tarayıcı yeni bir URL'ye yönlendirilecektir. $RDIR kullanılırsa, yönlendirme tarayıcı için şeffaf olacaktır.

Sırayla “Tamam”, “Uygula”, “Tamam” ı tıklayarak pencereleri kapatın. Bu işlemin bir daha tekrarlanmaması isteniyorsa, ayarları kaydediniz.

Tarayıcıda, IP=127.0.0.1 ve bağlantı noktası 8080 (varsayılan olarak proxy tarafından dinlenen bağlantı noktası) olan bir proxy sunucusu belirleriz.
Sayfa başlıklarını değiştirerek (yeni