Google web tarama botlarından sitenizde yer alan klasörlerinizi korumak istiyorsanız robots.txt dosyasını kullanmalısınız. Örneğin bir klasör (örnek olarak seo klasörü olsun) ve içerisinde yer alan tüm dosyalarınızı google botlarından bloklamak için yazmanız gereken kod :

User-agent: Googlebot
Disallow: /seo

Dosya tiplerini bloklamak için : ( Bu kod ile .gif dosyalarını indekslemesin diyoruz google botlarına)

User-agent: Googlebot
Disallow: /*.gif$

Dinamik web sayfalarını bloklamak için :

User-agent: Googlebot
Disallow: /*?

Ayrıca indexlenmesini istemediğiniz tekil sayfalar varsa metatag bölümüne aşağıdaki kodu ekleyerek botların o sayfayı indekslemesini önleyebilirsiniz :

<meta name=”ROBOTS” content=”NOINDEX, NOFOLLOW” />

Önemli Not : robots.txt dosyanızı sadece root klasörünüze atmalısınız. Alt klasörlere koymamalısınız! Tekil dosyalar için yukarıdaki metatagı kullanmanız faydalı olacaktır. Eğer robots.txt kullanmazsanız google botları varsayılan olarak sitenize ulaşabildiği (linklenmiş) tüm sayfa ve klasörleri indeksleyecektir.

Bir web tasarımcısının mutlaka aşina olması gereken bir tarayıcı, HTTP, FTP ve HTML gibi Web’in protokol ve dillerini belirleyen, Evrensel Kaynak Belirleyici (URL) sistemini işleten, yani tüm dünya üzerindeki web adreslerini sağlayan ve bu listeyi üstlenici firmalar aracılığıyla hergün tüm dünyadaki internet omurga işletmecilerine ulaştıran uluslararası kurum olan W3C’nin kendi tarayıcı programı olan Amaya’dır. Bu program, sadece Internet tarayıcı değil, aynı anda HTML sayfaları oluşturmakta da kullanabileceğiniz bir HTML editörüdür. Birden fazla HTML sayfasını açabilen, Internet’e bağlı iken bir yandan da sayfa tasarımına olanak veren Amaya, HTML’i, olduğu gibi anlayıp, ekranda gösteren tek tarayıcı programıdır. NN ve IE, HTML’e kendi yorumlarını katarken, Amaya, sayfalarınızın gerçek HTML değerlerini ekrana getirecektir. Bu program ücretsiz olarak http://www.w3C.org adresinden indirilebilir. Bu programı edinmek, ve tasarlayacağınız Web sayfalarını bu programla sınamak, tasarımcı olarak sizi diğer tarayıcıların sayfanızı nasıl göstereceğini belirleme zorunluğundan kurtarmaz. Amaya, bir HTML sayfasının sınanacağı ilk tarayıcı olmalıdır. Ama tasarımcı olarak, sayfanızın NN veya IE’de “nasıl durduğunu” belirlemek zorundasınız. Ayrıca Amaya, HTML standardının parçası olmayan, NCC ve MS tarafından kendi tarayıcı programlarının bir ilave niteliği olarak ortaya attıkları Java, Javascript, VBScript gibi programları tanımamaktadır. HTML editörü olarak Amaya, bu alana yeni atılan bir tasarımcının HTML’i öğrenmesine ve uygulamasına olanak sağlamakla birlikte, çok yetenekli ve scripting programları oluşturabilen diğer editing programlarına oranla basit kalabilir.

Fujitsu Siemens Computers PRIMERGY RX600 S4, SPEC web testlerinde 47,504 puan ile tüm zamanların en yüksek derecesini elde ederek dünya rekoru kırdı.

Fujitsu Siemens Computers, Intel’in çok çekirdekli Dunington işlemci ailesini kullandığı yeni sunucusu PRIMERGY RX600 S4’ü kurumsal veri merkezlerinin yüksek performans ihtiyacını göz önünde bulundurarak üretti.

Sağlamlığı ve zengin işlevleri nedeniyle büyük kuruluşların tercihi olan PRIMERGY RX600 S4, gerçekleştirilen SPECweb2005 testinde tüm zamanların en yüksek derecesini yaparak rakiplerine meydan okudu.

4U raf sunucusu boyutlarında üretilen PRIMERGY RX600 S4, az yer kaplamasına rağmen sahip olduğu çok sayıda özellik ve teknolojisiyle en ağır kurumsal görevlerin üstesinden zorlanmadan geliyor. Fujitsu Siemens Computers, sunucunun gerçek gücünü sergilemek amacıyla Almanya, Paderborn’daki test ve ölçümleme laboratuvarlarında dünyaca kabul edilen ölçümleme standartı olan SPECweb testlerini bu makina üzerinde uyguladı.