Comments on: robots.txt dosyası ne işe yarar? http://www.acemiblogcu.com/robotstxt-dosyasi-ne-ise-yarar/ Blog'a yeni başlayanlara amatör ruhu ile destek :) Thu, 14 Jan 2010 20:02:34 -0800 http://wordpress.org/?v=2.8.5 hourly 1 By: Dark http://www.acemiblogcu.com/robotstxt-dosyasi-ne-ise-yarar/comment-page-1/#comment-120071 Dark Tue, 28 Jul 2009 19:37:12 +0000 http://rastgele.dreamhosters.com/wp/?p=16#comment-120071 Çok yararlı bi döküman saol. Çok yararlı bi döküman saol.

]]> By: TECHNOLOG http://www.acemiblogcu.com/robotstxt-dosyasi-ne-ise-yarar/comment-page-1/#comment-120040 TECHNOLOG Sat, 04 Jul 2009 14:14:01 +0000 http://rastgele.dreamhosters.com/wp/?p=16#comment-120040 aşağıdaki siteden robots.txt inizi oluşturabilirsiniz. http://www.mcanerin.com/en/search-engine/robots-txt.asp aşağıdaki siteden robots.txt inizi oluşturabilirsiniz.

http://www.mcanerin.com/en/search-engine/robots-txt.asp

]]> By: MJ12bot virus ve saldýrý botu - PleskDestek Platform http://www.acemiblogcu.com/robotstxt-dosyasi-ne-ise-yarar/comment-page-1/#comment-119773 MJ12bot virus ve saldýrý botu - PleskDestek Platform Sat, 20 Dec 2008 16:39:08 +0000 http://rastgele.dreamhosters.com/wp/?p=16#comment-119773 [...] ye eklerseniz sorununuz kalmaz. User-agent: MJ12bot Disallow: / robost.txt hakkýnda detaylý bilgiye buradan ulaþabilirsiniz. .htaccess olarak çözümü : %{HTTP_USER_AGENT} MJ12bot/v1.0.8 [NC] RewriteRule ^.* [...]

]]> By: gevv http://www.acemiblogcu.com/robotstxt-dosyasi-ne-ise-yarar/comment-page-1/#comment-119602 gevv Wed, 01 Oct 2008 12:23:40 +0000 http://rastgele.dreamhosters.com/wp/?p=16#comment-119602 simap eklentisinin oluşturduğu robost txt dosyası # BEGIN XML-SITEMAP-PLUGIN Sitemap: http://www.site.com/sitemap.xml.gz # END XML-SITEMAP-PLUGIN sadece bunlar yazılı dosyada ben ek olrak bir klasöre erişimi engellenek istiyorum bu yazının altına User-agent: * Disallow: /dizin-adi/ eklemek yeterli olurmu ya da ilgili klasörün içinende robots.txt dosyası oluşturup User-agent: * Disallow: / eklemeliyim simap eklentisinin oluşturduğu robost txt dosyası

# BEGIN XML-SITEMAP-PLUGIN
Sitemap: http://www.site.com/sitemap.xml.gz
# END XML-SITEMAP-PLUGIN

sadece bunlar yazılı dosyada ben ek olrak bir klasöre erişimi engellenek istiyorum bu yazının altına
User-agent: *
Disallow: /dizin-adi/ eklemek yeterli olurmu ya da ilgili klasörün içinende robots.txt dosyası oluşturup User-agent: *
Disallow: / eklemeliyim

]]> By: Arayıpta Bulamadığınız HerÅŸey » Blog ArÅŸivi » MJ12bot virus ve saldırı botu http://www.acemiblogcu.com/robotstxt-dosyasi-ne-ise-yarar/comment-page-1/#comment-62316 Arayıpta Bulamadığınız HerÅŸey » Blog ArÅŸivi » MJ12bot virus ve saldırı botu Sat, 08 Mar 2008 16:58:25 +0000 http://rastgele.dreamhosters.com/wp/?p=16#comment-62316 [...] eklerseniz sorununuz kalmaz. User-agent: MJ12bot Disallow: / robost.txt hakkında detaylı bilgiye buradan [...] [...] eklerseniz sorununuz kalmaz. User-agent: MJ12bot Disallow: / robost.txt hakkında detaylı bilgiye buradan [...]

]]> By: Wp için SEO | Net ve Web Serüveni http://www.acemiblogcu.com/robotstxt-dosyasi-ne-ise-yarar/comment-page-1/#comment-59674 Wp için SEO | Net ve Web Serüveni Fri, 22 Feb 2008 23:00:06 +0000 http://rastgele.dreamhosters.com/wp/?p=16#comment-59674 [...] blogunuzun hangi bölümlerinin indeksleyeceğini belirlemenize yardımcı olan bir sistem. Konu, robots.txt dosyası ne işe yarar? isimli yazıda anlatılmış, tekrar incelemeye gerek [...] [...] blogunuzun hangi bölümlerinin indeksleyeceğini belirlemenize yardımcı olan bir sistem. Konu, robots.txt dosyası ne işe yarar? isimli yazıda anlatılmış, tekrar incelemeye gerek [...]

]]> By: web-tasarim.com Word Pr » Blog Archive » MJ12bot virus ve saldýrý botu http://www.acemiblogcu.com/robotstxt-dosyasi-ne-ise-yarar/comment-page-1/#comment-59079 web-tasarim.com Word Pr » Blog Archive » MJ12bot virus ve saldýrý botu Tue, 19 Feb 2008 02:12:54 +0000 http://rastgele.dreamhosters.com/wp/?p=16#comment-59079 [...] hakkýnda detaylý bilgiye buradan [...] [...] hakkýnda detaylý bilgiye buradan [...]

]]> By: MJ12bot virus ve saldýrý botu - Webmaster Forumu http://www.acemiblogcu.com/robotstxt-dosyasi-ne-ise-yarar/comment-page-1/#comment-59056 MJ12bot virus ve saldýrý botu - Webmaster Forumu Tue, 19 Feb 2008 00:11:34 +0000 http://rastgele.dreamhosters.com/wp/?p=16#comment-59056 [...] MJ12bot Disallow: / robost.txt hakkýnda detaylý bilgiye buradan ulaþabilirsiniz. .htaccess olarak çözümü : [...]

]]> By: Meta Tag nedir? | WEBGÜNLÜK http://www.acemiblogcu.com/robotstxt-dosyasi-ne-ise-yarar/comment-page-1/#comment-56034 Meta Tag nedir? | WEBGÜNLÜK Tue, 05 Feb 2008 14:44:36 +0000 http://rastgele.dreamhosters.com/wp/?p=16#comment-56034 [...] alınmıyor. Bu kodun alternatifi ise robots.txt dosyası kullanmaktır, detaylı bilgiye buradan [...] [...] alınmıyor. Bu kodun alternatifi ise robots.txt dosyası kullanmaktır, detaylı bilgiye buradan [...]

]]> By: mudem06 http://www.acemiblogcu.com/robotstxt-dosyasi-ne-ise-yarar/comment-page-1/#comment-44033 mudem06 Sun, 02 Dec 2007 16:26:59 +0000 http://rastgele.dreamhosters.com/wp/?p=16#comment-44033 Arama motorlarında meta tagların önemi hakkında biraz bilgi vereyim sizlere: Örümcekler ,sitenizi gezerken sayfa kodlarını yukardan başlayarak aşağıya doğru satır satır okuyup işlerler. Örümcekler özellikle kaynak kodunun üst kısmında bulunan satırları daha çok dikkate alırlar. Gerçek hayatta ki bir komposizyonu düşünürseniz ,komposizyonda asıl anlatılmak istenen konu giriş bölümündedir. gelişme ve sonuç bölümleri asıl konuyu destekleyici ve daha az öneme sahip bölümlerdir. Arama motoru programlayıcılarıda bunu düşünüp, şu mantığı geliştirmişlerdir. Bir sayfanın asıl içeriği yada anlatılmak istenen bölümü üst bölümleridir.Bu sebeble bir sayfada yukarıdan aşağı gittikçe ve soldan sağa dogru gittikçe içeriğe verilen önemin azaldığını varsaymaktadırlar. Eger sitenizin en önemli olan bölümü olan üst taraflarına gereksiz meta tag doldurursanız sitenizin asıl vurgulamak istediğiniz bölümlerine verdiginiz önemi azaltmış olursunuz. Google gibi büyük arama motorları zaten pek fazla önemsememektedir (bu da yine bir teori ) kesin bilinmiyor ama bir sayfa için en iyi Meta tag SEO Optimization için; title description keyword charset=iso-8859-9 yeterli meta taglardır.Siz aksini belirtmedikçe zaten sitenideki linkleri index, follow yapmaktadırlar. Sitenizin belli bir pr degeri yoksa yada çok sık güncellenmiyorsa, siz istediginiz kadar "revisit-after=1 days" yapın arama motorları gelmiyor. Arama motorlarında meta tagların önemi hakkında biraz bilgi vereyim sizlere:
Örümcekler ,sitenizi gezerken sayfa kodlarını yukardan başlayarak aşağıya doğru satır satır okuyup işlerler. Örümcekler özellikle kaynak kodunun üst kısmında bulunan satırları daha çok dikkate alırlar.
Gerçek hayatta ki bir komposizyonu düşünürseniz ,komposizyonda asıl anlatılmak istenen konu giriş bölümündedir. gelişme ve sonuç bölümleri asıl konuyu destekleyici ve daha az öneme sahip bölümlerdir.

Arama motoru programlayıcılarıda bunu düşünüp, şu mantığı geliştirmişlerdir. Bir sayfanın asıl içeriği yada anlatılmak istenen bölümü üst bölümleridir.Bu sebeble bir sayfada yukarıdan aşağı gittikçe ve soldan sağa dogru gittikçe içeriğe verilen önemin azaldığını varsaymaktadırlar. Eger sitenizin en önemli olan bölümü olan üst taraflarına gereksiz meta tag doldurursanız sitenizin asıl
vurgulamak istediğiniz bölümlerine verdiginiz önemi azaltmış olursunuz.
Google gibi büyük arama motorları zaten pek fazla önemsememektedir (bu da yine bir teori ) kesin bilinmiyor ama bir sayfa için en iyi
Meta tag SEO Optimization için;
title
description
keyword
charset=iso-8859-9

yeterli meta taglardır.Siz aksini belirtmedikçe zaten sitenideki linkleri index, follow yapmaktadırlar. Sitenizin belli bir pr degeri yoksa yada çok sık güncellenmiyorsa, siz istediginiz kadar “revisit-after=1 days” yapın arama motorları gelmiyor.

]]>