Reklamlar

reklam reklam

Gönderen Konu: İnternet Örümcekleri  (Okunma sayısı 10665 defa)

0 Üye ve 1 Ziyaretçi konuyu incelemekte.

Çevrimdışı cncturk

  • http://www.facebook.com/cncturkmakina
  • USTA
  • ****
  • İleti: 368
  • +16/-0
  • Cinsiyet: Bay
    • CNCTURK MAKİNA
İnternet Örümcekleri
« : Ekim 18, 2008, 09:23:28 ÖÖ »
Şu bahsi geçen arama motorlarına endeksli çalıştığını düşündüğüm örümceklerle alakalı bilgisi olan varsa kısaca paylaşabilirmi?

Çevrimdışı pinacoloda

  • Programcı
  • ***
  • İleti: 100
  • +5/-0
  • Cinsiyet: Bay
Ynt: İnternet Örümcekleri
« Yanıtla #1 : Nisan 27, 2009, 01:50:19 ÖS »
örümcek ne ya ilk defa duydum solucan torojan tamamda bu ilk :D

Çevrimdışı cncturk

  • http://www.facebook.com/cncturkmakina
  • USTA
  • ****
  • İleti: 368
  • +16/-0
  • Cinsiyet: Bay
    • CNCTURK MAKİNA
Ynt: İnternet Örümcekleri
« Yanıtla #2 : Nisan 27, 2009, 08:13:06 ÖS »
bu konu ile ilgili şu ufak bilgiyi buldum umarım kapıyı aralar  ;)

Bir blogunuz varsa ve/veya içerik üreten herhangi bir siteye sahipseniz bu siteniz büyük ihtimalle örümcekler (bot) tarafından ziyaret ediliyordur. Özellikle arama motorları sayfalarınız indekslemek için bu yöntemi kullanıyorlar. Örnek olarak Google’ın örümceği Googlebot periyodik olarak sitenizi ziyaret ediyordur. Bu aslında iyi bir şey. Bu örümceklere yardımcı olmak amacı ile de robots.txt adlı bir dosya kullanılır.

Çevrimdışı efemak

  • Turkeycnc.com Üyesi
  • *
  • İleti: 8
  • +0/-0
Ynt: İnternet Örümcekleri
« Yanıtla #3 : Şubat 20, 2014, 11:21:07 ÖÖ »
robots.txt bir site çok önemlidir. örneklerini internette bulabilirsiniz. arama motorlarına üstte çıkmak için mutlaka bulunması gerekir.