Estás navegando como visitante. Por favor Registrate y Logueate para poder participar de ventajas como postear en el foro, Solicitar Ayuda, Ver Enlaces, Ver Imagenes. Registrate con nosotros clickeando AQUÍ.    
Registrarse    Identificarse   Blogs
Anuncios Internos

Quieres ser Moderador/a. Si estas interesado/a, lee la info sobre ésto, haciendo Click
Promociona tu web AQUÍ

En ésta web está expresamente prohibido, publicar enlaces de descargas de material protegido por la ley, asi como seriales, cracks, parches, programas o juegos pirateados sin el consentimienteo del autor, en cuyo caso se debará exibir dicha autorización para legitimizar la descarga. Si algun usuario incumple esta norma, sera
eliminado junto a todos sus mensajes.


Portal » Índice general » Zona Webmasters » Tutoriales Webmaster




Nuevo tema Responder al tema  [ 1 mensaje ] 
{ VISITS } Vistas: 616  { VISITS } Favoritos: 0  | { VISITS } Seguidores: 1 
Seguidores: buthas
 
Autor Mensaje
 Asunto: Creación Y Definición Del Archivo Robots.txt
 Nota Publicado: 24 Abr 2010 11:29 


Desconectado
Moderador Global
Moderador Global
Avatar de Usuario

Mensajes: 136

Todos mis aportes


Nivel: 10

HP: 0 / 230
0 / 230 0 / 230 0 / 230
MP: 110 / 110
110 / 110 110 / 110 110 / 110
EXP: 136 / 142
136 / 142 136 / 142 136 / 142

Karma: 25

Sexo:
Masculino



He dado: 26 Gracias
Recibidas: 25 Gracias
Blog: Ver blog (0)
La creación y definición del archivo robots.txt sirve para restringir o habilitar el acceso a un sitio web, blog, etc., a todos los robots de los motores de búsqueda que rastrean un sitio web, blog, etc., ya que estos en su mayoría se encuentran automatizados y al intentar acceder a un sitio web, blog, etc., tratan de verificar en primera instancia si existe en la raíz del directorio de los dominios web un archivo txt mas conocido como robots.txt, de acuerdo a como este configurado este archivo uno puede dar paso al rastreo de los dominios web, como así también al bloqueo de ciertos directorios o extensiones que no se consieran relevantes para el posicionamiento en los buscadores, aún que la mayoría de los robots conocidos respetan las directivas que uno puede implementar en el archivo robots.txt, no siempre es así por otros tantos que pueden interpretar el archivo robots.txt de una forma completamente diferente, o peor aún ignorarlo completamente como por ejemplo por los emisores de spam o por algún p… que no tiene nada que hacer en este medio mas que molestar, por otro lado se recomienda en este último caso proteger la información importante, confidencial por llamarlo así de alguna manera por medio de contraseñas.

En la creación y definición del archivo robots.txt sólo se necesita cuando no querés incluir un determinado contenido como para que no lo indexen los motores de búsqueda, ahora si no tenés nada que restringir y vas a permitir una completa indexación de un sitio web, blog, etc., el archivo robots.txt no es para nada necesario, ni agregándolo vacío a la raíz del directorio donde se encuentra alojado el dominio.

En el caso de Google no rastreará ni indexará el contenido de los directorios bloqueados por el archivo robots.txt, sí indexará las url que encuentre en otros sitios web, blog, etc., como así también la url de un sitio web, blog, etc., entre otros datos que estén disponibles públicamente para ser indexados, como el anclaje en los textos de los enlaces que dirijan a un sitio web, blog, etc., o el título que se encuentra en Open Directory Project, estos podrían aparecer en los resultados de búsqueda de Google, pero a su vez, Google no rastreará, ni indexará, ni publicará el contenido de un sitio web, blog, etc., con estas características definidas en un archivo robots.txt.

Para poder implementar la creación y definición del archivo robots.txt, vas a necesitar tener acceso a la raíz del directorio de tu dominio, en el caso de que no estés seguro/a de que se habla, te recomiendo consultar con el servidor de hosting de tu dominio, como para evacuar todas las dudas, si por esas casualidades no tenés acceso a la raíz del directorio de tu dominio, podés restringir el acceso de los robots al mismo utilizando la metaetiqueta “robots”, por ejemplo:

<meta name=”robots” content=”noindex,follow” />

Como para impedir la aparición de cualquier contenido de un sitio web, blog, etc., en los resultados de búsqueda de cualquier buscador, como así también otros sitios que enlazan con esa página, cuando el robots de Google, el Googlebot por ejemplo, rastree un sitio web, blog, etc., se encontrará con la metaetiqueta “noindex” definida y a su vez impedirá que ese sitio web, blog, etc., aparezca en el índice de los resultados de búsqueda de Google, también podés hacer uso de esta directiva “Noindex:” en el archivo robots.txt como para impedir que aparezcan también las referencias a los enlaces de las url sin que estos sean rastreados en los resultados de búsqueda en internet.

Por último me estaba olvidando, el archivo robots.txt es un simple archivo txt que lo podés crear en la pc para su posterior integración en la raíz del directorio de tu dominio vía ftp, como así también si tu panel de administración te lo permite lo podés crear online, no te olvides de darle el nombre robots.txt como para que todos los robots de los buscadores sepan que en tu sitio web, blog, etc., existe un archivo llamado robots.txt.

Fuente: masefectivo.com.ar

firma

Este es el lugar para tu firma

Personaliza tu perfil



Pc-teros Community - www.pc-teros.es
Arriba 
 Perfil  
 
Mostrar mensajes previos:  Ordenar por  
 
Nuevo tema Responder al tema  [ 1 mensaje ] 


¿Te fue util este tema?

Link:
BBcode:
HTML:


Temas Similares


Portal » Índice general » Zona Webmasters » Tutoriales Webmaster


Temas relacionados
 Temas   Autor   Comentarios   Vistas   Último mensaje 
No hay nuevos mensajes sin leer en este tema. Controlar El Acceso Con El Archivo Robots Txt

buthas

0

439

24 Abr 2010 11:31

buthas Ver último mensaje

No hay nuevos mensajes sin leer en este tema. Que es Javascript - Definición

blquack

1

392

19 Ene 2012 11:17

EseTecnico Ver último mensaje

No hay nuevos mensajes sin leer en este tema. Protegerse y evitar ataques DoS, SQL injection, XSS, Robots

blquack

2

818

27 Sep 2010 00:09

blquack Ver último mensaje

No hay nuevos mensajes sin leer en este tema. Encabezado con archivo flash

Megabyte

0

262

19 Nov 2010 16:04

Megabyte Ver último mensaje

Este tema está cerrado, no puede editar mensajes o enviar nuevas respuestas Adjunto(s) ¿Cómo particiono un archivo de 6 GB?

uruguayito

5

346

03 Mar 2011 12:58

uruguayito Ver último mensaje

No hay nuevos mensajes sin leer en este tema. permisos a un archivo en el .htaccess

Megabyte

1

356

20 Mar 2011 04:08

guille05 Ver último mensaje

No hay nuevos mensajes sin leer en este tema. Reparar archivo .rar dañado.

Total13

6

818

24 Ene 2012 12:14

EseTecnico Ver último mensaje

No hay nuevos mensajes sin leer en este tema. Archivo rar con Registro de recuperacion.

Total13

1

290

22 Mar 2011 22:27

blquack Ver último mensaje

No hay nuevos mensajes sin leer en este tema. Como se inserta un archivo PDF

EseTecnico

1

358

05 Jul 2011 14:06

Megabyte Ver último mensaje

No hay nuevos mensajes sin leer en este tema. Extraer el contenido de un archivo RAR dañado

soft1

2

786

24 Ene 2012 12:23

EseTecnico Ver último mensaje

 


¿Quién está conectado?

Usuarios navegando por este Foro: No hay usuarios registrados visitando el Foro y 1 invitado

 
 

 
No puede abrir nuevos temas en este Foro
No puede responder a temas en este Foro
No puede editar sus mensajes en este Foro
No puede borrar sus mensajes en este Foro
No puede enviar adjuntos en este Foro

Buscar:
Saltar a:  
cron