El archivo robots.txt

Se supone que un crawler, lo primero que tiene que hacer cuando llega a nuestra web, es leer e interpretar el contenido del robots.txt. Este archivo le indica como tiene que rastrear nuestro sitio y decimos se supone, porque al final los spiders los programa alguien que puede o no seguir las normas del protocolo de exclusión de robots o REP.

Los robots de los grandes buscadores sí que siguen las recomendaciones del protocolo y es nuestra labor el no bloquearles más de lo necesario, ya que una incorrecta implementación de este fichero puede provocar problemas serios en la indexación de nuestro site. A no ser que queramos que nuestro sitio no aparezca por ningún lado, nuestro robots.txt no debería contener esto:

User-agent: *
Disallow: /

Estas directivas lo que hacen es bloquear el acceso de todos los robots a nuestro sitio. User-agent define a quien le aplicamos la directiva Disallow, que bloquea todos los directorios. Como no es esta nuestra intención, lo mejor será que lo utilicemos para, por ejemplo, evitar la indexación de contenido duplicado. El robots es un archivo público y visible, así que podemos echar un ojo a nuestro robots.txt mismo:

User-agent: *
Disallow: /2006/
Disallow: /2007/
Disallow: /2008/
Disallow: /2009/
Disallow: /page/

Sin complicarnos mucho la cosa, simplemente estamos prohibiendo el acceso de los robots a los archivos y a la paginación, que no son más que contenido duplicado de nuestros posts. Un ejemplo de un robots.txt para WordPress mucho más completo sería éste y aquí podéis profundizar más en este tema.

El archivo Sitemaps.xml

Este archivo lista todas las URLs de nuestro sitio junto con cierta información extra, tal como la última actualización o el grado de importancia del contenido. Con la ayuda de estos datos, los motores de búsqueda podrán conocer el tipo de contenido y podrán rastrear nuestra web de una forma más eficiente.

Aunque, a pesar de todo, no se garantiza que los buscadores vayan a indexar todas nuestras páginas, los Sitemaps vienen utilizándose y mejorándose desde 2005, posibilitando la inclusión de múltiples contenidos. La especificación y las definiciones de las etiquetas que debe contener este fichero XML es totalmente compatible con los grandes buscadores.

No se os ocurra generar un Sitemaps a mano, pues ya existen herramientas al uso para generar nuestro archivo Sitemaps.xml o, si usamos WordPress, alguno de los plugins disponibles. Finalmente, podemos notificar la existencia de este archivo a través de alguno de estos métodos:

• Hacer un ping al buscador vía HTTP. Por ejemplo, escribiendo en el navegador “http://www.google.es/ping?sitemap=sitemap_url”. Los límites de un archivo Sitemaps son de 10 Mb de tamaño y un máximo de 50.000 URLs por fichero.
• Introduciendo la siguiente línea en el archivo robots.txt: “Sitemap: http://www.sitioweb.com/sitemaps.xml”
• Usando las herramientas para webmasters que ponen a nuestra disposición los buscadores. Cómo las Google Webmaster Tools o las Bing Tools.


<?php if (is_user_logged_in()) { ?>
<p>Consumo de PHP: <?php echo round(memory_get_usage()/1048576,2) ?>MB.</p>
<p>Base de datos: <?php echo get_num_queries(); ?> consultas.</p>
<p>Tiempo de carga: <?php timer_stop(1); ?> segundos.</p>
<?php } ?>


Este blog actualmente consume 13,79 Mb, un valor bajo teniendo en consideración que una instalación nueva consume unos 10,5 Mb. Las cifras más comunes rondan los 20-25 Mb. ¿Cuanta memoria consume tu Wordpress?

Introduce el concepto de control de emisión de la información, algo que siempre ha controlado el centro de poder de la época, ya fuese la Iglesia, el Estado o la FIFA, que es quien controla ahora que temas interesan a la población. Bueno, esto último de la FIFA no lo dice él, es mi irrelevante aportación, pero comenta cosas tan interesantes cómo:

Cuando dicen que gracias a la electrónica digital y a internet estamos en la era de la información lo que quieren decir (aunque les de miedo afirmarlo abiertamente) es que estamos en una era en la que los ciudadanos de a pie podemos emitir información. Ésa es la revolución. Las personas anónimas como usted que lee ahora mismo, como yo que escribo estas líneas, podemos transmitir información sin que nadie nos diga qué está bien emitir y qué no.

¿Quieres mantener una red distribuida donde todas las voces tengan su lugar? Bloguea; y si vez algo que no te gusta, cuéntaselo al mundo. Pero no olvides contarle también al mundo aquello que te guste de entre lo que vayas viendo. Traza conversaciones, traza lazos, crea redes. Interacciona. Sé cotidiano, reflexiona, articula. Bloguea. Aún más: si es posible bloguea desde una plataforma independiente que no pertenezca a ninguna de las grandes empresas de la red: usa tu servidor. Y aún hay más: si tienes los conocimientos o los medios necesarios, acoge en tus servidores a tus amigos. Enséñales lo que pueden hacer con muy poco esfuerzo.

¡Grandioso mensaje! ¡Bloguead malditos! Y hacedlo desde un servidor propio con un CMS como Wordpress, por ejemplo. Requiere un poco más de trabajo y aprendizaje que el simplemente bloguear desde una plataforma como Blogger o Wordpress.com, pero merece la pena.

Luego escribe y crea conversaciones. Cuando tu bitácora haya madurado (después de unos 3-6 meses de continuidad), puedes incluso tratar de monetizar tu pasión y esfuerzo. Pero sobre todo, cuida tu blog, mímalo como algo tuyo que es. Me decepciona a veces ver como algunos editores aceptan cualquier tipo de publicidad o enlaces, sin importarles que se integren bien en su web o que permitan mantener la calidad que han ido sustentando. Hay muchas formas creativas y no intrusivas de vender enlaces. Contacta con nosotros si lo dudas!

A continuación os vamos a hablar de los CMS a los que damos soporte en LinkLift. De manera que si trabajáis con alguno de estos CMS, podéis participar más cómodamente en nuestro programa. Centrados principalmente en los blogs tenemos Wordpress, Serendipity y Dotclear. Además también soportamos los CMS de  Joomla, Drupal y Xoops cuyo abanico de posibilidades es mucho más amplio.

Wordpress.org

Podríamos rellenar entradas y entradas sobre Wordpress y nunca daríamos a basto. Es el CMS enfocado a la creación de blogs más popular y más utilizado del momento. Su gran éxito se debe en parte al gran número de desarrolladores y diseñadores que sacan continuamente nuevos temas y plugins que permiten ampliar las posibilidades de gestión, participación, promoción, socialización, etc.

Es el más recomendable para aquellos que deseen llevar un blog con aspecto bastante profesional sin necesidad de un gran conocimiento técnico. De hecho no hace falta saber programar y cualquiera puede instalarlo y gestionarlo. Hay muchísimos blogs que hablan sobre Wordpress e igualmente hay numerosos foros donde se pueden exponer las dudas y los problemas surgido y encontrar soluciones a ellos.

Serendipity

Al igual que Wordpress, Serendipity es un CMS destinado a la gestión de blogs desarrollada en torno a un sistema de entradas y comentariosy cuyas posibilidades pueden extenderse ampliamente con plugins y dar al blog apariencias muy diferentes con los temas.

El núcleo básico del programa es muy fácil de utilizar posibilitando un mayor desarrollo a nivel profesional.

Dotclear

Muy similar a Wordpress.org y Serendipity, con Dotclear es posible igualmente modificar y personalizar las plantillas. También ofrece diversas prestaciones en cuanto a la gestión de usuarios, de comentarios, de las entradas, etc.

Drupal

Drupal se diferencia más de los anteriores CMS, centrados en el bloging. Drupal que igualmente permite desarrollar un blog, está centrado principalmente en la publicación y distribución de contenidos y no tanto en la publicación de entradas a modo de diario o bitácora. De esta manera permite compartir materiales o software por ejemplo, que no necesariamente son los creadores del sitio quienes los aportan, permitiendo construir una comunidad mediante la aportación de comentarios, votaciones, etc.

Se caracteriza por estar formado por un conjunto de módulos, entre los que se pueden incluir de comercio electrónico incluso. También destaca por tener un sistema de menú multinivel. Para su desarrollo requiere de un cierto conocimiento técnico por lo que no es muy recomendable para aquellos que no saben programar o no tienen intención de aprender.

Joomla

Joomla es igualmente un sistema que facilita la creación y organización colaborativa de contenidos. Además de poder manejar blogs, está muy extendido en intranets y en aplicaciones corporativas.

El paquete básico  es muy sencillo de utilizar y no requiere ningún conocimiento de programación para pode gestionar un sitio con Joomla. Igualmente hay un gran número de extensiones gracias a la gran cantidad de desarrolladores de todo el mundo que contribuyen a mejorar la herramienta. Así se pueden incorporar extensiones de comercio electrónico, chats, foros, servicios de suscripción, gestores de documentos, etc.

Xoops

Se trata de otro sencillo de utilizar CMS que permite crear blogs, comunidades en línea, intranets o portales corporativos entre otras muchas opicones.

Con el tiempo esta herramienta ha evolucionado desde un sistema de creación y gestión de portales hasta convertirse en lo que hoy es, un CMS válido tanto para pequeñas como medianas y grandes empresas. Se puede optar por desarrollar un módulo para gestión de blogs o de noticias o incluso crear tus propios modulas o modificar los ya existentes para desarrollar sistemas más complejos.

Hay muchísimos CMS, unos más usados que otros, más extendidos o menos según las zonas geográficas. Estos son sólo los que soportamos con plugins en LinkLift. ¿Consideráis que deberíamos incluir algún otro CMS?

Lo mejor que podemos hacer una vez hayamos diseñado nuestra página 404, es enviar una cabecera al principio del código de la página informando de que es una página de error y los buscadores no deberían rastrearla. Esto en PHP se hace de la siguiente manera:

<?php
header('HTTP/1.1 404 Not Found');
?>

Una vez desarrollada nuestra página 404, le diremos al servidor que nos la muestre cada vez que no se encuentre una página. Modificando el fichero .htaccess (si tu servidor corre bajo Apache), se hace de la siguiente manera:

ErrorDocument 404 /error_404.php

El siguiente artículo que comentaba, habla de las páginas 503 (servicio no disponible), correspondientes a errores producidos por sobrecarga o caídas en el servidor, el cual no puede dar respuesta a nuestras peticiones.

Al igual que en el caso anterior, podemos diseñar una página de error 503 en la cual, por una parte, informaremos sobre el caso al visitante y, por la otra, añadiremos una cabecera para avisar al buscador. En el siguiente ejemplo en PHP le decimos a los robots que no indexen nada, pues el servidor está caído y que vuelvan en 1 hora (3600 segundos) a ver si está ya solucionado:

<?php
header('HTTP/1.1 503 Service Temporarily Unavailable');
header('Retry-After: 3600');
?>
<html>
<head><title>Error temporal</title></head>
<body><h1>Error temporal. Disculpe las molestias.</h1></body>
</html>

Para dejárselo listo a nuestro servidor, añadimos esta línea en el .htaccess:

ErrorDocument 503 /error_503.php

Para aquellos que usamos Wordpress, este CMS incluye sus propias páginas de Error, pero siempre podemos personalizarlas aún más.

No me iré sin dar la bienvenida a Jesús Espuña, que nos estará ayudando unos meses en el crecimiento y mejora de LinkLift. Pronto lo tendremos escribiendo por aquí. Bienvenido al barco!

Para que no te ocurra ésto lo mejor es migrar de una plataforma de hosting gratuito como Blogger a disponer de tu propio blog (Wordpress). Pasar de depender de otros (Blogger) a tener total libertad con tu blog (Wordpress).

Los pasos para migrar a Wordpress son:

1 – Dominio y hosting.
Lo primero que necesitas es tener un dominio (nombre) y un hosting o sitio para alojar tu WP, un poquillo decente (que permita PHP, MySQL) y así tendrás total control de tu servidor.

Todo esto (dominio, hosting) se puede encontrar por menos de 50 euros al año. Realmente si haces cuentas no sale a mas de 4 euros por mes. Incluso si te parece mucho, ¿por qué no vender enlaces con LinkLift?. Seguro que te sacas para pagar tu hosting y tu dominio y, ¿por qué no algo por el tiempo que dedicas a escribir?.

2. Descargar Wordpress
Una vez que tienes el hosting y dominio (lo sé, elegir el nombre no es fácil, pero al final se encuentra algo que te gusta). Lo más fácil es descargarse Wordpress e instalarlo en el hosting. Subes al servidor la versión de WP y entras por primera vez como administrador.

3. Migración
Una vez que tienes operativo Wordpress hay que hacer la migración. Wordpress te lo pone muy fácil. En el panel de administración de la herramienta (Administrar -> Importar) se puede importar desde la mayoría de las plataformas de manera sencilla. De todas maneras, si tienes algún problema, en este sitio podrás encontrar alguna ayuda.

Ya casi está. Tienes tu propio sitio activo pero no quieres perder los lectores del antiguo blog. Para esto habrá que indicárlo insertando este sencillo código en tu plantilla de Blogspot:

<MainOrArchivePage>
<script language=”javascript”><!–
var blog_root=http://www.tublog.com/;
document.location.href=blog_root;
//–></script>
</MainOrArchivePage>
<ItemPage>
<script language=”javascript”><!–
var process_page=”http://www.tublog.com/redirigir.php”;
var newpage=process_page;
var oldlink=”<$BlogItemPermalinkUrl$>”;
newpage+=”?p=”+oldlink;
newpage=newpage.toLowerCase();
document.location.href=newpage;
//–></script>
</ItemPage>


Y en la etiqueta head de la plantilla añade:

<head>
<meta http-equiv=”refresh” content=”0;url=http://www.tublog.com/” />
</head>


Una vez hecho esto le indicamos al servidor nuevo que va a venir gente desde Blogger y así podremos redirigirlas a los posts correspondientes.

En tu nuevo sitio creamos un archivo redirigir.php (fíjate que es el mismo nombre que le hemos indicado a Blogger), con el siguiente código:

<?php
require($_SERVER[’DOCUMENT_ROOT’].’/wp-blog-header.php’);
$search_link = $_GET[’p'];
$vars = explode(’/’, $search_link);
$num = count($vars) - 1;
$filename = $vars[$num];
$slug = str_replace(”.html”, “”, $filename);
$SQL = “SELECT posts.* FROM $wpdb->posts AS posts WHERE posts.post_name = ‘$slug’

LIMIT 1?;
$posts = $wpdb->get_results(”$SQL”);
if ($posts) {
foreach ($posts as $post) {
$found_link = get_permalink($post->ID);
}
}
else
{
$found_link = “http://www.tublog.com/”;
}
?>
<html>
<head>
<title>Redirigiendo…</title>
<script language=”javascript”><!–
document.location.href=”<?php echo ($found_link); ?>”;
//–></script>
<meta http-equiv=”refresh” content=”2;url=<?php echo ($found_link); ?>”>
</head>
<body>
<h1>Redirigiendo…</h1>
<p>Puedes ir también directamente a <a href=”<?php echo ($found_link); ?>”><?php echo

($found_link); ?></a>.</p>
<p>La URL del blog principal es <a href=”http://www.tublog.com/” mce_href=”

http://www.tublog.com/”>www.tublog.com</a>.</p>
</body>
</html>

Por último (esta vez sí) tendrás que redirigir a los lectores que se han apuntado a tu feed. Si tienes cuenta en Feedburner, hazlo de esta forma. Si no, lo mejor es que lo indiques bien clarito en tu blog.

Y como cantaba Nino Bravo:

Libre, como el sol cuando amanece, yo soy libre como el mar…
…como el ave que escapó de su prisión y puede, al fin, volar…
…como el viento que recoge mi lamento y mi pesar,
camino sin cesar detrás de la verdad y sabré lo que es, al fin, la libertad.

http://www.google.es/search?hl=es&q=intitle%3Aindex.of+%2B%E2%80%9Dlast+modified%E2%80%9D+%2B%E2%80%9Dparent+directory%E2%80%9D+%2B+%22wp-content%2Fplugins%2F%22&btnG=Buscar&meta=

Esta cadena de búsqueda muestra el contenido de la carpeta plugins de más de 130.000 blogs. Esto no sólo muestra el poder de las búsquedas de Google sino el hecho de que hay que proteger muchos directorios en los que tenemos archivos que no queremos compartir, ni perder ancho de banda. De estas dos formas podemos evitar fácilmente este desaguisado:

• Nosotros hemos optado por añadir “Options -Indexes” en el archivo .htaccess de la carpeta plugins.
• También se puede crear un archivo index.html completamente vacío en el mismo directorio. De esta manera se ocultan sus contenidos.

Así que si estás leyendo esto y tienes tu web registrada en LinkLift, te recomiendo actualizar el plugin de Wordpress cuanto antes, y añadir seguridad adicional a tu blog.

Descubre tu nicho
Sé diferente, encuentra un tema que todavía no haya tratado todo el mundo, pero no lo busques usando técnicas convencionales de SEO como las “búsquedas de palabras clave”, ni revisando las demandas de los usuarios de Google. Inténtalo desde un ángulo distinto. Habla sobre… comida acuática exclusiva, por ejemplo.

Usa Wordpress
En vez de optimizar a nivel de página, instala Wordpress, que es especialmente amigable con los motores de búsqueda. Wordpress no sólo es un software para escribir blogs, se puede utilizar también como CMS a pequeña escala, siendo válido para la mayor parte de las webs de tamaño medio. Además, no será necesario ni enviar la web a los buscadores, ni utilizar sitemaps XML. Google indexará tus posts pocas horas después de escribirlos, debido a la rapidez de su ping.

Crea un diseño impactante y envíalo a galerías CSS
Las actividades tradicionales del SEO tienen como objetivo conseguir enlaces (link building) y las webs que se generan de esto acostumbran a ser bastante feas. Actualmente la gente enlaza webs por el mero hecho de estar bien diseñadas y, ahora, la mejor manera de diseñar una web es con hojas de estilo (CSS) y siguiendo los estándares. No es muy complicado crear un buen diseño, especialmente con Wordpress. Crea un diseño impactante para tu blog y te enlazaran por todas partes. En CSSmania, CSSremix y CSSvault puedes sugerir tu sitio.

Permite trackbacks, usa dofollow
Los blogs prosperan al estar conectados entre ellos. La mejor manera de hacerlo es a través de la función trackback. Instala además el plugin dofollow para no tratar a otros bloggers como spammers.

Socializa, escribe comentarios y enlaza otros blogs
Enlaza y menciona otros bloggers en tus posts. Además, comentar en otros blogs es algo que se valora mucho, ya que el blogging, hecho de la manera adecuada, no es un monólogo.

Incluye y usa servicios sociales
Incluye botones a tus servicios de favoritos sociales preferidos, como del.icio.us o StumbleUpon, pero ten cuidado con los sitios de noticias como Digg, Reddit o en español Menéame, ya que pueden tirar tu servidor y/o costar bastante dinero al dirigir toneladas de tráfico inútil en cortos periodos de tiempo a tu sitio.

Escribe tu propio contenido, se original, cuenta algo nuevo
Cuando escribas contenido fuera de tu nicho, que sea sobre algo que domines bien. Di algo nuevo que no haya sido dicho por nadie más, no sólamente postees enlaces a otras webs. Exprésate tú mismo, no repitas lo que las noticias dijeron ayer.

Recopila lo que sabes o lo que otros dijeron y publícalo
Si ya se ha hecho y dicho todo sobre un determinado tema, recopílalo y anótalo en forma de lista. Una lista con “200 plugins para Wordpress” es demasiado grande y difusa, es mucho más efectivo una lista con “10 plugins indispensables para Wordpress”.

Contribuye en tus publicaciones online favoritas
No publiques únicamente en tu blog o sitio web. Contribuye en otras publicaciones que cubran tu temática. Inténtalo primero con tus favoritas, ya que probablemente conocerás que asuntos prefieren tratar. La mayoría de los editores enlazarán a tu web.

Agrega nuevo contenido por lo menos cada segundo día
Agrega nuevo contenido lo suficientemente a menudo como para crear un número de lectores fieles. Aquellos que visitan tu web una vez al mes podrían olvidarse de ello. No siempre es necesario postear cada día, pero si de verdad escribes un blog, hazlo al menos 3 veces por semana.