Categoría:

Internet

Temas y noticias interesantes del mundo de internet. Opiniones y desarrollos

Evitar que se descarguen tu web y bloquear otros crawlers desde robots.txt

Evitar que se descarguen tu web y bloquear otros crawlers desde robots.txt

Hace unos días escribía un post sobre como Descargar un sitio web completo desde consola con linux. La solución para evitar a este tipo de problema, que descarguen tu web mediante comandos linux es muy sencilla. Se ha tomado wget como un crawler (un rastreador) y se puede bloquear desde el archivo robots.txt que es aconsejable tener en el directorio raíz de tu desarrollo. De manera que para evitar que usen wget de manera recursiva en tu site y lo acaben descargando añadir la siguiente linea en robots.txt User-agent: wget Disallow: / Hay una serie de crawlers, rastreadores o arañas conocidas que se dedican a entrar en tu site y rastrearlo para diferentes motivos, hacer spam, robar contenido, etc.. Es muy aconsejable tener una lista conocida de todos los crawlers maliciosos y bloquearlos directamente. A continuación añado una lista de crawlers web que he bloqueado, sin piedad! Son los que conozco hasta el momento seguro que hay mas. # # robots.txt # User-agent: Orthogaffe Disallow: / User-agent: UbiCrawler Disallow: / User-agent: DOC Disallow: / User-agent: Zao Disallow: / User-agent: sitecheck.internetseer.com Disallow: / User-agent: Zealbot Disallow: / User-agent: MSIECrawler Disallow: / User-agent: SiteSnagger Disallow: / User-agent: WebStripper Disallow: / User-agent: WebCopier [...]

4 Comentarios Categoria : Internet

Como usar los DNS publicos de Google para navegar mejor.


Te va lento internet? Se te corta? o estas en clase y la red te va como el orto!! jeje Pues a continuación voy a poner un truco para usar los DNS públicos de Google para poder navegar mucho mejor y sin cortes, ojo no significa que vaya a ir más rápido, sino que que irá sin tantos cortes. O bien en una red todo el mundo esta usando un mismo servidor de DNS y va lento, pues te cambias a otro servidor y listo! Las direcciones IP de las DNS publicas de Google son las siguientes: * 8.8.8.8 * 8.8.4.4 Si ya lo habéis hecho mas veces, pues no hace falta que leáis los siguientes pasos, cogéis las direcciones IP publicas y listo. Configurar el server DNS en Windows 7 – Clic en Inicio y seleccionar Panel de control – De la lista mostrada seleccionar Redes e Internet, luego seleccionar Centro de redes y recursos compartidos – Hacer clic sobre Cambiar configuración del adaptador, eso se encuentra ubicado en el panel izquierdo. – Seleccionar el adaptador de red usado actualmente – Hacer clic derecho y seleccionar Propiedades del menú contextual mostrado – Seleccionar la pestaña Funciones de red y [...]

3 Comentarios Categoria : Internet

Convertir pagina web a pdf

Convertir pagina web a pdf

Acabo de descubrir una web interesante,  que consiste en guardar paginas web a pdf. La utilidad inicial que le veo es para ir guardando la evolución de las paginas a lo largo del tiempo, no hubiera esto mal guardar todas mis versiones de mi site en pdf y no en el viejo y querido “Guardar como” del navegador web. Pero esta función crea carpetas, separa las imágenes y al final toda la cantidad ingente de archivos se acaba perdiendo o te molestan y ya no sabes que hacer con ellos. Un sólo pdf estorba menos. También tiene una opción para enviar una url por email y te reenvía el pdf. No está mal, es la típica aplicación que usas muy rara vez pero que te saca de muchos apuros. Visitar: http://www.web2pdfconvert.com/ Tags de búsquedas: guardar paginas web android, guardar como pdf android, guardar web como pdf, guardar como pdf web, guardar correo en pdf android, guardar pagina android, guardar pagina web con android, guardar pagina web en android, guardar paginas web en android, pasar web a pdf apk

Sin Comentarios Categoria : Internet

Google wave pasa a Apache

Google wave pasa a Apache

La fundación Apache ha retomado el proyecto de Google Wave, que bueno ya no se llama así porque al liberalizar el código se definió como Wave in a Box (WIAB). Apache Wave es el proyecto donde se desarrolla la tecnología de “wave”. Wave in a Box (WIAB) es el nombre del producto principal en este momento, que es un servidor que aloja y federa los waves, tiene una API, y proporciona un cliente web mejorado. Leyendo en la documentación de Apache sobre el status del proyecto, se pueden sacar algunas cosas en claro. El código base es una mezcla del core de Google Wave, y código beta de WIAB. WIAB se está convirtiendo en altamente funcional y ya se encuentra en una versión demo. El desarrollo de las listas de distribución de correo están en produccion y con un gran apoyo de la comunidad. Consideran que es el mejor momento para migrar a la Fundación Apache, mientras que el código base y la comunidad es de un tamaño manejable. Estiman un fuerte crecimiento en el código y la comunidad en un futuro próximo. Parece que Google Wave no se morirá finalmente sino que se ha reciclado en un código abierto [...]

Sin Comentarios Categoria : Internet

Crear un portafolio online con Electrofolio

Crear un portafolio online con Electrofolio

Os imagináis un portafolio personal con imágenes de tus trabajos en tu carpetita bonita bien cuidada pero en el que la gente llegue y se ponga a escribir comentarios del tipo: que foto mas bonita, yo hice una foto de la misma escultura con mi prima la semana pasada… o te ponen medallas o estampas de colores parpadeantes de esas que te ponen en el flick-r! Llevarías algo así a una entrevista de trabajo? Sorprendentemente, esto es lo que hace la mayoría de gente hoy día usando paginas web gratuitas  donde los usuarios muestran sus productos en facebook flickr, picasa y similares. Es algo que funciona pero no es serio ni profesional… Lo lógico es tener un portfolio online mas profesional y serio si quieres que te tomen más en serio. Desde hace no mucho existen varias webs donde se pueden poner en Internet tus trabajos de una manera muy sencilla con un acabado más que profesional. Desde hace un tiempo llevo siguiendo la pista y la evolución de una herramienta llamada Electrofolio – online portfolios. Esta genial, son sólo 50 libras al año (poco mas de 55 euros) y te dan subdominio en su servidor con tu nombre de [...]

1 Comentario Categoria : Internet
  1. Páginas:
  2. 1
  3. 2
  4. 3
  5. 4
  6. 5
  7. 6
  8. 7

Colabora, añade +1 a mi blog!!