Quiero descargar HTML (ejemplo: http://www.brpreiss.com/books/opus6/ ) y unirlo a un HTML u otro formato que pueda usar en el lector de libros electrónicos. Los sitios con libros gratuitos no tienen paginación estándar, no son blogs o foros, por lo que no saben cómo rastrear y fusionar...
¿Por qué a veces se escribe @ en las páginas web como [at]? ¿Tiene alguna razón
Esencialmente, quiero rastrear un sitio completo con Wget, pero lo necesito para NUNCA descargar otros activos (por ejemplo, imágenes, CSS, JS, etc.). Solo quiero los archivos HTML. Las búsquedas de Google son completamente inútiles. Aquí hay un comando que he probado: wget --limit-rate=200k...
¿Cómo se le indica a wget que rastree recursivamente un sitio web y solo descargue ciertos tipos de imágenes? Intenté usar esto para rastrear un sitio y solo descargar imágenes JPEG: wget --no-parent --wait=10 --limit-rate=100K --recursive --accept=jpg,jpeg --no-directories...
Tal como está actualmente, esta pregunta no es adecuada para nuestro formato de preguntas y respuestas. Esperamos que las respuestas estén respaldadas por hechos, referencias o experiencia, pero esta pregunta probablemente solicitará debate, argumentos, encuestas o discusión
Google hace un buen trabajo al encontrar información relevante. Digamos que googleo: la opinión de la FDA sobre ISO-9001 Luego encuentra un enlace a un PDF en fda.gov
Estoy buscando una manera de buscar un producto específico en un sitio web y extraer datos de él, pero sin ir directamente a este sitio web, como desde un sitio web local que consulta información y los descarga, Creo que lo que busco es "scraping web", pero quería preguntarle si conoce alguna...
Estoy tratando de ejecutar un escaneo en mi sitio web usando Vega, pero después de que el rastreador ha enviado un par de solicitudes, mi dirección IP se bloquea durante 30 minutos. Esto no es culpa de fail2ban (que está instalado), porque solo tiene una cárcel para sshd y he intentado apagarlo...