¿Cómo puede alguien crear un panel personal que recopile automáticamente datos de varias fuentes de Internet y actualizaciones a intervalos regulares?

Por lo que sé, muchos productos relacionados con Dashboard permiten conectarse a servicios externos para recopilar datos, agregarlos y presentarlos al usuario. El único punto es si un producto de tablero en particular admite la conectividad a los portales de datos específicos requeridos.

Intentaría comenzar con Cyfe (tienen widgets personalizados que con un poco de esfuerzo de programación permitirán exportar datos de casi todas las fuentes de datos: widgets personalizados | Cyfe).

A algunas personas también les gusta Ducksboard, también tienen una API para llenar los datos. Yo también verificaría esa opción.

El último pero no menos importante que vale la pena verificar sería Klipfolio (que también admite API y una gran cantidad de fuentes de datos conocidas).

Una vez completada su propia exploración, sería realmente bueno saber qué producto de tablero ha seleccionado y por qué. Por cierto, no trabajo para ninguno de los productos anteriores, ni tengo ninguna relación con ellos.

Cualquiera puede construirlo, pero la recopilación automática de datos de varios sitios web en un tiempo mínimo es posible a través de la única herramienta gratuita y de código abierto que se conoce como Easy Data Feed – Web Data Extraction Scraping Software.

He estado usando esta herramienta durante los últimos 3 años. Cualquiera puede descargarlo y usarlo sin costo. Se utiliza para ejecutar programaciones diarias, establecer límites de raspado y establecer subproceso, establecer velocidad y raspado protegido por contraseña, usar proxies.

Easy Data Feed es de código abierto, podemos desarrollar proyectos de muestra en él, es compatible con Visual Studio y también tiene desarrollo nativo.

Puede leer sobre cómo usarlo aquí: FUENTE ABIERTA
También tienen desarrolladores que puedes contratar para hacer el trabajo por ti, su skype es “easydatafeed”

Esto se puede lograr fácilmente utilizando un servicio de raspado web como PromptCloud. Proporcionan un panel de control extenso que le permite recopilar y monitorear sus datos.

Puede seleccionar las fuentes desde donde desea que se extraigan los datos y la frecuencia con la que desea ejecutar los rastreos (diariamente, semanalmente, mensualmente). Los datos se entregan en formatos listos para usar como CSV, XML y JSON.

De esta forma, puede adquirir datos de múltiples fuentes en la web y monitorear todo desde un solo tablero. Puede obtener más información sobre cómo agiliza el proceso de extracción de datos aquí.

Eche un vistazo a http://Import.io : herramienta de desguace de datos web estructurada gratuita. Parece que al menos está cerca de lo que estás buscando.

More Interesting

¿Las estrategias basadas en datos son parte de la gestión de productos?

¿Dónde puedo encontrar ejemplos de documentos de requisitos de software en la nube (SaaS)?

¿Es importante para el propietario de un producto en un equipo Scrum que hace que el software tenga conocimiento técnico?

¿Cuáles deberían ser los criterios de salida de la versión beta (para que pueda decidir iniciar la versión completa)?

¿Cuáles son las responsabilidades de un gerente de producto en cada paso del ciclo de vida del producto?

¿Debería aplicarse la metodología Agile a los equipos de gestión de productos en grandes empresas?

¿Cuáles son los mejores pasos para que un joven de 23 años tome para convertirse en un gerente de productos digitales exitoso y calificado?

Como gerente de producto, ¿cuáles son sus principales segmentos de trabajo y cómo distribuye su tiempo entre ellos?

¿Cuál debería ser la estructura del equipo para el inicio de un producto de software?

¿Cuáles son algunos ejemplos de productos que mejoraron después de ser adquiridos?

¿Cuáles son los principales desafíos en la aplicación de la ciencia de datos como disciplina para el desarrollo de productos?

¿Cuál es mejor, la metodología Agile o Waterfall para la implementación del software CRM?

¿Cómo debería un equipo de producto evaluar el impacto de un nuevo producto? ¿Cuáles son algunos buenos ejemplos?

¿Qué características tendría el lector de noticias ideal?

¿Cómo se compara la ingeniería de desarrollo de productos con la ingeniería mecánica?