md-links-lim014

v1.0.0

Published

3 years ago

libreria en nodeJs que valida links de documentos Markdown

Downloads

0High
0Medium
0Low

mairelis-montilla

nodeJs javascript mdLinks

MDLINKS

Es una librería que permite leer y analizar archivos en formato Markdown estos archivos normalmente contienen Links (vínculos/ligas) que muchas veces están rotos o ya no son válidos y eso perjudica mucho el valor de la información que se quiere compartir. MdLinks ayuda a verificar y obtener estadisticas de los links

Instalacion

intalacion por npm

npm i md-links-lim014

instalacion por github

npm i --global mairelis-montilla/LIM014-mdlinks

Para hacer uso de la API es necesario importar con

const md = require('md-links-lim014')

Ejemplos:

mdLinks <path-to-file> [options]

mdLinks ./__test__/file-test --stats --validate
mdLinks ./__test__/file-test --stats
mdLinks ./__test__/file-test --validate
mdLinks ./__test__/file-test
mdLinks --help

Por ejemplo:

Si deseas ayuda mdLinks --help

help

Si solo deseas listado sin validaciones solo href, text y file solo ingresa el path mdLinks ./__test__ retorna
Si deseas ver listado con href, text, file status y status text agregar el flag validate luego del path mdLinks ./__test__ --validate retornaria asi
Si solo deseas ver el calculo de links totales y unicos mdLinks ./__test__ --stats retornaria
Si deseas calcular los links totales, unicos y rotos mdLinks ./__test__ --stats --validate retornaria

Índice

Diagramas de flujo

Diagrama de flujo api
Diagrama de flujo CLI

1. Preámbulo

Markdown es un lenguaje de marcado ligero muy popular entre developers. Es usado en muchísimas plataformas que manejan texto plano (GitHub, foros, blogs, ...), y es muy común encontrar varios archivos en ese formato en cualquier tipo de repositorio (empezando por el tradicional README.md).

Estos archivos Markdown normalmente contienen links (vínculos/ligas) que muchas veces están rotos o ya no son válidos y eso perjudica mucho el valor de la información que se quiere compartir.

Dentro de una comunidad de código abierto, nos han propuesto crear una herramienta usando Node.js, que lea y analice archivos en formato Markdown, para verificar los links que contengan y reportar algunas estadísticas.

md-links

2. Resumen del proyecto

Node.js es un entorno de ejecución para JavaScript construido con el motor de JavaScript V8 de Chrome. Esto nos va a permitir ejecutar JavaScript en el entorno del sistema operativo, ya sea tu máquina o un servidor, lo cual nos abre las puertas para poder interactuar con el sistema en sí, archivos, redes, ...

En este proyecto nos alejamos un poco del navegador para construir un programa que se ejecute usando Node.js, donde aprenderemos sobre cómo interactuar con el sistema archivos, con el entorno (proceso, env, stdin/stdout/stderr), ...

En este proyecto crearás una herramienta de línea de comando (CLI) así como tu propia librería (o biblioteca - library) en JavaScript.

3. Objetivos de aprendizaje

Diseñar tu propia librería es una experiencia fundamental para cualquier desarrollador porque que te obliga a pensar en la interfaz (API) de tus módulos y cómo será usado por otros developers. Debes tener especial consideración en peculiaridades del lenguaje, convenciones y buenas prácticas.

A continuación puedes ver los objetivos de aprendizaje de este proyecto:

JavaScript

[x] Uso de condicionales (if-else | switch | operador ternario)
[x] Uso de funciones (parámetros | argumentos | valor de retorno)
[x] Manipular arrays (filter | map | sort | reduce)
[x] Manipular objects (key | value)
[x] Uso ES modules (import | export)
[x] Diferenciar entre expression y statements.
[x] Diferenciar entre tipos de datos atómicos y estructurados.
[x] Uso de callbacks.
[x] Consumo de Promesas.
[x] Creación de Promesas.

Node

[x] Uso de sistema de archivos. (fs, path)
[x] Instalar y usar módulos. (npm)
[x] Creación de modules. (CommonJS)
[x] Configuración de package.json.
[x] Configuración de npm-scripts
[x] Uso de CLI (Command Line Interface - Interfaz de Línea de Comando)

Testing

[x] Testeo unitario.
[] Testeo asíncrono.
[x] Uso de librerias de Mock.
[x] Uso de Mocks manuales.
[ ] Testeo para múltiples Sistemas Operativos.

Estructura del código y guía de estilo

[x] Organizar y dividir el código en módulos (Modularización)
[x] Uso de identificadores descriptivos (Nomenclatura | Semántica)
[x] Uso de linter (ESLINT)

Git y GitHub

[x] Uso de comandos de git (add | commit | pull | status | push)
[x] Manejo de repositorios de GitHub (clone | fork | gh-pages)
[ ] Colaboración en Github (branches | pull requests | |tags)
[x] Organización en Github (projects | issues | labels | milestones)

HTTP

[x] Verbos HTTP (http.get)

Fundamentos de programación

[x] Recursión.

4. Consideraciones generales

Este proyecto se debe "resolver" de manera individual.
La librería y el script ejecutable (herramienta de línea de comando - CLI) deben estar implementados en JavaScript para ser ejecutados con Node.js. Está permitido usar librerías externas.
Tu módulo debe ser instalable via npm install <github-user>/md-links. Este módulo debe incluir tanto un ejecutable que podamos invocar en la línea de comando como una interfaz que podamos importar con require para usarlo programáticamente.
Los tests unitarios deben cubrir un mínimo del 70% de statements, functions, lines y branches. Te recomendamos explorar Jest para tus pruebas unitarias.
Para este proyecto no está permitido utilizar async/await.
Para este proyecto es opcional el uso de ES Modules (import/export), en el caso optes utilizarlo deberás de crear un script de build en el package.json que los transforme en requires y module.exports con ayuda de babel.

5. Criterios de aceptación mínimos del proyecto

Para comenzar este proyecto tendrás que hacer un fork y clonar este repositorio.

Antes de comenzar a codear, es necesario crear un plan de acción. Esto debería quedar detallado en el README.md de tu repo y en una serie de issues y milestones para priorizar y organizar el trabajo, y para poder hacer seguimiento de tu progreso.

Dentro de cada milestone se crearán y asignarán los issues que cada quien considere necesarios.

Archivos del proyecto

README.md con descripción del módulo, instrucciones de instalación/uso, documentación del API y ejemplos. Todo lo relevante para que cualquier developer que quiera usar tu librería pueda hacerlo sin inconvenientes.
index.js: Desde este archivo debes exportar una función (mdLinks).
package.json con nombre, versión, descripción, autores, licencia, dependencias, scripts (pretest, test, ...)
.editorconfig con configuración para editores de texto. Este archivo no se debe cambiar.
.eslintrc con configuración para linter. Este archivo no se debe cambiar.
.gitignore para ignorar node_modules u otras carpetas que no deban incluirse en control de versiones (git).
test/md-links.spec.js debe contener los tests unitarios para la función mdLinks(). Tu inplementación debe pasar estos tets.

Este proyecto consta de dos partes listadas aquí

1) JavaScript API

El módulo debe poder importarse en otros scripts de Node.js y debe ofrecer la siguiente interfaz:

`mdLinks(path, options)`

Argumentos

path: Ruta absoluta o relativa al archivo o directorio. Si la ruta pasada es relativa, debe resolverse como relativa al directorio desde donde se invoca node - current working directory).
options: Un objeto con únicamente la siguiente propiedad:
- validate: Booleano que determina si se desea validar los links encontrados.

Valor de retorno

La función debe retornar una promesa (Promise) que resuelva a un arreglo (Array) de objetos (Object), donde cada objeto representa un link y contiene las siguientes propiedades:

href: URL encontrada.
text: Texto que aparecía dentro del link (<a>).
file: Ruta del archivo donde se encontró el link.

Ejemplo (resultados como comentarios)

const mdLinks = require("md-links");

mdLinks("./some/example.md")
  .then(links => {
    // => [{ href, text, file }]
  })
  .catch(console.error);

mdLinks("./some/example.md", { validate: true })
  .then(links => {
    // => [{ href, text, file, status, ok }]
  })
  .catch(console.error);

mdLinks("./some/dir")
  .then(links => {
    // => [{ href, text, file }]
  })
  .catch(console.error);

2) CLI (Command Line Interface - Interfaz de Línea de Comando)

El ejecutable de nuestra aplicación debe poder ejecutarse de la siguiente manera a través de la terminal:

El comportamiento por defecto no debe validar si las URLs responden ok o no, solo debe identificar el archivo markdown (a partir de la ruta que recibe como argumento), analizar el archivo Markdown e imprimir los links que vaya encontrando, junto con la ruta del archivo donde aparece y el texto que hay dentro del link (truncado a 50 caracteres).

Options

`--validate`

Si pasamos la opción --validate, el módulo debe hacer una petición HTTP para averiguar si el link funciona o no. Si el link resulta en una redirección a una URL que responde ok, entonces consideraremos el link como ok.

Por ejemplo:

Vemos que el output en este caso incluye la palabra ok o fail después de la URL, así como el status de la respuesta recibida a la petición HTTP a dicha URL.

`--stats`

Si pasamos la opción --stats el output (salida) será un texto con estadísticas básicas sobre los links.

También podemos combinar --stats y --validate para obtener estadísticas que necesiten de los resultados de la validación.

6. Entregables

Módulo instalable via npm install <github-user>/md-links. Este módulo debe incluir tanto un ejecutable como una interfaz que podamos importar con require para usarlo programáticamente.

7. Hacker edition

Las secciones llamadas Hacker Edition son opcionales. Si terminaste con todo lo anterior y te queda tiempo, intenta completarlas. Así podrás profundizar y/o ejercitar más sobre los objetivos de aprendizaje del proyecto.

Puedes agregar la propiedad line a cada objeto link indicando en qué línea del archivo se encontró el link.
Puedes agregar más estadísticas.
Integración continua con Travis o Circle CI.

8. Pistas, tips y lecturas complementarias

FAQs

¿Cómo hago para que mi módulo sea instalable desde GitHub?

Para que el módulo sea instalable desde GitHub solo tiene que:

Estar en un repo público de GitHub
Contener un package.json válido

Con el comando npm install githubname/reponame podemos instalar directamente desde GitHub. Ver docs oficiales de npm install acá.

Por ejemplo, el course-parser que usamos para la currícula no está publicado en el registro público de NPM, así que lo instalamos directamente desde GitHub con el comando npm install Laboratoria/course-parser.

Sugerencias de implementación

La implementación de este proyecto tiene varias partes: leer del sistema de archivos, recibir argumentos a través de la línea de comando, analizar texto, hacer consultas HTTP, ... y todas estas cosas pueden enfocarse de muchas formas, tanto usando librerías como implementando en VanillaJS.

Por poner un ejemplo, el parseado (análisis) del markdown para extraer los links podría plantearse de las siguientes maneras (todas válidas):

Usando un módulo como markdown-it, que nos devuelve un arreglo de tokens que podemos recorrer para identificar los links.
Siguiendo otro camino completamente, podríamos usar expresiones regulares (RegExp).
También podríamos usar una combinación de varios módulos (podría ser válido transformar el markdown a HTML usando algo como marked y de ahí extraer los link con una librería de DOM como JSDOM o Cheerio entre otras).
Usando un custom renderer de marked (new marked.Renderer()).

No dudes en consultar a tus compañeras, coaches y/o el foro de la comunidad si tienes dudas existenciales con respecto a estas decisiones. No existe una "única" manera correcta :wink:

Tutoriales / NodeSchool workshoppers

Otros recursos

9. Checklist

General

[ ] Puede instalarse via npm install --global <github-user>/md-links

`README.md`

[ ] Un board con el backlog para la implementación de la librería.
[ ] Documentación técnica de la librería.
[ ] Guía de uso e instalación de la librería

API `mdLinks(path, opts)`

[ ] El módulo exporta una función con la interfaz (API) esperada.
[ ] Implementa soporte para archivo individual
[ ] Implementa soporte para directorios
[ ] Implementa options.validate

CLI

[ ] Expone ejecutable md-links en el path (configurado en package.json)
[ ] Se ejecuta sin errores / output esperado
[ ] Implementa --validate
[ ] Implementa --stats

Pruebas / tests

[ ] Pruebas unitarias cubren un mínimo del 70% de statements, functions, lines, y branches.
[ ] Pasa tests (y linters) (npm test).