Una librería es un archivo .lib, es un proceso que no es tan simple y debieras saber como hacer 'relocatable coding'.
¿Tu quieres hacer eso o quieres separar tu código?
Si quieres separar tu código en archivos diferentes, puedes sí, hacer un archivo .inc o un .asm y hacerle un include dentro de tu archivo .asm principal. Esa es la forma artesanal de hacerlo.
Si trabajas con proyectos , la forma más complicada pero potente es hacer lo que se llama relocatable coding pero es un tema largo de explicar.