Hvis du bygger en Node.js-applikasjon som tar imot dokumenter lastet opp av brukere, har du sannsynligvis sett på en mappe full av PDF-er, DOCX-filer og PPTX-presentasjoner og lurt på: hvordan normaliserer jeg alt dette til noe LLM-pipelinen min faktisk kan bruke?
Dette innlegget går gjennom bruk av AnyMDs REST API fra Node.js — med fetch, axios, TypeScript-typer, streaming og Express middleware-mønstre for dokument-til-Markdown-konvertering i produksjonsskala.
Hvorfor Markdown fra Node.js?
Node.js-apper håndterer filopplasting naturlig — Multer, Busboy, Express middleware. Men å gjøre disse filene om til ren, strukturert tekst for RAG-pipelines eller AI-treningsdata betyr ofte tunge native bindings (PyMuPDF, LibreOffice, pandoc) som ikke hører hjemme i en JS-runtime.
AnyMD gir deg et stateless HTTP-API. Ett kall, ett svar, ren Markdown. Ingen native avhengigheter, ingen serverbaserte formatbiblioteker, ingen Python-underprosesser i Node.js-appen.
Kom raskt i gang med fetch (ingen avhengigheter)
Node.js 18+ leverer fetch globalt. Den enkleste engangskonverteringen:
const fs = require("fs");
const { readFile } = require("fs/promises");
async function convertToMarkdown(filePath, apiKey) {
const form = new FormData();
form.set("file", new Blob([await readFile(filePath)]), filePath);
const resp = await fetch("https://anymd.net/api/convert", {
method: "POST",
headers: { Authorization: `Bearer ${apiKey}` },
body: form,
});
if (!resp.ok) {
throw new Error(`AnyMD error ${resp.status}: ${await resp.text()}`);
}
return await resp.text();
}
// Usage
const md = await convertToMarkdown("report.docx", "your-api-key");
console.log(md);
Det er alt. AnyMD oppdager automatisk formatet fra filendelsen og returnerer GitHub-Flavored Markdown.
TypeScript med typede svar
For TypeScript-prosjekter kan du legge til riktige returtyper og feilhåndtering:
interface ConversionResult {
markdown: string;
format: string;
pages: number;
duration: number;
}
interface ConversionError {
status: number;
message: string;
}
async function convertToMarkdownTyped(
filePath: string,
apiKey: string
): Promise<ConversionResult> {
const form = new FormData();
const buffer = await fs.promises.readFile(filePath);
form.set("file", new Blob([buffer]), filePath);
const start = performance.now();
const resp = await fetch("https://anymd.net/api/convert", {
method: "POST",
headers: { Authorization: `Bearer ${apiKey}` },
body: form,
});
const duration = performance.now() - start;
if (!resp.ok) {
const err: ConversionError = {
status: resp.status,
message: await resp.text(),
};
throw err;
}
return {
markdown: await resp.text(),
format: filePath.split(".").pop() || "unknown",
pages: parseInt(resp.headers.get("X-Pages") || "0", 10),
duration: Math.round(duration),
};
}
Express middleware for upload-endepunkter
Slik kobler du AnyMD til en Express-server med Multer for filopplasting:
import express from "express";
import multer from "multer";
import fs from "fs/promises";
const app = express();
const upload = multer({ dest: "/tmp/uploads/" });
const ANYMD_API = "https://anymd.net/api/convert";
app.post("/upload", upload.single("file"), async (req, res) => {
try {
const apiKey = req.headers["authorization"]?.replace("Bearer ", "");
if (!apiKey) return res.status(401).json({ error: "Missing API key" });
const form = new FormData();
const buffer = await fs.readFile(req.file.path);
form.set("file", new Blob([buffer]), req.file.originalname);
const anymdResp = await fetch(ANYMD_API, {
method: "POST",
headers: { Authorization: `Bearer ${apiKey}` },
body: form,
});
if (!anymdResp.ok) {
return res.status(anymdResp.status).json({
error: await anymdResp.text(),
});
}
const markdown = await anymdResp.text();
res.json({ markdown, pages: anymdResp.headers.get("X-Pages") });
} catch (err) {
res.status(500).json({ error: err.message });
} finally {
if (req.file) fs.unlink(req.file.path).catch(() => {});
}
});
app.listen(3000);
Batchbehandling med axios og nye forsøk
Når du har hundrevis av dokumenter å behandle, er sekvensielle kall for trege. Her er en samtidig batchprosessor med axios:
import axios from "axios";
import FormData from "form-data";
import fs from "fs";
import path from "path";
import pLimit from "p-limit";
const API = "https://anymd.net/api/convert";
async function convertOne(filePath, apiKey) {
const form = new FormData();
form.append("file", fs.createReadStream(filePath), path.basename(filePath));
for (let attempt = 0; attempt < 3; attempt++) {
try {
const resp = await axios.post(API, form, {
headers: {
...form.getHeaders(),
Authorization: `Bearer ${apiKey}`,
},
maxContentLength: 50 * 1024 * 1024,
timeout: 30_000,
});
const outPath = filePath.replace(path.extname(filePath), ".md");
fs.writeFileSync(outPath, resp.data);
return { file: path.basename(filePath), ok: true };
} catch (err) {
if (attempt === 2) return { file: path.basename(filePath), ok: false, error: err.message };
const delay = Math.pow(1.5, attempt) * 1000;
await new Promise(r => setTimeout(r, delay));
}
}
}
async function batchConvert(dir, apiKey, concurrency = 10) {
const files = fs.readdirSync(dir).filter(f =>
/\.(docx|pdf|pptx|xlsx|epub|odt|rtf)$/i.test(f)
);
const limit = pLimit(concurrency);
const results = await Promise.all(
files.map(f => limit(() => convertOne(path.join(dir, f), apiKey)))
);
const ok = results.filter(r => r.ok).length;
console.log(`${ok}/${results.length} converted`);
return results;
}
await batchConvert("./documents", "your-api-key", 10);
Streaming av store dokumenter
For dokumenter over 10 MB bør du bruke streaming-endepunktet for å unngå å bufre hele Markdown-resultatet i minnet.
Sammenligning med lokale Node.js-biblioteker
| Format | Node.js-bibliotek | AnyMD |
|---|---|---|
| DOCX | mammoth — ingen støtte for PPTX/PDF/XLSX | Ett API, 15+ formater |
pdf-parse — mister tabeller og overskrifter | GFM, bevarer strukturen | |
| PPTX | pptx2md — bare CLI, ingen API | REST API, asynkron pipeline |
| XLSX | xlsx — CSV-eksport, ingen Markdown | Tabeller → GFM-tabeller |
| EPUB | epub2md — ikke vedlikeholdt siden 2022 | Aktivt, versjonert API |
Ytelse: Node.js snakker med Rust
AnyMD kjører på en Rust/Axum-backend.
| Format | Dokumentstørrelse | AnyMD (ms) | Lokalt bibliotek (ms) |
|---|---|---|---|
| DOCX | 50 KB (10 sider) | 280 | 620 (mammoth) |
| 120 KB (15 sider) | 410 | 2,100 (pdf-parse) | |
| PPTX | 200 KB (20 lysbilder) | 520 | 1,800 (pptx2md) |
| XLSX | 80 KB (5 ark) | 340 | 950 (xlsx + manuell formatering) |
Fra Markdown til en RAG-pipeline
Når Node.js-appen din har ren Markdown, er neste trinn chunking og embedding for vektorsøk. AnyMD-resultatet er ideelt som input til semantisk chunking — grenser ved overskrifter, listestruktur og tabelloverskrifter bevares.
Priser
| Plan | Sider/måned | Maksimal filstørrelse | Pris |
|---|---|---|---|
| Gratis | 100 | 10 MB | $0 |
| Starter | 500 | 25 MB | $19 |
| Pro | 5,000 | 50 MB | $99 |
| Enterprise | Tilpasset | Tilpasset | Tilpasset |
Et typisk dokument konverteres på under 0,5 sekund. 100 gratis sider per måned — uten kredittkort.
Få din gratis API-nøkkel og begynn å konvertere dokumenter til Markdown fra Node.js i dag.