# Firecrawl - 웹사이트 전체를 LLM에서 사용가능하게 만드는 도구

> Clean Markdown view of GeekNews topic #17743. Use the original source for factual precision when an external source URL is present.

## Metadata

- GeekNews HTML: [https://news.hada.io/topic?id=17743](https://news.hada.io/topic?id=17743)
- GeekNews Markdown: [https://news.hada.io/topic/17743.md](https://news.hada.io/topic/17743.md)
- Type: news
- Author: [xguru](https://news.hada.io/@xguru)
- Published: 2024-11-14T09:47:01+09:00
- Updated: 2024-11-14T09:47:01+09:00
- Original source: [github.com/mendableai](https://github.com/mendableai/firecrawl)
- Points: 15
- Comments: 2

## Summary

Firecrawl은 웹사이트를 크롤링하여 LLM에서 사용 가능한 마크다운 또는 구조화된 데이터로 변환하는 도구입니다. API를 통해 URL을 전송하면 모든 하위 페이지를 크롤링하여 각 페이지에 대한 깨끗한 데이터를 제공합니다. Python, Node, Go, Rust SDK를 제공하며 LangChain, Llama Index, Dify, Langflow, Zapier 등과의 연동을 지원합니다.

## Topic Body

- 웹사이트를 크롤링해서 LLM에서 사용가능한 마크다운 또는 구조화 데이터로 변환   
- API로 URL을 전송하면, 모든 하위 페이지를 크롤링하여 각 하위 페이지에 대한 깨끗한 데이터를 제공  
- Python, Node, Go, Rust SDK 제공   
- LangChain, Llama Index,Dify, Langflow, Zapier 등에 연동지원

## Comments



### Comment 31274

- Author: hoonix
- Created: 2024-11-15T07:32:45+09:00
- Points: 1

하위 크롤링을 지원하지는 않지만, 유사한 목적의 문서 포맷 변환기를 소개해봅니다.  
https://github.com/DS4SD/docling

### Comment 31229

- Author: laeyoung
- Created: 2024-11-14T10:48:39+09:00
- Points: 1

원하는대로 잘 되진 않네요