# AI 사이트 링크 크롤링

안녕하세요! 간단한 사이트 링크 입력만으로 해당 웹사이트에 존재하는 링크를 한번에 수집 가능한 기능을 알아볼까요?

이 기능은 간단하게 AI로 웹페이지 내 링크 정보들을 수집할 수 있는 기능이에요. 

***

## AI로 웹사이트 링크 크롤링

{% @arcade/embed flowId="J8nYKTnNWVk2nqybvbCz" url="<https://app.arcade.software/share/J8nYKTnNWVk2nqybvbCz>" %}

#### 1. AI 사이트 링크 크롤링 액션을 선택해 시작하세요.

![](https://worker.arcade.software/image-transform?image=https%3A%2F%2Fcdn.arcade.software%2Fextension-uploads%2FJ8nYKTnNWVk2nqybvbCz%2Fimage%2Fe6900184-7cb4-48ac-84ae-1ba84b4c4e4b.png\&hotspot=220.90132040827217%3B1325.9913224956063%3B%231484EC)

#### 2. 수집하려는 웹사이트의 링크를 직접 입력하거나 데이터태그를 활용하여 입력합니다.

![](https://worker.arcade.software/image-transform?image=https%3A%2F%2Fcdn.arcade.software%2Fextension-uploads%2FJ8nYKTnNWVk2nqybvbCz%2Fimage%2Fb87aa7e1-93c5-4244-9efc-ad86ccb98440.png\&hotspot=156.53685694913077%3B760.4766219976567%3B%231484EC)

![](https://image.mux.com/00BSG2TgcqjgFuNNUaV01w015tAeTj02qZJy3YCNDYL4Wvs/animated.gif?start=12.696\&end=16.117\&width=640\&fps=30)

#### 3. 수집하려는 URL에 반드시 포함될 키워드를 입력합니다. 예시인 캐치 테이블의 경우 식당 상세페이지에는 shop이라는 단어가 항상 포함이 됩니다.

{% hint style="info" %}

* URL에 포함이 되어야 하는 특정 단어가 있다면 입력해주세요.&#x20;

  :bulb:예: 쿠팡에서 특정 카테고리의 상품을 수집하려면 `product`, `categoryId=403145`처럼 설정할 수 있어요.\
  (예시 URL: `https://www.coupang.com/vp/products/...&categoryId=403145`)
* 서브도메인 포함 여부, 사이트맵 제외 여부를 선택해주세요.&#x20;
  1. 서브도메인은 하나의 웹사이트 안에서 다른 기능이나 공간을 구분하기 위해 사용하는 주소예요.
  2. 사이트맵은 웹사이트 안에 있는 모든 페이지 목록을 정리해둔 지도예요
     {% endhint %}

![](https://worker.arcade.software/image-transform?image=https%3A%2F%2Fcdn.arcade.software%2Fextension-uploads%2FJ8nYKTnNWVk2nqybvbCz%2Fimage%2Fb34423f5-688f-4dc0-814d-594b9d6a3868.png\&hotspot=247.14698757291706%3B819.8398940941711%3B%231484EC)

![](https://image.mux.com/00BSG2TgcqjgFuNNUaV01w015tAeTj02qZJy3YCNDYL4Wvs/animated.gif?start=16.117\&end=21.992\&width=640\&fps=30)

#### 4.수집할 최대 링크 개수를 설정하세요. 최대 30,000개의 링크를 한번에 수집할 수 있습니다.

![](https://worker.arcade.software/image-transform?image=https%3A%2F%2Fcdn.arcade.software%2Fextension-uploads%2FJ8nYKTnNWVk2nqybvbCz%2Fimage%2F74d2093b-4411-449b-a026-86c07e8b3358.png\&hotspot=372.12652938117367%3B792.3453976274164%3B%231484EC)

![](https://image.mux.com/00BSG2TgcqjgFuNNUaV01w015tAeTj02qZJy3YCNDYL4Wvs/animated.gif?start=21.992\&end=27.415000000000003\&width=640\&fps=30)

#### 5. 입력한 설정으로 다음 단계로 이동합니다.

![](https://worker.arcade.software/image-transform?image=https%3A%2F%2Fcdn.arcade.software%2Fextension-uploads%2FJ8nYKTnNWVk2nqybvbCz%2Fimage%2F0cff7698-2504-4379-9301-54d29e9b0ea5.png\&hotspot=422.743228366527%3B872.3296421902461%3B%231484EC)

![](https://image.mux.com/00BSG2TgcqjgFuNNUaV01w015tAeTj02qZJy3YCNDYL4Wvs/animated.gif?start=27.415000000000003\&end=30.615\&width=640\&fps=30)

#### 6.  수집된 데이터를 저장할 시트와 셀 위치를 선택합니다.

![](https://worker.arcade.software/image-transform?image=https%3A%2F%2Fcdn.arcade.software%2Fextension-uploads%2FJ8nYKTnNWVk2nqybvbCz%2Fimage%2F34ecbc85-1400-4018-aa03-db023985b0b1.png\&hotspot=234.02416829336377%3B739.8556495313416%3B%231484EC)

![](https://image.mux.com/00BSG2TgcqjgFuNNUaV01w015tAeTj02qZJy3YCNDYL4Wvs/animated.gif?start=30.615\&end=37.45\&width=640\&fps=30)

#### 7. 설정을 완료하여 AI 사이트 링크 수집을 설정을 완료합니다.

![](https://worker.arcade.software/image-transform?image=https%3A%2F%2Fcdn.arcade.software%2Fextension-uploads%2FJ8nYKTnNWVk2nqybvbCz%2Fimage%2F8afc504f-def4-42ad-845b-19056a1fa675.png\&hotspot=306.51228995571574%3B900.4491500988577%3B%231484EC)

#### 8. 한 번만 실행하기를 눌러 AI로 사이트 링크를 수집합니다.

![](https://worker.arcade.software/image-transform?image=https%3A%2F%2Fcdn.arcade.software%2Fextension-uploads%2FJ8nYKTnNWVk2nqybvbCz%2Fimage%2F62ac01bc-6af1-4a8e-a538-20dccdbf102b.png\&hotspot=757.063362536476%3B1275.3762082601054%3B%231484EC)

#### 9. 완료 메시지를 닫고 수집 결과를 확인하세요.

![](https://worker.arcade.software/image-transform?image=https%3A%2F%2Fcdn.arcade.software%2Fextension-uploads%2FJ8nYKTnNWVk2nqybvbCz%2Fimage%2Fc7bc700a-822f-42b2-8c35-199ef04cf9b0.png\&hotspot=307.76203731649406%3B1039.796952804628%3B%231484EC)

![](https://image.mux.com/00BSG2TgcqjgFuNNUaV01w015tAeTj02qZJy3YCNDYL4Wvs/animated.gif?start=56.606\&end=65.42999999999999\&width=640\&fps=30)

***

{% hint style="warning" %}
Beta 기능으로 AI의 처리가 불완전할 수 있습니다. 처리 이후에는 결과를 확인해주세요.
{% endhint %}


---

# Agent Instructions: Querying This Documentation

If you need additional information that is not directly available in this page, you can query the documentation dynamically by asking a question.

Perform an HTTP GET request on the current page URL with the `ask` query parameter:

```
GET https://guide.bati.ai/service/action/ai_link_crawl.md?ask=<question>
```

The question should be specific, self-contained, and written in natural language.
The response will contain a direct answer to the question and relevant excerpts and sources from the documentation.

Use this mechanism when the answer is not explicitly present in the current page, you need clarification or additional context, or you want to retrieve related documentation sections.