> For the complete documentation index, see [llms.txt](https://batiai.gitbook.io/service/llms.txt). Markdown versions of documentation pages are available by appending `.md` to page URLs; this page is available as [Markdown](https://batiai.gitbook.io/service/action/ai_link_crawl.md). # AI 사이트 링크 크롤링 안녕하세요! 간단한 사이트 링크 입력만으로 해당 웹사이트에 존재하는 링크를 한번에 수집 가능한 기능을 알아볼까요? 이 기능은 간단하게 AI로 웹페이지 내 링크 정보들을 수집할 수 있는 기능이에요. *** ## AI로 웹사이트 링크 크롤링 {% @arcade/embed flowId="J8nYKTnNWVk2nqybvbCz" url="" %} #### 1. AI 사이트 링크 크롤링 액션을 선택해 시작하세요. ![](https://worker.arcade.software/image-transform?image=https%3A%2F%2Fcdn.arcade.software%2Fextension-uploads%2FJ8nYKTnNWVk2nqybvbCz%2Fimage%2Fe6900184-7cb4-48ac-84ae-1ba84b4c4e4b.png\&hotspot=220.90132040827217%3B1325.9913224956063%3B%231484EC) #### 2. 수집하려는 웹사이트의 링크를 직접 입력하거나 데이터태그를 활용하여 입력합니다. ![](https://worker.arcade.software/image-transform?image=https%3A%2F%2Fcdn.arcade.software%2Fextension-uploads%2FJ8nYKTnNWVk2nqybvbCz%2Fimage%2Fb87aa7e1-93c5-4244-9efc-ad86ccb98440.png\&hotspot=156.53685694913077%3B760.4766219976567%3B%231484EC) ![](https://image.mux.com/00BSG2TgcqjgFuNNUaV01w015tAeTj02qZJy3YCNDYL4Wvs/animated.gif?start=12.696\&end=16.117\&width=640\&fps=30) #### 3. 수집하려는 URL에 반드시 포함될 키워드를 입력합니다. 예시인 캐치 테이블의 경우 식당 상세페이지에는 shop이라는 단어가 항상 포함이 됩니다. {% hint style="info" %} * URL에 포함이 되어야 하는 특정 단어가 있다면 입력해주세요. :bulb:예: 쿠팡에서 특정 카테고리의 상품을 수집하려면 `product`, `categoryId=403145`처럼 설정할 수 있어요.\ (예시 URL: `https://www.coupang.com/vp/products/...&categoryId=403145`) * 서브도메인 포함 여부, 사이트맵 제외 여부를 선택해주세요. 1. 서브도메인은 하나의 웹사이트 안에서 다른 기능이나 공간을 구분하기 위해 사용하는 주소예요. 2. 사이트맵은 웹사이트 안에 있는 모든 페이지 목록을 정리해둔 지도예요 {% endhint %} ![](https://worker.arcade.software/image-transform?image=https%3A%2F%2Fcdn.arcade.software%2Fextension-uploads%2FJ8nYKTnNWVk2nqybvbCz%2Fimage%2Fb34423f5-688f-4dc0-814d-594b9d6a3868.png\&hotspot=247.14698757291706%3B819.8398940941711%3B%231484EC) ![](https://image.mux.com/00BSG2TgcqjgFuNNUaV01w015tAeTj02qZJy3YCNDYL4Wvs/animated.gif?start=16.117\&end=21.992\&width=640\&fps=30) #### 4.수집할 최대 링크 개수를 설정하세요. 최대 30,000개의 링크를 한번에 수집할 수 있습니다. ![](https://worker.arcade.software/image-transform?image=https%3A%2F%2Fcdn.arcade.software%2Fextension-uploads%2FJ8nYKTnNWVk2nqybvbCz%2Fimage%2F74d2093b-4411-449b-a026-86c07e8b3358.png\&hotspot=372.12652938117367%3B792.3453976274164%3B%231484EC) ![](https://image.mux.com/00BSG2TgcqjgFuNNUaV01w015tAeTj02qZJy3YCNDYL4Wvs/animated.gif?start=21.992\&end=27.415000000000003\&width=640\&fps=30) #### 5. 입력한 설정으로 다음 단계로 이동합니다. ![](https://worker.arcade.software/image-transform?image=https%3A%2F%2Fcdn.arcade.software%2Fextension-uploads%2FJ8nYKTnNWVk2nqybvbCz%2Fimage%2F0cff7698-2504-4379-9301-54d29e9b0ea5.png\&hotspot=422.743228366527%3B872.3296421902461%3B%231484EC) ![](https://image.mux.com/00BSG2TgcqjgFuNNUaV01w015tAeTj02qZJy3YCNDYL4Wvs/animated.gif?start=27.415000000000003\&end=30.615\&width=640\&fps=30) #### 6. 수집된 데이터를 저장할 시트와 셀 위치를 선택합니다. ![](https://worker.arcade.software/image-transform?image=https%3A%2F%2Fcdn.arcade.software%2Fextension-uploads%2FJ8nYKTnNWVk2nqybvbCz%2Fimage%2F34ecbc85-1400-4018-aa03-db023985b0b1.png\&hotspot=234.02416829336377%3B739.8556495313416%3B%231484EC) ![](https://image.mux.com/00BSG2TgcqjgFuNNUaV01w015tAeTj02qZJy3YCNDYL4Wvs/animated.gif?start=30.615\&end=37.45\&width=640\&fps=30) #### 7. 설정을 완료하여 AI 사이트 링크 수집을 설정을 완료합니다. ![](https://worker.arcade.software/image-transform?image=https%3A%2F%2Fcdn.arcade.software%2Fextension-uploads%2FJ8nYKTnNWVk2nqybvbCz%2Fimage%2F8afc504f-def4-42ad-845b-19056a1fa675.png\&hotspot=306.51228995571574%3B900.4491500988577%3B%231484EC) #### 8. 한 번만 실행하기를 눌러 AI로 사이트 링크를 수집합니다. ![](https://worker.arcade.software/image-transform?image=https%3A%2F%2Fcdn.arcade.software%2Fextension-uploads%2FJ8nYKTnNWVk2nqybvbCz%2Fimage%2F62ac01bc-6af1-4a8e-a538-20dccdbf102b.png\&hotspot=757.063362536476%3B1275.3762082601054%3B%231484EC) #### 9. 완료 메시지를 닫고 수집 결과를 확인하세요. ![](https://worker.arcade.software/image-transform?image=https%3A%2F%2Fcdn.arcade.software%2Fextension-uploads%2FJ8nYKTnNWVk2nqybvbCz%2Fimage%2Fc7bc700a-822f-42b2-8c35-199ef04cf9b0.png\&hotspot=307.76203731649406%3B1039.796952804628%3B%231484EC) ![](https://image.mux.com/00BSG2TgcqjgFuNNUaV01w015tAeTj02qZJy3YCNDYL4Wvs/animated.gif?start=56.606\&end=65.42999999999999\&width=640\&fps=30) *** {% hint style="warning" %} Beta 기능으로 AI의 처리가 불완전할 수 있습니다. 처리 이후에는 결과를 확인해주세요. {% endhint %}