Một công cụ mạnh mẽ để lấy và phân tích nội dung trang web thành Markdown hoặc văn bản có cấu trúc thông qua một proxy an toàn, được quản lý.
Cài đặt & Tải xuống
1. ClawHub CLI
Cách nhanh nhất để cài đặt kỹ năng trực tiếp từ thư viện.
npx clawhub@latest install proxy-web-fetch
2. Cài đặt Thủ công
Sao chép thư mục kỹ năng vào một trong những vị trí sau
~/.openclaw/skills/ <project>/skills/ Ưu tiên: Không gian làm việc > Cục bộ > Gói sẵn
3. Cài đặt Prompt
Sao chép prompt này vào OpenClaw để tự động cài đặt.
Giúp tôi cài đặt proxy-web-fetch bằng Clawhub. Nếu Clawhub chưa
Bạn muốn tải xuống?
Nhận các tệp kỹ năng gốc dưới dạng lưu trữ ZIP.
Proxy Web Page Fetch là gì?
Kỹ năng Proxy Web Page Fetch là một tiện ích chuyên dụng được thiết kế để thu hẹp khoảng cách giữa các tác nhân AI và web trực tiếp. Bằng cách định tuyến các yêu cầu thông qua OpenClaw Manager Web Fetch Proxy, nó đơn giản hóa quy trình truy xuất nội dung web bằng cách xử lý việc quản lý API key phức tạp và các secrets được mã hóa nội bộ. Điều này đảm bảo rằng các nhà phát triển có thể tập trung vào việc xử lý nội dung thay vì quản lý xác thực.
Là một phần cốt lõi của thư viện Openclaw Skills, công cụ này cung cấp một cách đáng tin cậy để chuyển đổi bất kỳ URL nào thành Markdown máy có thể đọc được hoặc văn bản thuần túy. Cho dù bạn cần thu thập tài liệu kỹ thuật, lấy các bài đăng trên blog hay trích xuất siêu dữ liệu sâu, công cụ này đều xử lý công việc nặng nhọc của việc phân tích cú pháp web với các tùy chọn có cấu hình cao để lưu trữ bộ nhớ đệm, giữ lại hình ảnh và tóm tắt liên kết.
Trường hợp sử dụng Proxy Web Page Fetch
- Đọc và nạp tài liệu kỹ thuật trực tiếp từ một URL trực tiếp.
- Trích xuất văn bản sạch, có cấu trúc từ các bài báo để phân tích hoặc tóm tắt bằng AI.
- Thu thập siêu dữ liệu trang bao gồm tiêu đề, từ khóa và mô tả để nghiên cứu SEO.
- Tạo tóm tắt toàn diện về các trang web bao gồm mô tả hình ảnh và danh sách liên kết.
- Vượt qua các hạn chế của môi trường địa phương bằng cách sử dụng một fetch proxy tập trung.
Cách thức hoạt động của Proxy Web Page Fetch
- Kỹ năng nhận một URL mục tiêu và các tham số định dạng tùy chọn từ người dùng hoặc tác nhân.
- Yêu cầu được định tuyến đến máy chủ proxy trung tâm được chỉ định trong cấu hình môi trường.
- OpenClaw Manager tự động chèn các API keys cần thiết từ kho lưu trữ secrets được mã hóa của nó.
- Proxy lấy nội dung HTML từ xa và phân tích cú pháp thành định dạng mong muốn (Markdown hoặc văn bản).
- Một phản hồi JSON có cấu trúc được trả về, chứa nội dung đã phân tích cú pháp, tiêu đề trang và siêu dữ liệu phong phú để xử lý thêm.
Cài đặt Proxy Web Page Fetch
Để tích hợp kỹ năng này vào quy trình làm việc của bạn, hãy đảm bảo môi trường được cấu hình chính xác trong khung Openclaw Skills.
# Define the required proxy URL environment variable
export WEB_FETCH_PROXY_URL="https://your-manager-proxy-url.com"
# Ensure curl is available on your system
sudo apt-get install curl
# Test the skill using the provided wrapper script
./scripts/proxy_fetch.sh --url "https://example.com"
Lược đồ dữ liệu & Hệ thống phân loại của Proxy Web Page Fetch
Kỹ năng trả về một đối tượng JSON có cấu trúc chứa các trường chính sau:
| Field | Type | Description |
|---|---|---|
reader_result.content |
String | Nội dung chính đã phân tích cú pháp của trang ở định dạng Markdown hoặc Văn bản. |
reader_result.title |
String | Tiêu đề HTML được trích xuất của trang web. |
reader_result.description |
String | Một tóm tắt ngắn gọn hoặc mô tả meta của trang. |
reader_result.metadata |
Object | Chứa dữ liệu SEO như từ khóa, viewport và thẻ open-graph. |
reader_result.url |
String | URL chuẩn cuối cùng đã được lấy. |
Tính năng Nâng cao của Proxy Web Page Fetch
- Quản lý Secret nội bộ: Tự động xử lý API keys thông qua kho lưu trữ mã hóa của Manager mà không cần cấu hình thủ công.
- Định dạng tùy chỉnh: Hỗ trợ cả văn bản tiêu chuẩn và đầu ra GitHub Flavored Markdown (GFM).
- Kiểm soát bộ nhớ đệm: Bao gồm cờ
--no-cacheđể buộc lấy mới cho nội dung động. - Lọc nội dung: Khả năng loại bỏ hình ảnh, giữ lại URL dữ liệu hoặc tạo tóm tắt liên kết chuyên dụng.
- Thời gian chờ mở rộng: Có thể định cấu hình thời gian chờ yêu cầu để lấy tài liệu doanh nghiệp nặng hoặc tải chậm.
SKILL.md
Đang tải
Các kỹ năng Openclaw liên quan
Trình Thu Thập Dữ Liệu Cổ Phiếu A-Share
Một công cụ thu thập dữ liệu hiệu suất cao được thiết kế để xây dựng và duy trì cơ sở dữ liệu SQLite cục bộ về dữ liệu K-line lịch sử của thị trường cổ phiếu A Trung Quốc.
Giảng dạy lặp lại ngắt quãng (FSRS-6)
Một công cụ lặp lại ngắt quãng thích ứng sử dụng thuật toán FSRS-6 tiên tiến nhất để tối ưu hóa việc ôn tập thẻ ghi nhớ nhằm duy trì trí nhớ dài hạn.
Digital Labour
Một bộ gồm 24 AI Agents chuyên dụng toàn diện được thiết kế để tự động hóa các hoạt động hậu cần kinh doanh thông qua một API thống nhất.
ArbiScan - Công cụ quét & Giám sát tiền điện tử liên sàn
ArbiScan là một công cụ quét thị trường toàn diện chỉ đọc, giúp xác định các cơ hội chênh lệch giá và tín hiệu giao dịch trên bốn sàn giao dịch tiền điện tử lớn.
fundnews-search
Một trình tổng hợp tin tức tự động thu thập các cập nhật về ngành quỹ tương hỗ từ các nền tảng tài chính lớn của Trung Quốc và tạo các báo cáo Word có cấu trúc.
Kỹ năng giọng nói tiếng Trung
Một kỹ năng chuyển văn bản thành giọng nói cấp chuyên nghiệp tận dụng Microsoft Edge TTS để tạo ra các phản hồi giọng nói tiếng Trung tự nhiên cho các đại lý AI.
Đặc sắc*
