專案網址:https://github.com/ray-d-song/web-archive
為什麼要建構這個工具
我長期以來一直是 ArchiveBox 的忠實用戶。 ArchiveBox是一個非常好的網頁歸檔工具,但是它需要自託管,並且對伺服器要求很高(需要無頭瀏覽器)。我之前用過樹莓派,效能不好
而像x、Medium這樣需要登入的網站,ArchiveBox需要手動設定token或cookie,比較麻煩。
於是我想,能不能有一個不需要自架、不需要無頭瀏覽器、對伺服器沒有要求、可以跨平台的網頁歸檔工具呢?然後我就可以隨時隨地在任何裝置上存取我的存檔頁面。
為什麼選擇 Cloudflare
Cloudflare 的 Workers 服務非常強大且免費,擁有大量的 D1 資料庫和 R2 儲存桶,非常適合建立這個工具。
更重要的是,Cloudflare生態系統完整,支援一鍵部署和資料遷移。也可以使用Cloudflare的全球CDN服務。
這個工具能做什麼
- [x] 資料夾分類
- [x] 頁面預覽圖
- [x] 標題關鍵字搜尋
- [x] 展示、分享您拍攝的頁面
- [x] 行動支援
- [x] 標籤分類系統
- [x] 閱讀模式
它是如何運作的
網路存檔由以下部分組成:
- 瀏覽器擴充功能:將頁面儲存為網頁快照並上傳到伺服器。
- 伺服器:接收瀏覽器擴充功能上傳的快照和元數據,並將其儲存在資料庫和儲存桶中。
- Web客戶端:查詢快照並顯示。
我使用SingleFile的開源程式碼將頁面儲存為單一html檔案(甚至包括圖片和影片)。
伺服器完全基於Cloudflare的Workers服務,D1資料庫用於儲存元數據,R2儲存桶用於儲存快照。
雖然介面數量不小,但我並沒有使用ORM,實際上我嘗試過prisma和drizzle,因為它們給部署帶來了很大的麻煩,所以最終沒有使用。
Web客戶端使用React、Vite、TailwindCSS和shadcn/ui構建,打包後的大小小得驚人,只有1.5MB。打包後的產品會嵌入到伺服器的assets資料夾中,所以部署伺服器時不需要單獨部署。
限制
我真的很喜歡 Cloudflare 的免費服務,但有一些限制。
- 單一請求的CPU運算時間不能超過10毫秒,否則將被強制終止。 (我驚訝地發現付費帳號是30秒?)
- 記憶體使用量不能超過256MB,否則將被強制終止。
這些限制在一定程度上影響了網站的建設,例如爬取時的ssr或dom解析。
但是,無論怎麼說,謝謝你,Cloudflare!
以上是我建立了一個在 Cloudflare 上運行的全端 Web 存檔工具的詳細內容。更多資訊請關注PHP中文網其他相關文章!

我使用您的日常技術工具構建了功能性的多租戶SaaS應用程序(一個Edtech應用程序),您可以做同樣的事情。 首先,什麼是多租戶SaaS應用程序? 多租戶SaaS應用程序可讓您從唱歌中為多個客戶提供服務

本文展示了與許可證確保的後端的前端集成,並使用Next.js構建功能性Edtech SaaS應用程序。 前端獲取用戶權限以控制UI的可見性並確保API要求遵守角色庫

JavaScript是現代Web開發的核心語言,因其多樣性和靈活性而廣泛應用。 1)前端開發:通過DOM操作和現代框架(如React、Vue.js、Angular)構建動態網頁和單頁面應用。 2)服務器端開發:Node.js利用非阻塞I/O模型處理高並發和實時應用。 3)移動和桌面應用開發:通過ReactNative和Electron實現跨平台開發,提高開發效率。

JavaScript的最新趨勢包括TypeScript的崛起、現代框架和庫的流行以及WebAssembly的應用。未來前景涵蓋更強大的類型系統、服務器端JavaScript的發展、人工智能和機器學習的擴展以及物聯網和邊緣計算的潛力。

JavaScript是現代Web開發的基石,它的主要功能包括事件驅動編程、動態內容生成和異步編程。 1)事件驅動編程允許網頁根據用戶操作動態變化。 2)動態內容生成使得頁面內容可以根據條件調整。 3)異步編程確保用戶界面不被阻塞。 JavaScript廣泛應用於網頁交互、單頁面應用和服務器端開發,極大地提升了用戶體驗和跨平台開發的靈活性。

Python更适合数据科学和机器学习,JavaScript更适合前端和全栈开发。1.Python以简洁语法和丰富库生态著称,适用于数据分析和Web开发。2.JavaScript是前端开发核心,Node.js支持服务器端编程,适用于全栈开发。

JavaScript不需要安裝,因為它已內置於現代瀏覽器中。你只需文本編輯器和瀏覽器即可開始使用。 1)在瀏覽器環境中,通過標籤嵌入HTML文件中運行。 2)在Node.js環境中,下載並安裝Node.js後,通過命令行運行JavaScript文件。

如何在Quartz中提前發送任務通知在使用Quartz定時器進行任務調度時,任務的執行時間是由cron表達式設定的。現�...


熱AI工具

Undresser.AI Undress
人工智慧驅動的應用程序,用於創建逼真的裸體照片

AI Clothes Remover
用於從照片中去除衣服的線上人工智慧工具。

Undress AI Tool
免費脫衣圖片

Clothoff.io
AI脫衣器

AI Hentai Generator
免費產生 AI 無盡。

熱門文章

熱工具

EditPlus 中文破解版
體積小,語法高亮,不支援程式碼提示功能

SublimeText3 Linux新版
SublimeText3 Linux最新版

WebStorm Mac版
好用的JavaScript開發工具

禪工作室 13.0.1
強大的PHP整合開發環境

Atom編輯器mac版下載
最受歡迎的的開源編輯器