← 科技新報報導科技新報AI 橫行,30 年前寫給「君子」的 robots.txt 擋得住今日爬蟲巨獸嗎?來源 地球圖輯隊2025/7/12 00:00#AI 人工智慧1 家 · 78 篇#Big Data#數位內容1 家 · 11 篇#網路12 家 · 52 篇#軟體、系統1 家 · 8 篇#開放資料1 家 · 2 篇#Google 搜尋#REP#robots.txt2 家 · 2 篇#機器人排除協議#生成式 AI1 家 · 6 篇#網路爬蟲1 家 · 3 篇近日台灣法律科技新創「七法公司」(Lawsnote),因使用網路爬蟲(Web Crawler)程式抓取法學資料 […]...https://technews.tw/2025/07/12/the-liabilities-of-robots-txt/