Всё чаще слышу про Firecrawl - новый API для универсального скрэйпинга интернет страниц😰 по адекватным ценам (100 тысяч страниц в месяц зв 83 доллара). Сомневаюсь что прямо любые страницы (интересно как с Cloudflare борется). Но может он многое:
Интернет страница -> Markdown Интернет страница -> JSON Кроулинг и скрэйпинг в одном API
Вот тут хороший пример скачивания доков по ведущим LLM что бы потом можно было по ним вопросы Клоду задавать. Обязательно сам попробую в ближайшее время - расскажу.
Всё чаще слышу про Firecrawl - новый API для универсального скрэйпинга интернет страниц😰 по адекватным ценам (100 тысяч страниц в месяц зв 83 доллара). Сомневаюсь что прямо любые страницы (интересно как с Cloudflare борется). Но может он многое:
Интернет страница -> Markdown Интернет страница -> JSON Кроулинг и скрэйпинг в одном API
Вот тут хороший пример скачивания доков по ведущим LLM что бы потом можно было по ним вопросы Клоду задавать. Обязательно сам попробую в ближайшее время - расскажу.
In February 2014, the Ukrainian people ousted pro-Russian president Viktor Yanukovych, prompting Russia to invade and annex the Crimean peninsula. By the start of April, Pavel Durov had given his notice, with TechCrunch saying at the time that the CEO had resisted pressure to suppress pages criticizing the Russian government. There was another possible development: Reuters also reported that Ukraine said that Belarus could soon join the invasion of Ukraine. However, the AFP, citing a Pentagon official, said the U.S. hasn’t yet seen evidence that Belarusian troops are in Ukraine. And while money initially moved into stocks in the morning, capital moved out of safe-haven assets. The price of the 10-year Treasury note fell Friday, sending its yield up to 2% from a March closing low of 1.73%. Channels are not fully encrypted, end-to-end. All communications on a Telegram channel can be seen by anyone on the channel and are also visible to Telegram. Telegram may be asked by a government to hand over the communications from a channel. Telegram has a history of standing up to Russian government requests for data, but how comfortable you are relying on that history to predict future behavior is up to you. Because Telegram has this data, it may also be stolen by hackers or leaked by an internal employee. So, uh, whenever I hear about Telegram, it’s always in relation to something bad. What gives?
from fr