今天给大家分享一个使用TypeScript和node-fetch库的采集程序，主要用于采集百度的相关视频，代码非常经典，一起来看看吧。
代码语言：javascript复制```typescript
import fetch from 'node-fetch';
const getProxy = async (): Promise => {
const response = await fetch('https://www.duoip.cn/get_proxy');
const data = await response.text();
return data.trim();
};
const downloadVideo = async (url: string, proxy: string): Promise => {
const fetchOptions = {
method: 'GET',
headers: {
'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.36',
'Proxy-Connection': 'keep-alive',
'Pragma': 'no-cache',
'Cache-Control': 'no-cache',
},
};
if (proxy) {
fetchOptions.agent = new fetch.Agent({
http: {
agent: new fetch.HttpAgent({
host: proxy.split(':')[0],
port: parseInt(proxy.split(':')[1], 10),
protocol: 'http:',
}),
},
});
}
const response = await fetch(url, fetchOptions);
const buffer = await response.buffer();
const videoData = Buffer.from(buffer).toString('base64');
// 保存视频数据到文件
const fs = require('fs');
fs.writeFileSync('output.mp4', Buffer.from(videoData, 'base64'));
};
(async () => {
const proxy = await getProxy();
const videoUrl = 'https://www.baidu.com/xxx/xxx.mp4'; // 请替换为目标视频的实际链接
await downloadVideo(videoUrl, proxy);
console.log('视频下载完成！');
})();
```上面这段代码在执行过程中，首先获取代理，然后使用node-fetch将视频下载到本地。要注意的是，代码主要用于示例教学，在实际使用前，请遵守相关法律法规，尊重版权所有者的权益。
