LangChain支持哔哩哔哩视频总结

作者：毛毛的毛毛
是基于LangChain框架下的开发，所以最开始请先

1. pip install Langchain
2. pip install bilibili-api-python

复制代码

技术要点：

使用Langchain框架自带的Document loaders
修改BiliBiliLoader的源码，自带的并不支持当前b站的视频加载

源码文件修改：

1. import json
2. import re
3. import warnings
4. from typing import List, Tuple
6. import requests
7. from langchain_core.documents import Document
8. from bilibili_api import sync, video
9. from langchain_community.document_loaders.base import BaseLoader
10. # Pre-compile regular expressions for video ID extraction
11. BV_PATTERN = re.compile(r"BV\w+")
12. AV_PATTERN = re.compile(r"av[0-9]+")
14. class BiliBiliLoader(BaseLoader):
15.     """
16.     Loader for fetching transcripts from BiliBili videos.
17.     """
19.     def __init__(self, video_urls: List[str], sessdata: str, bili_jct: str, buvid3: str):
20.         """Initialize with bilibili url.
22.         Args:
23.              video_urls (List[str]): List of BiliBili v

复制代码

原文地址：https://blog.csdn.net/weixin_41227420/article/details/136238039