AI创想

标题: LangChain支持哔哩哔哩视频总结 [打印本页]

---

作者: dzmzyqy    时间: 昨天 22:39
标题: LangChain支持哔哩哔哩视频总结
作者：毛毛的毛毛
是基于LangChain框架下的开发，所以最开始请先

1. pip install Langchain
2. pip install bilibili-api-python

复制代码

技术要点：

使用Langchain框架自带的Document loaders
修改BiliBiliLoader的源码，自带的并不支持当前b站的视频加载

源码文件修改：

1. import json
2. import re
3. import warnings
4. from typing import List, Tuple
6. import requests
7. from langchain_core.documents import Document
8. from bilibili_api import sync, video
9. from langchain_community.document_loaders.base import BaseLoader
10. # Pre-compile regular expressions for video ID extraction
11. BV_PATTERN = re.compile(r"BV\w+")
12. AV_PATTERN = re.compile(r"av[0-9]+")
14. class BiliBiliLoader(BaseLoader):
15.     """
16.     Loader for fetching transcripts from BiliBili videos.
17.     """
19.     def __init__(self, video_urls: List[str], sessdata: str, bili_jct: str, buvid3: str):
20.         """Initialize with bilibili url.
22.         Args:
23.              video_urls (List[str]): List of BiliBili v

复制代码

原文地址：https://blog.csdn.net/weixin_41227420/article/details/136238039

---

欢迎光临 AI创想 (https://www.llms-ai.com/)

Powered by Discuz! X3.4