Springboot实战：AI大模型+亮数据代理助力短视频时代

前言

1.如何入门亮数据

1.1、注册登录

亮数据是一个全球ip代理资源服务商，提供了大量的动态ip和静态住宅ip资源。通过使用其代理服务，我们可以模拟固定某个区域的真实用户访问，有效隐匿我们自己的ip，保护好我们自己的电脑和数据安全。

1.2、注册账号

输入邮箱的工作邮箱和电话，完善其他信息，就可以注册账号了。

1.3、登录

使用注册时的邮箱账号登录，不记得密码的，可以使用邮箱验证码登录。

1.4、购买静态住宅代理

选择购买静态住宅代理

1.5、展示购买的代理

回到个人中心首页，显示了我购买的代理。下面isp_proxy2就是刚购买的代理，类型是静态住宅，状态是运行，流量已使用311.31mb（刷刷刷的获取素材，可见后文）。

2. 使用springboot、ai大模型构建系统

springboot是一个开源的java框架，用于创建独立、生产级的基于spring框架的应用程序。而ai大模型能够理解和生成自然语言文本。通过将两者集成，我们可以构建一个自动化的短视频素材获取系统。

2.1 使用springboot、ai大模型构建爬虫

springboot提供了强大的开发功能，结合selenium、chromedriver、jsoup等工具，可以轻松实现对目标网站的get请求，获取视频和图片素材。

2.2、在springboot项目添加工具

在springboot项目中添加selenium、chromedriver、jsoup工具。
不懂的话，可以在csdn里可以通过大模型去搜索答案。

找到springboot项目的pom.xml文件，把大模型里的对应答案复制进去（jar包版本号可以根据程序运行情况调整）。

<?xml version="1.0" encoding="utf-8"?>
<project xmlns="http://maven.apache.org/pom/4.0.0" xmlns:xsi="http://www.w3.org/2001/xmlschema-instance"
         xsi:schemalocation="http://maven.apache.org/pom/4.0.0 https://maven.apache.org/xsd/maven-4.0.0.xsd">
    <modelversion>4.0.0</modelversion>
    <parent>
        <groupid>org.springframework.boot</groupid>
        <artifactid>spring-boot-starter-parent</artifactid>
        <version>2.7.7</version>
        <relativepath/> <!-- lookup parent from repository -->
    </parent>
    <groupid>com.kelvin</groupid>
    <artifactid>spiderx</artifactid>
    <version>0.0.1-snapshot</version>
    <name>spiderx</name>
    <description>spiderx</description>
    <properties>
        <java.version>1.8</java.version>
    </properties>


    <dependencies>
        <dependency>
            <groupid>org.springframework.boot</groupid>
            <artifactid>spring-boot-starter-web</artifactid>
        </dependency>

        <dependency>
            <groupid>org.springframework.boot</groupid>
            <artifactid>spring-boot-devtools</artifactid>
            <scope>runtime</scope>
            <optional>true</optional>
        </dependency>
        <dependency>
            <groupid>org.springframework.boot</groupid>
            <artifactid>spring-boot-configuration-processor</artifactid>
            <optional>true</optional>
        </dependency>
        <dependency>
            <groupid>org.projectlombok</groupid>
            <artifactid>lombok</artifactid>
            <optional>true</optional>
        </dependency>
        <dependency>
            <groupid>org.springframework.boot</groupid>
            <artifactid>spring-boot-starter-test</artifactid>
            <scope>test</scope>
        </dependency>

        <!-- https://mvnrepository.com/artifact/org.jsoup/jsoup -->
        <dependency>
            <groupid>org.jsoup</groupid>
            <artifactid>jsoup</artifactid>
            <version>1.11.3</version>
        </dependency>

        <dependency>
            <groupid>org.seleniumhq.selenium</groupid>
            <artifactid>selenium-java</artifactid>
            <version>4.9.1</version>
        </dependency>

        <dependency>
            <groupid>com.google.code.gson</groupid>
            <artifactid>gson</artifactid>
            <version>2.10.1</version>
        </dependency>

        <dependency>
            <groupid>cn.hutool</groupid>
            <artifactid>hutool-all</artifactid>
            <version>5.7.9</version>
        </dependency>
        <dependency>
            <groupid>org.bouncycastle</groupid>
            <artifactid>bcprov-jdk15on</artifactid>
            <version>1.68</version>
        </dependency>

        <dependency>
            <groupid>org.apache.httpcomponents</groupid>
            <artifactid>httpclient</artifactid>
            <version>4.5.13</version> <!-- 请根据需要选择版本 -->
        </dependency>

        <dependency>
            <groupid>org.apache.httpcomponents</groupid>
            <artifactid>fluent-hc</artifactid>
            <version>4.5.13</version> <!-- 请根据需要选择版本 -->
        </dependency>

        <dependency>
            <groupid>com.squareup.okhttp3</groupid>
            <artifactid>okhttp</artifactid>
            <version>4.9.3</version> <!-- 请根据需要选择版本 -->
        </dependency>

    </dependencies>

    <build>
        <plugins>
            <plugin>
                <groupid>org.springframework.boot</groupid>
                <artifactid>spring-boot-maven-plugin</artifactid>
                <configuration>
                    <excludes>
                        <exclude>
                            <groupid>org.projectlombok</groupid>
                            <artifactid>lombok</artifactid>
                        </exclude>
                    </excludes>
                </configuration>
            </plugin>
        </plugins>
    </build>

</project>

3、编写代码，爬取视频素材

3.1、代码里使用代理

通过大模型搜索答案，寻找“chromedriver 如何使用代理”答案。

3.2、核心业务代码

核心代码：

string baseurl = "https://www.pexels.com/search/videos/"+ searchname +"/?size=large&orientation=landscape";
system.setproperty("webdriver.chrome.driver", seleniumutil.chromedriverpath );// chromedriver localpath
chromeoptions chromeoptions = new chromeoptions();
chromeoptions.addarguments("--remote-allow-origins=*");
chromeoptions.addarguments("–no-sandbox");  //--start-maximized
map<string, object> map = new hashmap<>();
map.put("httpproxy", httpproxy.getip()+ ":" + httpproxy.getport());
proxy proxy = new proxy(map);
chromeoptions.setproxy(proxy);
webdriver driver = new chromedriver(chromeoptions);
string url = baseurl + searchname;
driver.get(url);
seleniumutil.sleep(2000);   //

3.2、运行代码并得到相关的视频素材

3.2.1、运行效果

3.2.2、目标站点脚本运行中

爬取目标站点里的猫、狗等宠物素材。

3.3、爬取的素材

获取的素材，我们存放在本地磁盘上。

4、视频编辑与发布

使用视频剪辑软件，如剪映，将高清视频素材编辑成最终的短视频，并发布到短视频平台。

5、 结论

通过springboot和亮数据代理服务，我们可以构建一个高效、自动化的短视频素材获取和处理流程。而过程中ai大模型技术的加入，进一步打破了技术壁垒，不论遇到什么问题ai大模型几乎都能给出正确答案，提升了我们的程序构建速度。
而获取到的大量短视频素材，不仅提高了制作效率，也为短视频创作者和品牌方提供了更多的创意空间。