美文网首页
fastapi+vue搭建免费代理IP网站部署至heroku

fastapi+vue搭建免费代理IP网站部署至heroku

作者: 就是很无聊 | 来源:发表于2020-11-21 22:49 被阅读0次

    说明

    最近需要用到一些HTTP的代理,用于爬虫去爬取信息,搜索了一些网站,貌似现在这类提供免费代理IP的网站很多,刚好最近看了点vue的视频,弄个网站练练。

    部署到heroku,预览地址:点击这里

    FastAPI

    • 安装相关依赖
    pip install uvicorn fastapi requests bs4 jinja2 aiofiles
    
    • 一个简单的函数爬取代理
    def Spider(cat):
        url = '目标网站'
        headers = {"User-Agent":"Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36"}
        try:
            res = requests.get(url,headers=headers)
            res.encoding = "utf-8"
            soup = BeautifulSoup(res.text, 'html.parser')
            html = soup.select(’bs4‘)
            return html[0]
        except:
            return 'error'
    
    • 前台点击按钮触发爬虫,返回数据
    @app.get("/{cat}")
    async def regist(cat):
        if spider(ip) == 'error':
            return '服务器繁忙,暂时无法获取IP,请稍后再试!<br> 需要购买收费服务可联系:<a href="http://www.xhuosoft.cn">薪火代理</a>'
        return str(spider(ip))
    

    VUE

    • 引用vue和axios
    <script src="https://cdn.bootcdn.net/ajax/libs/vue/2.6.11/vue.min.js"></script>
    <script src="https://cdn.bootcdn.net/ajax/libs/axios/0.19.2/axios.min.js"></script>
    
    • 按钮触发请求返回数据
    @click 
    
    • 由于返回的数据是HTML格式的,这里直接用v-html

    Heroku

    • 注册账号
    • 下载并安装heroku-cli
    • 创建应用
    • 本地代码
    • 上传代码

    Profile 里面写 web:uvicorn main:app之类即可

    案例地址:998ip

    相关文章

      网友评论

          本文标题:fastapi+vue搭建免费代理IP网站部署至heroku

          本文链接:https://www.haomeiwen.com/subject/akdyiktx.html