首页
学习
活动
专区
圈层
工具
发布
    • 综合排序
    • 最热优先
    • 最新优先
    时间不限
  • Docker本地部署Crawl4AI

    之前本地部署的firecrawl无法正常运行了,于是今天来部署github另外一个高star的爬虫项目:Crawl4AI# Pull the release candidate (recommended for latest features)docker pull unclecode/crawl4ai:0.6.0-r1# Or pull the latest stable versiondocker pull unclecode/crawl4ai:latest如果要使用LLM,准备一个.llm.env文件# Create a .llm.env file with your API keyscat \ --shm-size=1g \ unclecode/crawl4ai:latestWith LLM support:# Make sure .llm.env is in the current \ unclecode/crawl4ai:latest配置部署成功http://10.213.151.220:11235

    1.2K10编辑于 2025-06-13
  • 来自专栏轩辕镜像

    Crawl4AI Docker 容器化部署指南

    支持自定义配置、浏览器配置文件和过滤规则易部署:通过Docker容器化方案实现快速部署和扩展本文将详细介绍Crawl4AIDocker容器化部署流程,包括环境准备、镜像拉取、容器部署、功能测试及生产环境优化建议 环境准备Docker环境安装Crawl4AI基于Docker容器化部署,首先需要在目标服务器上安装Docker环境。 容器部署基础部署命令使用以下命令启动Crawl4AI容器,这是官方推荐的基础部署方式:展开代码语言:BashAI代码解释dockerrun-d\-p11235:11235\--namecrawl4ai\ 总结本文详细介绍了Crawl4AIDocker容器化部署方案,从环境准备、镜像拉取、容器配置到功能测试和生产环境优化,提供了一套完整的实施指南。 关键要点:使用Docker一键安装脚本快速部署环境,简化前期准备工作通过轩辕镜像访问支持服务提升CRAWL4AI镜像拉取效率基础部署只需简单的dockerrun命令,配合端口映射和共享内存配置提供Web

    55410编辑于 2025-12-20
  • 来自专栏全栈程序员必看

    Docker部署_docker部署网站

    通常,帮朋友部署 WordPress 的这个场景下,你可以找朋友开一台新的服务器,初始化一套 LAMP,直接把 WordPress 给 wget 进去,就可以在你的浏览器里完成配置了。 但是,前两天我需要在自己的服务器上部署一个 WordPress 服务。我这样的蒟蒻当然是无缘使用世界上最好的编程语言—— PHP 的啦。没有 PHP,还部署个屁的 WordPress。 所以就想到了—— Docker,用容器去把它装起来就好了嘛。 想到就动手做,接下来我们就看看怎么用 Docker 部署 WordPress。 为了方便,同时也多练习 Docker 的使用,我们干脆再拉一个 mysql 镜像,让整套服务完全在 docker 里运行: $ docker pull mysql:latest 注意,这篇文章写在 2020 (当然,我只是开一个简单的小服务,基本没人用,所以也就几乎没有安全风险,但您在部署的时候还是要花点时间认真考虑安全问题的) 接下来就是在您的浏览器访问 http://xxx:2020/wp-admin/

    1.4K30编辑于 2022-11-17
  • 来自专栏AllTests软件测试

    Crawl4AI - 开源的LLM友好型网络爬虫和抓取工具

    Crawl4AI开源、灵活,专为实现实时性能而打造,赋予开发人员无与伦比的速度、精度和部署便捷性。 5、部署 Docker化设置:带有FastAPI服务器的优化Docker镜像,便于部署。通过Docker快速搭建运行环境。 安全认证:内置JWT令牌认证,保障API安全。 API网关:一键部署,通过安全令牌认证实现基于API的工作流程。快速部署API,并保障安全访问。 可扩展架构:专为大规模生产设计,优化服务器性能。适用于处理大量数据抓取任务的场景。 云部署:为主要云平台提供就绪的部署配置。可在AWS、阿里云等云平台快速部署。 6、其他特性 隐身模式:模仿真实用户,避免被机器人检测。在抓取反爬虫机制严格的网站时,降低被封禁风险。 官方网址: https://crawl4ai.com/ 3、快速上手 1、安装Crawl4AI pip install -U crawl4ai 如果遇到任何与浏览器相关的问题,你可以手动安装它们: python

    3.5K10编辑于 2025-05-26
  • 来自专栏翩翩白衣少年

    Crawl4AI:几行代码就可实现强大的网页爬虫!

    安装 使用 pip 安装: pip install crawl4ai 使用 Docker 安装: 构建 Docker 镜像并运行: docker build -t crawl4ai . docker run -d -p 8000:80 crawl4aiDocker Hub 直接运行: docker pull unclecode/crawl4ai:latest docker run -d -p 8000 :80 unclecode/crawl4ai:latest 使用 Crawl4AI 的使用非常简单,仅需几行代码就能实现强大的功能。 以下是使用 Crawl4AI 进行网页数据抓取的示例: import asyncio from crawl4ai import AsyncWebCrawler async def main(): 从结构化输出到多种提取策略,Crawl4AI 为开发者在数据抓取领域带来了极大的便利。 GitHub:https://github.com/unclecode/crawl4ai

    6K11编辑于 2024-09-29
  • 让AI帮你读懂整个互联网:Crawl4AI开源爬虫工具深度解析

    嗨,大家好,我是小华同学,关注我们获得“最新、最全、最优质”开源项目和高效工作学习方法 Crawl4AI 是2025年GitHub上最受瞩目的开源网络爬虫工具,专为AI时代设计。 自动执行JavaScript,抓取SPA应用数据多语言支持:自动识别50+种语言并保留原始编码格式智能分块策略:根据内容类型自动分割文本块(段落/表格/代码段)# 示例:三行代码启动智能爬虫from crawl4ai 同时抓取文本、图片、视频等多媒体资源智能缓存系统:自动识别内容更新频率,优化抓取策略企业级功能反爬对抗模式:自动轮换User-Agent/IP地址池法律合规助手:自动识别robots.txt和隐私政策分布式部署 :支持Docker一键部署到云平台技术架构模块技术栈性能指标核心引擎Python 3.10 + Scrapy框架单节点100req/s动态渲染Playwright + Chromium支持无头浏览器文档处理 Octoparse优势:零代码可视化采集局限:闭源商业软件项目地址https://github.com/unclecode/crawl4ai

    2.7K11编辑于 2025-04-25
  • 来自专栏全栈程序员必看

    docker部署vue项目_docker部署java

    博主还提供了另一种方式,每次发布只需要将打包后的dist内容放到linux主机目录即可,感兴趣的道友可以直接参考这一篇:docker 安装 nginx 发布Vue项目_苍穹之跃的博客-CSDN博客nginx nginx # 将dist文件中的内容复制到 /usr/share/nginx/html/ 这个目录下面 COPY dist/ /usr/share/nginx/html/ 第三步:安装nginx docker pull nginx docker run --name nginx -d -p 4030:80 nginx 访问4030端口看看是否安装成功。 第四步:linux上找个空目录放项目文件和Dockerfile 第五步:构建镜像,cd到Dockerfile目录下 docker build -t 取个镜像名称 . 第六步:运行容器 docker run --name 取个容器名称 -d -p 9020:80 上一步取的镜像名称 访问一下9020检查是否运行成功。

    1.4K60编辑于 2022-11-02
  • 来自专栏全栈程序员必看

    docker部署influx_docker容器部署

    使用docker部署influxdb 生成默认config.yml docker run \ --rm influxdb:latest \ influxd print-config > config.yml /code/docker-influx/data:/var/lib/influxdb/data - /rssp/code/docker-influx/meta:/var/lib/indluxdb/meta - /rssp/code/docker-influx/wal:/var/lib/indluxdb/wal - /rssp/code/docker-influx/backup/bin:/home/backup - /rssp/code/docker-influx/backup/data:/tmp/backup/data - /rssp/code/docker-influx/backup/gz:/tmp/backup /gz - /etc/localtime:/etc/localtime:ro ports: - "8086:8086" restart: always docker pull influxdb docker-compose

    1.2K30编辑于 2022-11-19
  • 来自专栏个人技术博客

    ③【DockerDocker部署Nginx

    ③【DockerDocker部署Nginx docker拉取nginx镜像: docker pull nginx 安装并启动nginx服务: docker run \ --restart always docker操作nginx常用命令: # 注意,Nginx是我安装启动时为这个服务取的名字,若名字不同请使用自己的服务名 #停止: docker stop Nginx #重启: docker restart Nginx #删除服务: docker rm Nginx #删除镜像: docker rmi Nginx #进入服务: docker exec -it Nginx /bin/bash Docker中有几个重要的概念 我们要使用Docker来操作镜像、容器,就必须要安装DockerDocker是一个CS架构的程序,由两部分组成: 服务端(server):Docker守护进程,负责处理Docker指令,管理镜像、容器等 客户端(client):通过命令或RestAPI向Docker

    99610编辑于 2024-03-16
  • 来自专栏HUC思梦的java专栏

    docker部署

    up -d 启动部署docker部署微服务项目: 1、使用dockerfile构建项目镜像 2、在docker使用生成镜像启动对应服务 服务名称 端口 comment-server 8002 house-server 8011 user-server 8000 esp-zuul 9000 esp-web 7000 comment-server ->user-server 部署用户服务 docker run -d house --link user-server:user -p 8011:8011 house/house 部署评论服务 docker run -d --name comment-server -- hostname comment --link user-server:user -p 8002:8002 house/comment 部署网关 docker run -d --name zuul-server link house-server:house --link user-server:user --link comment-server:comment -p 9000:9000 house/zuul 部署

    1.2K10发布于 2020-09-03
  • 来自专栏Pengcheng's Blog

    Docker部署

    1、部署前准备 1.检查服务器是否能访问外网 #检查外网连通性 ping 114.114.114.114 #检查DNS服务 ping baidu.com 如果外网通而DNS不通,则需要手动配置DNS ifcfg-ens开头的文件 #将名称换成实际文件名称 cat ifcfg-ens33 查看ONBOOT是否为yes,若不是yes,请修改成yes 5.关闭SElinux 此处内容需要评论回复后方可阅读 2、安装Docker

    1.3K20编辑于 2023-05-02
  • 来自专栏Java学习~

    docker部署

    centos7部署docker 官方参考文档:https://docs.docker.com/engine/install/centos/ 在此提供自己的安装文件: 链接:https://pan.baidu.com /linux/centos/docker-ce.repo #安装docker引擎 sudo yum install docker-ce docker-ce-cli containerd.io docker-buildx-plugin sudo docker run hello-world docker-compose安装 1、去下载docker-compose(dockerdocker-compose版本要对应,具体的看官网,如果你嫌弃麻烦 v 图片 Windows 部署 docker 1、官网下载docker desktop(先别急安装):https://hub.docker.com 2、确认电脑是否开启hyper -v 搜索栏搜索: 是一个可视化的Docker操作界面,提供状态显示面板、应用模板快速部署、容器镜像网络数据卷的基本操作(包括上传下载镜像,创建容器等操作)、事件日志显示、容器控制台操作、Swarm集群和服务等集中管理和操作

    1.4K70编辑于 2023-04-08
  • 来自专栏全栈程序员必看

    spring boot docker部署_docker部署java项目

    目录 docker介绍 安装docker Ubuntu安装docker CentOS安装docker 通过脚本安装 拉取java环境 创建springboot项目 打包springboot到docker docker的核心思想是通过对应用的封装、分发、部署、运行生命周期进行管理,达到应用组件级别的“一次性封装,到处运行”。 安装docker 既然docker这么神奇,那我们如何安装docker呢?我们一起来走一下吧。 4.安装完成之后启动docker systemctl start docker 5.重启 systemctl restart docker 6.停止 systemctl stop docker 7.开机自启动 /test docker查看容器的日志 这说明我们已经springboot项目已经启动成功了,到这里docker部署springboot项目差不就结束了,但是你可能还有一个疑问,如果我想看控制台的日志怎么办呢

    1.8K20编辑于 2022-11-07
  • 来自专栏java 微风

    Docker 部署应用、jar 工程 docker 方式部署

    我的工程设置的本地端口也是8089 6. postman 和浏览器 顺利请求到 gentle 工程中的接口,说明部署成功 7. gentle 工程中接口实现: 部署完啦 ,走,出门溜达溜达,找点吃的去 ... -------------------------------- 2018.11.28 后记,每次改代码都要重新部署依旧很麻烦,于是写了个很简单的脚本,运行就部署。 新镜像构建成功\n\033[0m" # 删除原容器 docker rm -f gentle # 启动容器 docker run -d -p 8089:8089 --name gentle gentle echo -e "\033[32m\n后端工程部署完成\n\033[0m" 运行效果: postman 请求,返回的已经有新接口数据了。 另外:前端工程部署脚本见:前端 vue 工程 Docker 方式部署

    1.9K20编辑于 2022-04-13
  • 来自专栏全栈程序员必看

    docker环境下部署web_docker环境部署

    概述 zabbix在docker官方的镜像源中,有维护zabbix公司官方的镜像,我们可以通过hub.docker.com进行下载,搭建docker环境下的zabbix,可以使我们的安装和部署更加快捷。 zabbix的docker镜像源 从这里 zabbix docker镜像源 我们可以打开看到zabbix官方在docker仓库里面维护的镜像源信息。 mysql数据库部署部署zabbix服务器前,需要提前部署mysql服务器并且创建好zabbix数据库以及用户 拉取mysql镜像 docker pull mysql 运行mysql服务器 docker ppassword zabbix < /tmp/mysql/images.sql mysql -uzabbix -ppassword zabbix < /tmp/mysql/data.sql zabbix服务器部署 172.17.0.2" -e MYSQL_USER="zabbix" -e MYSQL_PASSWORD="password" -d zabbix/zabbix-server-mysql zabbix-front服务器部署

    91720编辑于 2022-11-17
  • 来自专栏从入门到出门

    Docker部署tomcat

    拉取tomcat镜像docker pull tomcat:8.5创建容器并运行docker run -d --name jsoncrack -p 8080:8080 tomcat:8.5此时可以访问ip :8080,但是404,因为webapps里没有ROOT文件夹进入容器创建ROOT文件夹,然后退出docker exec -it jsoncrack /bin/bashcd /usr/local/tomcat /webapps/mkdir ROOTexit将宿主机的文件拷贝到容器里docker cp /a/b/c/ jsoncrack:/usr/local/tomcat/webapps/ROOT完成!

    1K30编辑于 2023-01-18
  • 来自专栏John Wong's Blog

    Docker 部署 Gitlab

    基于 docker 部署 gitlab 比较方便,但服务器至少需要 4GB 内存,否则可能出现 502 错误。 1. 拉取镜像 # 查询 docker search gitlab # 拉取 默认latest docker pull gitlab/gitlab-ce 2. 安装镜像 docker run --detach \ --hostname gitlab.example.com \ --publish 443:443 --publish 80:80 --publish 配置端口 配置 gitlab 克隆时的端口(端口配置根据自己的需求选择) # 进入容器 docker exec -it gitlab /bin/bash # 编辑配置文件 vim /etc/gitlab restart <gitlab-container-id> 下一篇: Docker 安装 FastDFS→

    1.4K20编辑于 2021-12-23
  • 来自专栏XBD

    docker部署Nexus

    部署nexus docker部署nexus docker pull sonatype/nexus3 mkdir /data/nexus-data chown -R 200 /data/nexus-data docker run -d --name nexus3 --restart=always -p 8081:8081 -p 8082:8082 -v /data/nexus-data:/nexus-data sonatype/nexus3 docker-compose部署nexus version: "3" services: nexus: image: sonatype/nexus3:latest 仓库 设置 --> Repositories --> Create repository --> docker(hosted) Name:输入创建的名字,如docker-repo HTTP:8082 启动Enable Docker V1 API 连接仓库 vim /etc/docker/daemon.json { "registry-mirrors": ["https://hk0l6i5k.mirror.aliyuncs.com

    2.2K10编辑于 2022-10-27
  • 来自专栏技术专栏

    SpringBoot Docker 部署

    昨天尝试了下SpringBoot 的Docker部署,虽然踩了很多坑,但是总算是弄出来了,下面整理一下思路,方便以后使用。 这里部署的难点,主要是我的SpringBoot项目用到了redis和mysql,如果直接在一个镜像里安装redis和mysql,那就和在虚拟机上部署一样了,所以我把SpringBoot的jar包和redis ,mysql分别做成了三个镜像 1.部署mysql Dockerfile FROM mysql ADD sell.sql sell.sql //sell.sql 为项目sql脚本 //这里应该其实应该写执行 redis docker pull redis; docker run -d --name sellredis redis; //这里我的redis写的比较简单,所以就直接run了 3.部署springboot 打包这个就不说了,不过需要提醒一点,打包先按照链接本地数据库的方式打包,保证不报错,然后把jar包移到docker build目录 然后把application.yml复制一份到docker build

    4.3K30发布于 2018-09-12
  • 来自专栏叔叔的博客

    Docker部署cloud

    -- Docker maven plugin --> <plugin> <groupId>com.spotify</groupId> <artifactId <imageName>docker/${project.artifactId}</imageName> <dockerDirectory>src/main/docker< :build docker image docker run -p 1110:1110 -t imagename 四、eureka的部署 defaultZone: http://eureka-image-name :1110/eureka/ 主要是eureka的地址指定 关键的启动命令: docker run --name eureka-image-name -p 1110:1110 -t docker/eureka-server docker run --link eureka-image-name:1110 -p 2000:2000 -t docker/gateway 这样子就可以解决eureka的地址问题。

    49750发布于 2018-07-25
领券