- 综合排序
- 最热优先
- 最新优先
- 来自专栏Hank’s Blog
3-5 处理缺失值
> x <- c(1,NA,2,NA,3) > is.na(x) [1] FALSE TRUE FALSE TRUE FALSE > x[!is.na(x)] #找出不是缺失值 [1] 1 2 3 > x <- c(1,NA,2,NA,3) > y <- c("a","b",NA,"c",NA) > z <- complete.cases(x,y) #都不是缺失值的元素 > x[z] [1] 1 > y[z] [1] "a" > library(datasets) #import dat
54510发布于 2020-09-16 - 来自专栏NetCore 从壹开始
3-5 安装CICD管理平台：Jenkins
大家这里可以先安装gitlab工具，我就省事了，直接用gitee做源代码管理平台了。
37321编辑于 2023-01-09 - 来自专栏叽叽西
lagou 爪哇 3-5 spring cloud (下) 笔记
为了⽀撑⽇益增⻓的庞⼤业务量，我们会使⽤微服务架构设计我们的系统，使得 我们的系统不仅能够通过集群部署抵挡流量的冲击，⼜能根据业务进⾏灵活的扩展。那么，在微服务架构下，⼀次请求少则经过三四次服务调⽤完成，多则跨越⼏⼗ 个甚⾄是上百个服务节点。那么问题接踵⽽来：
91120编辑于 2022-05-17 - 来自专栏爬虫逆向案例
012：tkinter+爬虫设计对联软件
今天用Python设计一个小的对联软件！ 其中运用到tkinter模块： tkinter是Python下面向tk的图形界面接口库，可以方便地进行图形界面设计和交互操作编程。 先看下我们的软件效果图： 首先，程序的界面设计还是利用tkinter来进行设计。 通过tkinter的Entry类来输入我们的上联，然后通过button按钮，来启动程序进行设计。 通过绑定的函数实现了爬虫的抓取和对联的保存。 row=1, column=0, sticky=W,pady=10) root.mainloop() 界面设计完成了，而且绑定的函数也已经确定，接下来就是如何利用绑定的函数，来实现我们的后续操作，也就是爬虫抓取和保存
1.3K10发布于 2021-11-22 - 来自专栏超级码力
🦀️ 后羿采集器——最良心的爬虫软件
下面我们就来聊聊，这款软件的优秀之处。 一、产品特点 1.跨平台 后羿采集器是一款桌面应用软件，支持三大操作系统：Linux、Windows 和 Mac，可以直接在官网上免费下载[2]。 市面上有很多的数据采集软件，出于商业化的目的，多多少少会对数据导出进行限制。不清楚套路的人经常用相关软件辛辛苦苦采集了一堆数据，结果发现导出数据需要花钱。 3.XPath/CSS/Regex 无论是什么爬虫软件，他们都是基于一定的规则去抓取数据的。XPath/CSS/Regex 就是几个常见的匹配规则。 定时抓取 定时抓取非常好理解，就是到了某个固定的时间爬虫软件就会自动抓取数据。市面上有一些比价软件，背后就是运行着非常多的定时爬虫，每隔几分钟爬一下价格信息，以达到价格监控的目的。 这时候爬虫软件就会自己维护一个 IP 池，用不同的 IP 发送请求，降低 IP 封锁的概率。 打码功能 这个功能就是内置了验证码识别器，可以实现机器打码 or 手动打码，也是绕过网站风控的一种方法。
7K21编辑于 2022-02-23 - 来自专栏PHP实战技术
3-5年的PHPer常见的面试题
安装linux软件时使用make方式还使用yum方式？ linux网络优化，如何查看进程、怎样查看最大文件打开数？ 1条微薄要推送给100万个粉丝该怎么处理？ 知道哪些算法？冒泡排序？快速排序？
1.6K100发布于 2018-03-09 - 来自专栏友弟技术工作室
go爬虫框架colly源码以及软件架构分析
官方的介绍，gocolly快速优雅，在单核上每秒可以发起1K以上请求；以回调函数的形式提供了一组接口，可以实现任意类型的爬虫；依赖goquery库可以像jquery一样选择web元素。 安装使用 colly 官网 go get -u github.com/gocolly/colly/... import "github.com/gocolly/colly" 架构特点 了解爬虫的都知道一个爬虫请求的生命周期 = nil情况下调用比较多， 爬虫异常的情况下，会调用 // OnError registers a function. data-timespan=\"7d\"]", "data-percentusd"), }) }) 总结 好了，介绍完了，我没有介绍如何使用，我自己也没有写任何的代码， 我只想分享给你这种软件架构的特点以及设计模式 下面这张图很形象，爬虫框架就这些东西。 通用爬虫框架架构
2.4K40发布于 2019-05-19 - 来自专栏Python程序员杂谈
python爬虫，从sohu上抓小说《人形软件》
上次发的从sina上抓小说的代码，这次来一个sohu的，不过总结python爬虫的方法，其实无外乎urllib和正则表达式的使用。掌握了这俩，基本就是有了就抓。
87920发布于 2019-02-28 - 来自专栏cwl_Java
C++编程之美-结构之法(代码清单3-5)
代码清单3-5 void RecursiveSearch(int* number, int* answer, int index, int n) { if(index == n)
30320编辑于 2022-11-30 - 来自专栏跟着官方文档学小程序开发
第二章 小程序开发指南3-5
在本章会介绍小程序的基本开发流程，结合前面章节的知识，完全可以独立完成一个体验很完善的小程序。为了让开发者更加了解小程序开发，在本章中还会通过常见的一些应用场景介绍小程序API的一些细节以及开发的一些技巧和注意事项。
40110编辑于 2025-08-25 - 来自专栏AI机器学习与深度学习算法
机器学习入门 3-5 Numpy数组(和矩阵)的基本操作
shape 属性查看数组的维度，返回值是一个元组，元组中对应位置的值为数组中对应维度的元素个数。
90610编辑于 2022-05-25 - 来自专栏AI研习社
未来 3-5 年内，哪个方向的机器学习人才最紧缺？
所以以 3-5 年的跨度来看，这些工具依然会非常有用，甚至像 CNN 和 LSTM 之类的深度学习算法还在继续发展迭代当中。 举几个我身边的例子，我的一个朋友是做传统软件工程研究的，前年他和我商量如何使用机器学习以 GitHub 上的 commit 历史来识别 bug，这就是一个很好的结合领域的知识。
73460发布于 2018-03-19 - 来自专栏Python大数据分析
推荐这6款自动化爬虫软件，非常实用！
爬虫软件通常由以下几部分组成：- 用户代理（User-Agent）：模拟浏览器访问，避免被网站识别为机器人。- 请求处理：发送HTTP请求，获取网页内容。 案例：推荐我常用的爬虫工具，三种爬虫方式，搞定反爬和动态页面八爪鱼采集器八爪鱼是一款面向非技术用户的桌面端爬虫软件，以其可视化操作和强大的模板库而受到青睐。 使用案例：使用八爪鱼爬虫+Kimi AI分析小米SU7舆情数据，终于知道它为什么火了HTTrackHTTrack是一款免费且功能强大的网站爬虫软件，它允许用户下载整个网站到本地计算机。 在选择爬虫软件时，你应根据自己的需求和技能水平进行选择。无论是需要简单的数据抓取，还是复杂的数据挖掘和分析，市场上的爬虫工具都能提供相应的解决方案。 同时，使用爬虫软件时，也应遵守相应的法律法规，尊重数据的版权和隐私。
6.5K10编辑于 2024-09-05 - 来自专栏iOS逆向与安全
写作小技能：卡片式写文章（用3-5张卡片写文）
挑战->核心概念->该怎么做->总结->升华 找到1张卡做大的核心概念 找到3-5张卡做子概念的内容 把这些卡片的“行动指引”总结下，列在最后做个行动指引大全。 .… 用3-5张卡片写文是个很好的体验：1.主题是自下而上生成，而不是逼你针对命题写一个。2. 内容是过去知识卡片的积累，而不是临时写一句，出去找一段儿。3.
1.6K10编辑于 2022-08-22 【爬虫工具】用python开发的youtube油管评论采集界面软件
一、背景介绍用python开发的GUI桌面软件，作用是爬取YouTube指定视频的评论，6个关键字段，含：评论id、评论内容、评论时间、评论作者昵称、评论作者频道、点赞数1.1 软件说明几点重要说明： 三、爬虫代码3.1 界面模块软件界面采用tkinter开发。 主窗口部分：# 创建主窗口root = tk.Tk()root.title('YouTube评论爬虫 | 马哥python说')# 设置窗口大小root.minsize(width=850, height root, bg='#ffffff', width=20, textvariable=video_id)entry.place(x=160, y=50, anchor='nw') # 摆放位置3.2 爬虫模块通过请求 3.3 日志模块好的日志功能，方便软件运行出问题后快速定位原因，修复bug。
75220编辑于 2025-03-21【油管爬虫】用Python开发的YouTube红人博主采集软件
为了深入挖掘创作者的商业价值并促进业务合作，我使用Python开发了一款名为“爬油管博主软件”的爬虫工具。以下是关于该工具的详细说明。二、软件界面与功能2.1用户界面本软件界面友好，操作简便。 界面如下所示：（目前已升级至v1.7版）2.2功能特点模拟浏览器爬取：通过模拟浏览器行为，有效避免反爬虫机制。筛选功能：支持按地区和粉丝数范围筛选博主。多设置项支持：可设置多个搜索关键词和国家地区。 3.2部分代码实现软件界面实现使用tkinter创建主窗口和组件：展开代码语言：PythonAI代码解释root=tk.Tk()root.title('YouTube博主采集软件v1.7')root.minsize entry.place(x=110,y=130,anchor='nw')tk.Label(root,justify='left',fg='red',text='多关键词以|分隔').place(x=650,y=130)爬虫模块实现使用 五、软件运行过程演示视频：请见原文。六、作者声明软件基于python语言开发，首发于本人公众号。如需了解更多技术细节或进行专业交流，可通过正规渠道联系开发者。工具使用需严格遵守相关法律法规和平台规定。
49410编辑于 2025-12-09- 来自专栏Mac应用教程
Screaming Frog SEO Spider Mac激活版(尖叫青蛙网络爬虫软件)
Screaming Frog SEO Spider Mac版可以抓取网站的网址，并且能够实时分析结果。通过seo spider mac版分析以后，就可以得到自己需要的数据，同时也可以通过抓取的功能测试网页的功能，分析一切无法响应的网页，分析打开具有病毒提示的网页，无论是检测企业网站还是搜索网络的资源都是非常方便的！
1.7K20编辑于 2022-08-23 - 来自专栏PPV课数据科学社区
【重磅】33款可用来抓数据的开源爬虫软件工具
这里推荐一些33款开源爬虫软件给大家。 爬虫，即网络爬虫，是一种自动获取网页内容的程序。是搜索引擎的重要组成部分，因此搜索引擎优化很大程度上就是针对爬虫而做出的优化。 世界上已经成型的爬虫软件多达上百种，本文对较为知名及常见的开源爬虫软件进行梳理，按开发语言进行汇总。 虽然搜索引擎也有爬虫，但本次我汇总的只是爬虫软件，而非大型、复杂的搜索引擎，因为很多兄弟只是想爬取数据，而非运营一个搜索引擎。 ? Java爬虫 1. 、本地文件系统的爬虫软件。 （原soukey采摘） Soukey采摘网站数据采集软件是一款基于.Net平台的开源软件，也是网站数据采集软件类型中唯一一款开源软件。
7.1K51发布于 2018-04-24 - 来自专栏CSDNToQQCode
软考中级(软件设计师)——程序设计语言与语言处理程序基础(3-5分，一般是3分)
软考中级(软件设计师)——程序设计语言与语言处理程序基础(3-5分，一般是3分) ---- 目录 软考中级(软件设计师)——程序设计语言与语言处理程序基础(3-5分，一般是3分) 编译与解释(★★★)
78910编辑于 2022-11-30 - 来自专栏小红书采集软件
【爬虫软件】小红书评论区批量采集，含二级评论
因此，我用python开发了一个爬虫采集软件，可自动抓取小红书评论数据，并且含二级评论数据。为什么有了源码还开发界面软件呢？ 效果截图软件界面截图：部分爬取数据：演示视频软件运行演示：【软件演示】小红书评论采集工具，可爬取上万条，含二级评论！ 软件说明几点重要说明：二、代码模块介绍爬虫采集模块通过把已有代码部分封装成class类，供tkinter界面调用。详细爬虫实现逻辑，请见历史文章。 软件界面模块软件界面采用tkinter库开发，Tkinter是Python的一个标准GUI库，用于创建图形用户界面。 一个好的日志模块，有助于软件运行出问题后快速定位原因，以及追溯运行历史记录。
3.6K30编辑于 2024-07-08
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号