- 综合排序
- 最热优先
- 最新优先
- 来自专栏Deep learning进阶路
2-7 顺序表 和 链表 对比
2-7 顺序表 和 链表 对比 1、存储结构的不同 虽然它们同属于线性表，但数据的存储结构有本质的不同： 顺序表存储数据，需预先申请一整块足够大的存储空间，然后将数据按照次序逐一存储，逻辑关系就是靠元素间物理空间上的邻接关系来维持
46520发布于 2019-07-02 - 来自专栏Hank’s Blog
2-7 R语言基础 数据框
> df <- data.frame(id=c(1,2,3,4),name=c("a","b","c","d"),gender=c(TRUE,TRUE,FALSE,FALSE)) > nrow(df) #4行 [1] 4
41420发布于 2020-09-16 - 来自专栏嵌入式音视频
2-7 输入圆的半径，计算其周长与面积
预览图如下 #include<stdio.h> int main() { int r; printf("请输入r:"); scanf("%d",&r); { if(r>0) {printf("面积是：%f\n",3.14159*r*r); printf("周长是：%f\n",2*3.14159*r);} else printf("输入的r不合法！\n"); } return 0; }
70330编辑于 2022-12-01 - 来自专栏爬虫逆向案例
012：tkinter+爬虫设计对联软件
今天用Python设计一个小的对联软件！ 其中运用到tkinter模块： tkinter是Python下面向tk的图形界面接口库，可以方便地进行图形界面设计和交互操作编程。 先看下我们的软件效果图： 首先，程序的界面设计还是利用tkinter来进行设计。 通过tkinter的Entry类来输入我们的上联，然后通过button按钮，来启动程序进行设计。 通过绑定的函数实现了爬虫的抓取和对联的保存。 row=1, column=0, sticky=W,pady=10) root.mainloop() 界面设计完成了，而且绑定的函数也已经确定，接下来就是如何利用绑定的函数，来实现我们的后续操作，也就是爬虫抓取和保存
1.3K10发布于 2021-11-22 - 来自专栏刷题笔记
2-7 一元多项式求导 (20 分)
本文链接：https://blog.csdn.net/shiliang97/article/details/101025651 2-7 一元多项式求导 (20 分) 设计函数求一元多项式的导数。
88120发布于 2019-11-08 - 来自专栏超级码力
🦀️ 后羿采集器——最良心的爬虫软件
下面我们就来聊聊，这款软件的优秀之处。 一、产品特点 1.跨平台 后羿采集器是一款桌面应用软件，支持三大操作系统：Linux、Windows 和 Mac，可以直接在官网上免费下载[2]。 市面上有很多的数据采集软件，出于商业化的目的，多多少少会对数据导出进行限制。不清楚套路的人经常用相关软件辛辛苦苦采集了一堆数据，结果发现导出数据需要花钱。 3.XPath/CSS/Regex 无论是什么爬虫软件，他们都是基于一定的规则去抓取数据的。XPath/CSS/Regex 就是几个常见的匹配规则。 定时抓取 定时抓取非常好理解，就是到了某个固定的时间爬虫软件就会自动抓取数据。市面上有一些比价软件，背后就是运行着非常多的定时爬虫，每隔几分钟爬一下价格信息，以达到价格监控的目的。 这时候爬虫软件就会自己维护一个 IP 池，用不同的 IP 发送请求，降低 IP 封锁的概率。 打码功能 这个功能就是内置了验证码识别器，可以实现机器打码 or 手动打码，也是绕过网站风控的一种方法。
7K21编辑于 2022-02-23 - 来自专栏cwl_Java
C++编程之美-数字之魅(代码清单2-7)
代码清单2-7 int lowestOne(int N) { int Ret = 0; while(N) { N >>= 1; Ret
25520编辑于 2022-11-30 - 来自专栏友弟技术工作室
go爬虫框架colly源码以及软件架构分析
官方的介绍，gocolly快速优雅，在单核上每秒可以发起1K以上请求；以回调函数的形式提供了一组接口，可以实现任意类型的爬虫；依赖goquery库可以像jquery一样选择web元素。 安装使用 colly 官网 go get -u github.com/gocolly/colly/... import "github.com/gocolly/colly" 架构特点 了解爬虫的都知道一个爬虫请求的生命周期 = nil情况下调用比较多， 爬虫异常的情况下，会调用 // OnError registers a function. data-timespan=\"7d\"]", "data-percentusd"), }) }) 总结 好了，介绍完了，我没有介绍如何使用，我自己也没有写任何的代码， 我只想分享给你这种软件架构的特点以及设计模式 下面这张图很形象，爬虫框架就这些东西。 通用爬虫框架架构
2.4K40发布于 2019-05-19 - 来自专栏Python程序员杂谈
python爬虫，从sohu上抓小说《人形软件》
上次发的从sina上抓小说的代码，这次来一个sohu的，不过总结python爬虫的方法，其实无外乎urllib和正则表达式的使用。掌握了这俩，基本就是有了就抓。
87920发布于 2019-02-28 - 来自专栏Python大数据分析
推荐这6款自动化爬虫软件，非常实用！
爬虫软件通常由以下几部分组成：- 用户代理（User-Agent）：模拟浏览器访问，避免被网站识别为机器人。- 请求处理：发送HTTP请求，获取网页内容。 案例：推荐我常用的爬虫工具，三种爬虫方式，搞定反爬和动态页面八爪鱼采集器八爪鱼是一款面向非技术用户的桌面端爬虫软件，以其可视化操作和强大的模板库而受到青睐。 使用案例：使用八爪鱼爬虫+Kimi AI分析小米SU7舆情数据，终于知道它为什么火了HTTrackHTTrack是一款免费且功能强大的网站爬虫软件，它允许用户下载整个网站到本地计算机。 在选择爬虫软件时，你应根据自己的需求和技能水平进行选择。无论是需要简单的数据抓取，还是复杂的数据挖掘和分析，市场上的爬虫工具都能提供相应的解决方案。 同时，使用爬虫软件时，也应遵守相应的法律法规，尊重数据的版权和隐私。
6.5K10编辑于 2024-09-05 【爬虫工具】用python开发的youtube油管评论采集界面软件
一、背景介绍用python开发的GUI桌面软件，作用是爬取YouTube指定视频的评论，6个关键字段，含：评论id、评论内容、评论时间、评论作者昵称、评论作者频道、点赞数1.1 软件说明几点重要说明： 三、爬虫代码3.1 界面模块软件界面采用tkinter开发。 主窗口部分：# 创建主窗口root = tk.Tk()root.title('YouTube评论爬虫 | 马哥python说')# 设置窗口大小root.minsize(width=850, height root, bg='#ffffff', width=20, textvariable=video_id)entry.place(x=160, y=50, anchor='nw') # 摆放位置3.2 爬虫模块通过请求 3.3 日志模块好的日志功能，方便软件运行出问题后快速定位原因，修复bug。
75120编辑于 2025-03-21- 来自专栏FreeBuf
别让你的手机成为恶意软件的温床
图2-6JobSchedule机制后台进程保活 2.2.3 上传用户数据 病毒在用户不知情的情况下发送数据包，私自获取大量用户设备信息，并且发送到指定url，如图2-7所示： ? 图2-7 抓取上传数据包 获取用户设备相关代码信息，如图2-8所示： ? 图2-8获取用户设备相关信息 上传数据包中的用户设备信息内容（解密后结果），如图2-9所示： ? 图2-22邮箱相关的百度贴吧号 三、防范及处置建议 建议用户提高警觉性，使用软件请到官网下载。到应用商店进行下载正版软件，避免从论坛等下载软件，可以有效的减少该类病毒的侵害。 ”或“中国反网络病毒联盟”进行举报，使病毒软件能够第一时间被查杀和拦截。 比如，终端agent获取的数据只能涵盖已部署终端的范围；爬虫技术的时效性和完整性受限于爬虫的规模和能力；网络侧探针技术受限部署探针的节点数量并只能对活跃的行为进行感知。
97600发布于 2018-07-30 【油管爬虫】用Python开发的YouTube红人博主采集软件
为了深入挖掘创作者的商业价值并促进业务合作，我使用Python开发了一款名为“爬油管博主软件”的爬虫工具。以下是关于该工具的详细说明。二、软件界面与功能2.1用户界面本软件界面友好，操作简便。 界面如下所示：（目前已升级至v1.7版）2.2功能特点模拟浏览器爬取：通过模拟浏览器行为，有效避免反爬虫机制。筛选功能：支持按地区和粉丝数范围筛选博主。多设置项支持：可设置多个搜索关键词和国家地区。 3.2部分代码实现软件界面实现使用tkinter创建主窗口和组件：展开代码语言：PythonAI代码解释root=tk.Tk()root.title('YouTube博主采集软件v1.7')root.minsize entry.place(x=110,y=130,anchor='nw')tk.Label(root,justify='left',fg='red',text='多关键词以|分隔').place(x=650,y=130)爬虫模块实现使用 五、软件运行过程演示视频：请见原文。六、作者声明软件基于python语言开发，首发于本人公众号。如需了解更多技术细节或进行专业交流，可通过正规渠道联系开发者。工具使用需严格遵守相关法律法规和平台规定。
49410编辑于 2025-12-09- 来自专栏Mac应用教程
Screaming Frog SEO Spider Mac激活版(尖叫青蛙网络爬虫软件)
Screaming Frog SEO Spider Mac版可以抓取网站的网址，并且能够实时分析结果。通过seo spider mac版分析以后，就可以得到自己需要的数据，同时也可以通过抓取的功能测试网页的功能，分析一切无法响应的网页，分析打开具有病毒提示的网页，无论是检测企业网站还是搜索网络的资源都是非常方便的！
1.7K20编辑于 2022-08-23 - 来自专栏PPV课数据科学社区
【重磅】33款可用来抓数据的开源爬虫软件工具
这里推荐一些33款开源爬虫软件给大家。 爬虫，即网络爬虫，是一种自动获取网页内容的程序。是搜索引擎的重要组成部分，因此搜索引擎优化很大程度上就是针对爬虫而做出的优化。 世界上已经成型的爬虫软件多达上百种，本文对较为知名及常见的开源爬虫软件进行梳理，按开发语言进行汇总。 虽然搜索引擎也有爬虫，但本次我汇总的只是爬虫软件，而非大型、复杂的搜索引擎，因为很多兄弟只是想爬取数据，而非运营一个搜索引擎。 ? Java爬虫 1. 、本地文件系统的爬虫软件。 （原soukey采摘） Soukey采摘网站数据采集软件是一款基于.Net平台的开源软件，也是网站数据采集软件类型中唯一一款开源软件。
7.1K51发布于 2018-04-24 - 来自专栏小红书采集软件
【爬虫软件】小红书评论区批量采集，含二级评论
因此，我用python开发了一个爬虫采集软件，可自动抓取小红书评论数据，并且含二级评论数据。为什么有了源码还开发界面软件呢？ 效果截图软件界面截图：部分爬取数据：演示视频软件运行演示：【软件演示】小红书评论采集工具，可爬取上万条，含二级评论！ 软件说明几点重要说明：二、代码模块介绍爬虫采集模块通过把已有代码部分封装成class类，供tkinter界面调用。详细爬虫实现逻辑，请见历史文章。 软件界面模块软件界面采用tkinter库开发，Tkinter是Python的一个标准GUI库，用于创建图形用户界面。 一个好的日志模块，有助于软件运行出问题后快速定位原因，以及追溯运行历史记录。
3.6K30编辑于 2024-07-08 - 来自专栏钱塘大数据
【推荐收藏】33款可用来抓数据的开源爬虫软件工具
这里推荐一些33款开源爬虫软件给大家。 爬虫，即网络爬虫，是一种自动获取网页内容的程序。是搜索引擎的重要组成部分，因此搜索引擎优化很大程度上就是针对爬虫而做出的优化。 世界上已经成型的爬虫软件多达上百种，本文对较为知名及常见的开源爬虫软件进行梳理，按开发语言进行汇总。 虽然搜索引擎也有爬虫，但本次我汇总的只是爬虫软件，而非大型、复杂的搜索引擎，因为很多兄弟只是想爬取数据，而非运营一个搜索引擎。 、本地文件系统的爬虫软件。 （原soukey采摘） Soukey采摘网站数据采集软件是一款基于.Net平台的开源软件，也是网站数据采集软件类型中唯一一款开源软件。
8.5K50发布于 2018-03-05 - 来自专栏Python大数据分析
推荐5个零代码的爬虫软件，非常容易上手！
但不管哪个库都需要写代码才能实现爬虫，涉及到http请求、html解析、正则处理等技术，对于很多人来说是不低的门槛。 下面推荐5个基本不需要代码的爬虫软件，零基础也可以实现数据采集。 八爪鱼爬虫 八爪鱼算是非常出名的数据采集软件了，很早就流传开来。它是一款无需任何代码，图形化操作非常方便的桌面端爬虫应用，你只需配置好URL，并简单的拖拽就可以实现批量数据采集。 后羿采集器 后羿采集器也是一款无代码的图形爬虫软件，只需要配置url相关信息便可以自动识别网页中的表格、列表、图片等内容，非常的傻瓜式。 你不需要安装额外的软件，即可在Chrome浏览器中进行爬虫。 这些爬虫软件非常强大，还能设置动态ip、处理js网页，不输Python，适合大部分数据采集需求。
3.1K10编辑于 2025-05-13 - 来自专栏Python数据科学
33款你可能不知道的开源爬虫软件工具
这里推荐一些33款开源爬虫软件给大家。 爬虫，即网络爬虫，是一种自动获取网页内容的程序。是搜索引擎的重要组成部分，因此搜索引擎优化很大程度上就是针对爬虫而做出的优化。 世界上已经成型的爬虫软件多达上百种，本文对较为知名及常见的开源爬虫软件进行梳理，按开发语言进行汇总。 虽然搜索引擎也有爬虫，但本次我汇总的只是爬虫软件，而非大型、复杂的搜索引擎，因为很多兄弟只是想爬取数据，而非运营一个搜索引擎。 ? 、本地文件系统的爬虫软件。 （原soukey采摘） Soukey采摘网站数据采集软件是一款基于.Net平台的开源软件，也是网站数据采集软件类型中唯一一款开源软件。
12.6K20发布于 2018-08-06 - 来自专栏python学习教程
python爬虫学习：爬虫与反爬虫
二．爬虫分类 网络爬虫按照实现的技术和结构一般分为通用网络爬虫、聚焦网络爬虫。从特性上也有增量式网络爬虫和深层网络爬虫等类别，在实际的网络爬虫中，通常是这几类爬虫的组合体。 通用网络爬虫 通用网络爬虫（General Purpose Web Crawler）。通用网络爬虫又叫作全网爬虫，顾名思义，通用网络爬虫爬取的目标资源在全互联网中。 聚焦网络爬虫 聚焦网络爬虫（Focused Crawler）也叫主题网络爬虫，顾名思义，聚焦网络爬虫是按照预先定义好的主题有选择地进行网页爬取的一种爬虫，聚焦网络爬虫不像通用网络爬虫一样将目标资源定位在全互联网中 一般反爬虫策略多数用在比较低级的爬虫上，这类爬虫多为简单粗暴的不顾服务器压力不停访问，再一种为失控的或被人遗忘的爬虫，这类爬虫一般需要在第一时间封锁掉。 越是高级的爬虫，越难被封锁，相应高级爬虫的开发成本也越高。 在对高级爬虫进行封锁时，如果成本高到一定程度，并且爬虫不会给自己带来大的性能压力和数据威胁时，这时就无需继续提升成本和爬虫对抗了。
5.1K62发布于 2019-07-10
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号