首页
学习
活动
专区
圈层
工具
发布
    • 综合排序
    • 最热优先
    • 最新优先
    时间不限
  • 来自专栏Python协程

    3.异步协程爬取下载网络小说

    之前,我们已经通过多线程的方式实现了下载网络小说,参阅文章地址,下面将采用异步携程的方式进行下载。

    26310编辑于 2024-07-08
  • 来自专栏祥的专栏

    用Python下载网络小说.23333

    网络小说一般会攒上一波,然后导入Kindle里面去看,但是攒的多了,机械的Ctrl+C和Ctrl+V实在是OUT,所以就出现了此文。 我要获取的主要是3个东西: 文章的标题。

    正文 第一章 北灵院
    文章正文内容。 这个网页的编码是GBK,但在实际运行过程中,我用GBK会出现网页解码错误: UnicodeDecodeError: ‘gbk’ codec can’t decode bytes in position 2-3: illegal multibyte sequence 所以换用了gb18030,问题就解决了,因为一般修仙网络小说中,会出现各种王霸之气的文字,你们懂得,所以需要更加牛逼文字库,你们感受一下博大精深的字符编码 网络小说毒害有志青年,一入网文深是海,从此节操是路人,诸君且行且珍惜!

    74420发布于 2020-03-10
  • 来自专栏Python多线程

    多线程爬取下载网络小说

    3.捋清思路,手撕代码 细心的网友会发现,请求头地址URL中出现了一堆“%22”的乱码,其实它就是ASCII码中的双引号,参阅百度百科的词条内容:URL编码。

    34310编辑于 2024-07-08
  • 来自专栏拭心的安卓进阶之路

    策略模式:网络小说的固定套路

    策略模式:网络小说的固定套路 本篇文章已授权微信公众号 guolin_blog (郭霖)独家发布 近日小舅子让我推荐几本好看的玄幻小说,下好了发给他。 铁打的小说流水的读者,导致了当前网络小说的固定套路,作家只要把故事梗概提取出来,把主角名字、背景什么的一换,就又是一本新书。唉,竟无语凝噎。 这种情况用代码怎么实现呢,我们来试试。 adventure(); winABattle(); growFast(); manyFights(); succeed(); } } 3.

    55130编辑于 2022-05-10
  • 来自专栏Android开发

    Android网络小说阅读器的实现

    大概效果如下 图1 主页 图2 小说详情页 图3 小说阅读页 图4 小说阅读页 图5 小说分类页 图6 小说分类子页 1.整个Demo的核心是利用Jsoup对HTML的解析(百度搜索Android Jsoup 2.自定义view 3.数据缓存的处理,小说的没有实现下载功能,实现的是六章小说缓存。 然后好像没啥了,,,(屏幕适配,字体设置,保活,预加载动画,,,)大多都是第三方框架加上大佬的一些封装直接搞定

    23110编辑于 2025-06-12
  • 来自专栏CSDNToQQCode

    零基础学Python-爬虫-3、利用CSS选择器爬取整篇网络小说

    开发环境:【Win10】 开发工具:【Visual Studio 2019】 Python版本:【3.7】 1、重新创建一个空项目【T3】: 2、需要用的模块【requests】【scrapy.selector 】 from requests import get from scrapy.selector import Selector 3、获取访问路径:爬取网站:【http://www.zongheng.com sel=Selector(text=html) result=sel.css("ul li a::attr(href)").extract() #由于防止被封ID,故而测试的时候只访问前两个 count=3 sel=Selector(text=html) result=sel.css("ul li a::attr(href)").extract() #由于防止被封ID,故而测试的时候只访问前两个 count=3 "),"w",encoding="utf-8") file.write(strInfo) file.close() 8、最终执行:(为了防止被封,故而每次访问间隔1~3s

    85420编辑于 2022-11-28
  • 来自专栏用户5745643的专栏

    盗版网络小说对行业的危害性

    随着互联网的迅猛发展,无论是数字音乐、电影、网络小说都随着互联网的进步而发光发热。很多热门的网络小说改编影视作品的热映,网络小说的影响力也与日俱增,成为了互联网上不可忽视的重要组成部分。 由于侵权成本低,维权成本过高,使得盗版网络小说猖獗,创作者及原创网站维权乏力。特别是在目前这个传播性快与开放性的互联网时代,使得网络小说在版权保护上的难度更加大。   盗版对于网络小说的危害是非常严重的,会直接导致平台用户留存率下降,点击率降低,广告收益减少,付费制或会员制收益及数量减少。而对于网络小说作家来说,会直接导致创作能力及收入分成降低。 为什么盗版对网络小说的危害性会这么大,首先第一个,其他数字产品的商业模式相对来说比较成熟,例如视频和音乐的商业。 而对比网络小说,虽然也有正规的商业模式,但是不足以避免那些大的流量入口,或者一些从业者通过盗版获取更好的回报。

    1.2K40发布于 2019-08-06
  • 来自专栏Python进阶之路

    Python爬虫练习 爬取网络小说保存到txt

    利用python爬虫爬取网络小说保存到txt,熟悉利用python抓取文本数据的方法。 里的内容://div@id=“list”/dl/dd/a/@href 分析网页可得,提取出来的内容里每个元素前面应加上 http://www.xbiquge.la 得到的才是是每个章节真正的链接 [c3yeo09eo6 urls = get_urls() for url in urls: get_text(url) time.sleep(random.randint(1, 3) q-sign-algorithm=sha1&q-ak=AKID2uZ1FGBdx1pNgjE3KK4YliPpzyjLZvug&q-sign-time=1611377606;1611384806&q-key-time =1611377606;1611384806&q-header-list=&q-url-param-list=&q-signature=2b0e6dd139c3e83239b37cf635574b73a71d1b2a

    6.4K52发布于 2020-09-17
  • 来自专栏分布式|微服务|性能优化|并发编程|源码分析

    技术专栏|假如把JAVA发展史写成一部网络小说......

    在2018年3月20日,我成功的升级到“JDK10”的段位。 结束 到这里,我已经把自己的历程和大家说完咯,最近几年的事,我就不说了,大家应该都能找到相关资料。

    39630编辑于 2022-09-19
  • 来自专栏Python编程大咖

    纯技术案例,用Python爬取网络小说,为所欲为拒绝书荒

    作为一个“文化人“的小编,一直也有看网络小说的习惯,最近在网上看到一个技术大牛用Python抓取网络小说,实在难掩羡慕之意,今天小编也来分享一下吧。 先来看一下网站结构: ? 承接上下章节 ?

    90020发布于 2019-04-17
  • 来自专栏若城技术专栏

    【腾讯云 HAI域探秘】基于ChatGLM和StableDiffusion的网络小说漫画创作实践与经验分享

    前言本文将介绍如何利用腾讯云HAI的StableDiffusion和ChatGLM模型,从网络小说到漫画的创作过程。我们将通过ChatGLM模型生成文本内容,并基于该内容进行场景描述生成。 此外,我们还会探讨如何利用相关配音软件对网络小说内容进行配音,并将StableDiffusion生成的图片与音频进行整合,最终制作出令人惊艳的漫画视频作品。 通过本文的详细介绍和实践指引,您将能够深入了解如何运用StableDiffusion和ChatGLM模型,开启网络小说漫画创作的新篇章。 接下来 我们开始生产我们需要的UI啦根据提示词生成UI我们使用chatbot生成的小说, 分段分解并生成对应的英文提示词以及反向提示词来生成对应的UI , 下面是第一张图的示例UI 生成结果历经大约3个小时左右的时间 导入文案我们将所需的文案导入到配音软件中 , 选择配音角色以及语速音调等细节信息进行配音终于经历一系列的调整配了两段音频如下图 ; 试听音频1.mp32.mp3视频制作对于制作视频这里 提供的软件是剪映

    83620编辑于 2023-12-05
  • AI 爬虫正在偷走你的内容和流量——内容创作者如何自保

    技术教程、网络小说、知识社区、网文数据平台——这些高质量内容的产出地,正是大模型训练最渴望的语料来源。你在垂直领域越专业、内容越独家,对 AI 的价值就越高。 一个小说网站正在经历的事某网络小说阅读平台,采用会员付费制,提供中文长篇网络小说。 你可以对 AI 爬虫自定义处置方式:● 观察:先看看有多少 AI 流量● 拦截:直接阻断所有 AI 爬虫● 放行:允许 AI 爬虫访问● 挑战:验证访问者身份3 步开启,免费1️⃣ 领取免费套餐:登录 2️⃣ 接入站点并添加域名,支持 NS 和 CNAME 模式,如有问题可查看 快速接入网站安全加速3️⃣ 开启 AI 爬虫处置:安全防护 → Web 防护 → Bot 管理 → AI 爬虫处置更多安全防护

    15610编辑于 2026-04-16
  • 来自专栏若城技术专栏

    【腾讯云 HAI域探秘】基于ChatGLM和StableDiffusion的网络小说漫画创作实践与经验分享

    前言 本文将介绍如何利用腾讯云HAI的StableDiffusion和ChatGLM模型,从网络小说到漫画的创作过程。我们将通过ChatGLM模型生成文本内容,并基于该内容进行场景描述生成。 此外,我们还会探讨如何利用相关配音软件对网络小说内容进行配音,并将StableDiffusion生成的图片与音频进行整合,最终制作出令人惊艳的漫画视频作品。 通过本文的详细介绍和实践指引,您将能够深入了解如何运用StableDiffusion和ChatGLM模型,开启网络小说漫画创作的新篇章。 横向对比 · 青出于蓝 大幅降低GPU云服务器使用门槛,多角度优化产品使用体验,开箱即用 3. 导入文案 我们将所需的文案导入到配音软件中 , 选择配音角色以及语速音调等细节信息进行配音 终于经历一系列的调整配了两段音频如下图 ; 试听音频 1.mp3 2.mp3 视频制作 对于制作视频这里

    41810编辑于 2024-02-29
  • 来自专栏Python爬虫与数据挖掘

    手把手教你使用Python网络爬虫获取小说

    而是选择看网络小说,可是网络小说有些要钱才能看。 无限小说网 https://www.555x.org/ 里边的内容是完全免费的,提供了各种种类的小说。满足用户的需要。 /3 项目准备/ 软件:PyCharm 需要的库:requests、lxml、fake_useragent 网站如下: https://www.555x.org/html/wuxiaxianxia/list for i in range(1, 50): self.headers = { 'User-Agent': ua.random, } 3、发送请求,获取响应, 页面回调, 3、点击蓝色下载链接, 网络下载 ? 4、双击小说文件,内容如下图所示。 ? /6 小结/ 1、不建议抓取太多数据,容易对服务器造成负载,浅尝辄止即可。 3、实现的时候,总会有各种各样的问题,切勿眼高手低,勤动手,才可以理解的更加深刻。 4、希望通过这个项目,能够帮助一些上班族,在空闲时能够直接通过网络去获取自己想要的小说 。

    1.7K20发布于 2020-07-02
  • 来自专栏全栈程序员必看

    鸿蒙3部曲先看哪部,“隋唐三部曲”“鸿蒙三部曲”“斗罗四部曲”谁才是网文巅峰之作…

    原标题:“隋唐三部曲”“鸿蒙三部曲”“斗罗四部曲”谁才是网文巅峰之作 从网络小说诞生的那一刻起,续集就是一个绕不过去的话题,如同电视剧一样。 一部网络小说红了之后,它的原作者很多时候会忍不住开发它的续集,形成一个系列,然后再现网文界。 论世界观以及故事的完结性,几乎无任何的网络小说能够超越《斗罗大陆》系列,毕竟能够像这样写了祖孙三代外加女婿的故事,也仅此一例。把大陆漂移以及各种文明体系发展起来,唐家三少可以说是首创。

    4.4K20编辑于 2022-09-07
  • 来自专栏VRPinea

    剥去华丽的外衣,这些网络IP剧还剩下什么?

    “IP”这个概念是在2010年左右,以《甄嬛传》为代表的一系列网络小说改编的影视剧作品大卖之后,才衍生的话题现象。之后这股浪潮便在国内长盛不衰。从目前豆瓣评分8.3看,《海上牧云记》已是难得的佳作。 原作本身的质量堪忧 近几年的IP热使得一些稍微不错网络小说版权的早已被抢购一空,而没有那么富裕的便只能从一堆“烂橘子”里挑不太烂的了。 这些低质量的网络小说几乎都是非常套路化的故事,想要借此改编出优质剧也是强人所难。就像《锦绣未央》,原作本身就有抄袭多部其他网络小说的嫌疑,而改编剧自然也会受其影响,还没出来被打上“抄袭”的标签。 ?

    1K100发布于 2018-05-17
  • 来自专栏金融民工小曾

    三四五线城市,移动互联网时代最后的红利

    (适合于在手机上玩的游戏或者娱乐,比如王者荣耀、抖音等) 3.年轻人喜欢娱乐。尤其喜欢短视频和网络小说,并且有意愿消费。 (愿意为游戏充值,给直播主播打赏,为网络小说付费) 4.中老年人喜欢健康、养生,购物偏向于性价比。(广场舞、拼多多、健康的一些周边) 有时间多去看看快手,多用一下拼多多。

    70020发布于 2018-09-14
  • 来自专栏Java面试教程

    你一定要看看,这款开源软件功能太强大了!!!

    修仙 修仙部分是小说阅读功能,同样可以切换小说源,支持搜索网络小说,可以搜索的小说类型非常丰富,另外网络小说的更新速度很快,让追更不再麻烦。。。

    7K12编辑于 2024-07-12
  • 来自专栏知晓程序

    腾讯出品的 2 款阅读小程序,哪个看小说更爽呢 | 晓 PK #2

    这里是晓 PK 栏目的第 2 期 网络小说的世界让人神魂颠倒,不断更新的小说情节,更是吸引着一批又一批的小说迷神游其中。 作为骨灰级小说迷,选择一个合适的阅读平台显得尤为重要。 「QQ 阅读」则是更专注于排行功能,如果你想要阅读近 10 年最热门的网络小说,「QQ 阅读」小程序是不错的选择。

    1.6K20发布于 2018-08-01
  • 来自专栏祥的专栏

    [Python]获取起点小说网的更新情况

    原因 每次想知道网络小说的更新情况,就得去贴吧逛逛,然后去起点网瞧瞧,这样很浪费时间,尤其是我这种一逛贴吧,就出不来的选手,所以写了一个脚本,用来获取小说的更新情况,不需要点开网页,直接运行bat文件就 那个,我也觉得看网络小说不好,而且也在看一些严肃文学作品,但是无奈啊,我就是一个脱离不了快餐文学的人。。。 2. 代码 2.1.

    87120发布于 2020-03-10
领券