搜索 - 腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

文章/答案/技术大牛

发布

来自专栏马拉松程序员的专栏
数据分类：新闻信息自动分类
综合评估下来，我们选择上面8个分类作为数据集。 2.获取训练测试集前面我们选定了8个类别的新闻，现在的需要把原始文件的内容拆分出来一部分，作为数据集，考虑到每个类别数据差距比较大，选择一个平衡的数量，每个类别取3000条数据。 news_in.close() if __name__ == '__main__': praser_handler('news_sohusite_xml.dat') 代码运行结果如图所示，我们已经拆分出来8个类别的新闻 3.拆分训练测试集上面得到的3000*8条新闻是接下来用于训练和测试的语料库。新闻1类别：sports 新闻2类别：health 新闻3类别：business 新闻4类别：business 从网上找了四段新闻内容，分别为体育、健康、财经、学习类的新闻，当前的多项式朴素贝叶斯分类器预测准确了
97120编辑于 2023-09-21
来自专栏菜鸟学数据分析之R语言
【R语言】文本挖掘| 网页爬虫新闻内容
01 目标读取该网页的新闻，包括新闻标题，发文日期，时间，每条新闻链接，文章内容 ? www.thepaper.cn/' web<-read_html(url) news<-web%>%html_nodes('h2 a') #用浏览器打开网页，右键单击-检查，查看网页源代码特点，可以知道每条新闻位于如何查看节点确定每篇新闻所在位置为'h2 a'，详见视频：关注公众号后台回复【网页节点】查看视频 04 新闻题目title爬取 #获取title title<-news%>%html_text()# 读取新闻题目 #查看前6行题目特点 head(link) ? 图2 link数据特点从link的数据结构看，我们只需要href，这个就是每个新闻对应的子链接，因此，我们要写一个循环，将link中的href提取出来。
2K10发布于 2021-01-28
来自专栏FreeBuf
SRC漏洞挖掘信息收集与挖掘技巧
当收集到qq群这种信息时还可以”潜伏”到qq群，qq群文件可能会包含一些敏感的信息。这方面的信息收集能够帮助我们在漏洞利用时构造一些参数值或是进行暴力破解等等。漏洞挖掘小技巧 F12、查看源文件大法 ? ? ? 在漏洞挖掘时可以多多查看“源文件”，越来越多的站点使用webpack进行打包会导致接口暴露等信息暴露，看似比较乱的js通过js格式化就能很好的进行阅读发现问题。总结 1.挖掘SRC漏洞时，对于子域名的收集至关重要，子域名的多少决定了漏洞的产出。 2.在进行信息收集时尽可能的做到全面，这样能最大限度上获取到子域名。 3.进行漏洞挖掘时要细心，JS中蕴藏着宝藏。 *本文作者：HONGSON，来自FreeBuf.COM
1.7K20发布于 2020-06-16
来自专栏Ray学习笔记
爬取新闻网信息
xml version="1.0" encoding="UTF-8"? xml version="1.0" encoding="UTF-8"?> <! (contentElement.isEmpty()) { return; } // 直接从头部信息获取部分数据从标签中抽取信息，封装成 news HashSet<News> newsSet = new HashSet<>(); newA.forEach(a -> { 从标签中抽取基本信息，封装成 news HashSet<News> newsSet = new HashSet<>(); for (Element a : newsATags
1.5K30发布于 2020-09-15
来自专栏Y-StarryDreamer
信息检索与文本挖掘
当涉及到自然语言处理（NLP）中的信息检索与文本挖掘时，我们进入了一个旨在从大量文本数据中发现有价值信息的领域。信息检索涉及从文本数据中检索相关信息，而文本挖掘则旨在自动发现文本中的模式、趋势和知识。文本挖掘有助于组织和理解大规模文本数据，从中提取有价值的信息。为什么信息检索与文本挖掘重要？金融领域：分析新闻报道和市场数据，以支持金融决策和投资策略。健康医疗：从医学文献中提取有用的医疗信息，用于疾病诊断和治疗建议。法律领域：自动化合同分析、法律文档分类和法律研究。新闻媒体：自动化新闻分类和主题建模，以帮助记者和编辑组织新闻报道。企业知识管理：管理和检索企业内部文档和信息资源。使用NLP进行信息检索与文本挖掘使用自然语言处理（NLP）技术进行信息检索与文本挖掘涉及多个步骤：数据收集：首先，需要获取文本数据，这可以是来自互联网、社交媒体、新闻、研究文献或其他来源的文本。
1.9K140编辑于 2023-11-09
来自专栏HACK学习
漏洞挖掘之信息收集
原创投稿，作者：Only_Free 对一个网站挖掘的深浅来说就得看你收集的如何，这说明信息收集在漏洞挖掘中是非常的重要的。 rtsp-url-brute,snmp-brute,svn-brute,telnet-brute,vnc-brute,xmpp-brute > scan.txt 然后根据对应开放的端口进行针对性漏洞挖掘 C段信息收集 C的段我话教育一般都是使用iis put这款工具来扫描，自可以定义扫描1-255的端口并且还有报道查看服务器banner信息自定义的端口 135,139,80,8080,15672,873,8983,7001,4848,6379,2381,8161,11211,5335,5336,7809,2181,9200,50070,50075,5984,2375,7809,16992,16993 return 0 if __name__ == '__main__': import sys domain=sys.argv[1] Xcdn(domain) 如图8所示我们可以诱导用户点开来劫持账号密码或者还是看源代码，然后搜索hidden（滑稽），我们可能可能会找到敏感操作的按钮，然后管理员也知道敏感，将其“隐藏”了，我们可以根据这个来搜索然后访问他，嘿嘿嘿（之前一个对小站点进行挖掘的时候我
1.5K41发布于 2019-08-05
来自专栏DrugOne
DrugBank:小分子数据信息挖掘
DrugBank数据库简介 DrugBank数据库是唯一将详细的药品数据（即化学、药理学和制药）与综合药物靶点信息（即序列、结构和作用通路）相结合的“生物信息学和化学信息学”资源。作为临床导向的药品百科全书，DrugBank能够提供关于药品，药品靶点和药物作用的生物或生理结果的详细、最新、定量分析或分子量的信息。 DrugBank数据库小分子信息的解析，药物结构提取：下载XML文件 https://www.drugbank.ca/releases/latest ? 基于Python3从含有药物信息的XML文件解析数据 ? 效果 ? ---- 如果想获取DrugBank数据库的小分子结构，只需从XML文件中解析出的csv中提取结构的smiles信息，然后转换成结构。
2.4K40发布于 2021-01-28
来自专栏Web安全技术
Google Hacking语法-信息泄露挖掘
随缘找信息泄密直接用Google hacking语法语法如下： filetype:txt 登录 filetype:xls 登录 filetype:doc 登录这三条是我经常用的Google
1.5K00发布于 2020-05-02
来自专栏达达前端
微信小程序新闻信息列表展示
微信小程序信息展示列表效果展示 wxml <! } /* 卡片 */ .item { margin-top: 15px; margin-bottom: 10px; } /* 标题 */ .title { margin-top: 8px ; margin-left: 10px; margin-bottom: 8px; color: #444; font-weight: bold; font-size: 18px; } /* 信息 */ .info { display: flex; flex-direction: row; font-size: 12px; color: #999; } /* 前半部分 */ .desc { width: 95%; margin-left: 10px; } /* 每条信息 */ .desc text { margin-right: 10px; }
3.4K20发布于 2019-07-03
来自专栏ApacheHudi
2024 年 8 月 Apache Hudi 社区新闻
Apache Hudi: https://medium.com/@vpriyanshu671/running-pyspark-with-apache-hudi-in-a-docker-environment-8cbe63761e95
34700编辑于 2024-11-23
来自专栏生信技能树生信入门马拉松
Day8 GEO数据挖掘
差异分析中的log默认是log2GEO数据库介绍三部分信息：系列号-样本号-平台信息基因芯片：探针的表达量代表基因的表达量，探针与序列绑定芯片数据：数据Type: Expression profiling ', getGPL = F)2.从网页上下载/发链接让别人帮忙下，放在工作目录里需要下载表达数据、临床信息、GPL编号表达数据：看数据范围决定是否需要log，是否有负值，异常值看是否有异常样本:样本间的表达量较一致
35010编辑于 2024-05-08
来自专栏C++ 动态新闻推送
C++ 动态新闻推送第8期
C++ 动态新闻推送第8期从reddit/hackernews/lobsters/meetingcpp摘抄一些c++动态。每周更新周刊项目地址 github，在线地址 discord讨论群组｜飞书讨论群组｜知乎专栏欢迎投稿，推荐或自荐文章/软件/资源等，请提交 issue ---- 资讯编译器信息最新动态推荐关注
60010发布于 2021-08-31
来自专栏网络安全技术点滴分享
进阶GitHub Dorking技术：挖掘敏感信息与自动化漏洞挖掘
“非会员读者可在此处查看免费版本”用于搜寻敏感信息的下一层级GitHub搜索指令1️. 用于查找API密钥和令牌的高级搜索指令CSD0tFqvECLokhw9aBeRqopJDR93OU7WxHE+knUD6TN8o5lXqpXoinBLfgd2cIi8ISnJ+t053saoBgDAk2bfcLlTpOTPsoDKzCLw59bvH
14710编辑于 2026-01-27
来自专栏红蓝对抗
Src挖掘之手把手edusrc漏洞挖掘和github信息收集
原文首发在先知社区 https://xz.aliyun.com/t/14970 0x1 前言这里主要还是介绍下新手入门edusrc漏洞挖掘以及在漏洞挖掘的过程中信息收集的部分哈！（主要给小白看的，大佬就当看个热闹了）下面的话我将以好几个不同的方式来给大家介绍下edusrc入门的漏洞挖掘手法以及利用github信息收集的过程以及给师傅们分享一些比较好用的工具哈。 0x2 信息收集——github 介绍: 在漏洞挖掘的过程前期我们进行信息收集，github和码云搜索相关的信息，代码库，运气好的话可以在库中发现一些重要配置如数据库用户密码等。第二个自然就是top10：万能密码（sql）、xss漏洞的挖掘。第三个：逻辑漏洞分析首先还是先使用f12查看页面源码，说不定管理员密码写在页面中的！然后最后希望这篇入门的edusrc挖掘文章能够对师傅们有一点帮助吧！ FOFA 鹰图文章中涉及的敏感信息均已做打码处理，文章仅做经验分享用途，切勿当真，未授权的攻击属于非法行为！
1.8K13编辑于 2024-07-12
来自专栏别先生
基于Jsp+Servlet的新闻信息管理系统
运行环境，jdk1.8或者jdk1.7、tomcat8或者tomcat8.5、mysql5.7、eclipse或者myeclipse开发环境。 1、企鹅1748741328，基于Jsp+Servlet的新闻信息管理系统的登录界面，如下所示： ? ? 2、基于Jsp+Servlet的新闻信息管理系统的注册界面，如下所示： ? ? 3、基于Jsp+Servlet的新闻信息管理系统的后台主界面，如下所示： ? ? 4、基于Jsp+Servlet的新闻信息管理系统的用户管理界面，如下所示： ? ? 5、基于Jsp+Servlet的新闻信息管理系统的新闻类别管理界面，如下所示： ? ? 6、基于Jsp+Servlet的新闻信息管理系统的新闻管理界面，如下所示： ? ? ? ? 7、基于Jsp+Servlet的新闻信息管理系统的前台主界面，如下所示： ? ? 8、基于Jsp+Servlet的新闻信息管理系统的新闻详情主界面，如下所示： ? ?
8.2K40发布于 2020-12-09
day 7-8 GEO数据挖掘
2.GEO背景介绍+分析思路表达数据实验设计：分组需要有意义分组为病变组织VS 健康组织如果公共数据库没有，需要自己测 2.1数据挖掘：有差异的材料→差异基因→找功能/找关联→解释差异,缩小基因范围发链接让别人帮忙下，放在工作目录里 #2.试试geoChina,只能下载2019年前的表达芯片数据 #library(AnnoProbe) #eSet = geoChina("GSE7305") #选择性代替第8行 pd,exp,gpl_number,file = "step1output.Rdata") # 原始数据处理的代码，按需学习比较难 # https://mp.weixin.qq.com/s/0g8XkhXM3PndtPd-BUiVgw # 方法3 官网下载注释文件并读取 # 方法4 自主注释，了解一下 #https://mp.weixin.qq.com/s/mrtjpN8yDKUdCSvSUuUwcA save(exp,Group,ids step2output.Rdata") #比较复杂的探针注释参考资料 #资料1：拆分取列https://www.yuque.com/xiaojiewanglezenmofenshen/kzgwzl/sv262capcgg9o8s5
50210编辑于 2025-08-15
来自专栏SpringBoot+MyBatis前端
JavaWeb新闻信息数据维护——评论与回复以及分页
其实评论与回复是差不多的（都需要一个表来存数据）所以我以评论为例（供参考） //这是一个doaddpl.sql代码， //防止乱码 request.setCharacterEncoding("utf-8" nid="+nid+"'</script>"); } //以下是查询新闻评论的主界面代码的一部分 <% //查询新闻的评论 ps = con.prepareStatement
90620编辑于 2022-11-18
来自专栏深度学习自然语言处理
腾讯信息流热点挖掘技术实践
接下来的任务和热点挖掘更相关，就是话题检测与追踪中的TDT任务，这个任务有20多年的历史了，定义的是处理新闻报道的系统。输入可以是固定的文章或者流式数据，结果是以聚类的方式将文档组织起来的话题。我们可以通过检测突发特征来发现事件，这类研究目标与TDT任务不同，不再局限于传统的新闻报道，可以针对多类型的数据，比如微博、搜索、视频数据，受此输入的影响，我们将时序分析方法和话题聚类相结合，来提升热点挖掘的效果资讯文章热点挖掘 ? 作为信息流服务的团队，每天打交道最多的是海量数据。这不仅可以用在图文挖掘上，也可以用在视频、小视频热点挖掘中。 2. 视频&小视频热点 ? 视频&小视频热中的应用，主要是基于热点挖掘得到的文本信息，将图文计算的热点传递给视频和小视频，怎么做的呢？另一个是基于新闻报道的视频，人工不知道事件的前提下，直接打事件标签很困难，需要借助已经挖掘到的事件库，和视频标题做匹配，匹配近期的热门事件的视频和小视频，如"科比坠机"，可以匹配到"科比去世"，"科比坠机身亡事件
2.3K21发布于 2020-09-30
来自专栏罗超频道
搜索引擎在新闻信息集成中的作用
在这个全新的数字世界里，信息生产成本降低使之爆炸式增长，媒体介质和技术的发达加速了信息流通，便捷的信息获取手段则激活了人类对信息消费需求。世界被卷入其中这一波移动浪潮，新闻和搜索引擎也不例外。新闻的本质归根结底是信息的生产、传播和消费。新闻具备的显著特征将其与普通信息区分开来。正如新闻巨子范长江对新闻的定义：“广大群众欲知应知而未知的重要事实”。这体现了新闻信息应该及时、真实和简洁的特点。其次是实现新闻的集中化管控，进而管控传播路径。最后可以对集成的信息进行深度加工，满足用户正在变化的新闻诉求。国内外搜索引擎的本质是加速信息的流动，帮助用户简单快速地找到想要的信息。对于集成的新闻信息如何进行二次加工甚至多次加工，挖掘和释放其附加价值。因此，搜索引擎在信息集成中，扮演一个再次加工的新闻终端角色。搜索引擎除了实现新闻信息集成、满足用户的搜索诉求外，还可以通过互动功能实现“向下的新闻信息集成”。前面提到的对新闻源的爬取可以认为是“向上的新闻信息集成”，或者“后向的新闻信息集成“。
1.9K80发布于 2018-04-28
来自专栏逸鹏说道
★Kali信息收集~ 5.The Harvester：邮箱挖掘器
官网：http://www.edge-security.com 安装：apt-get install theHarvester 运行：终端输入 theharvester (小写) 用法+参数：（返回邮
1.8K70发布于 2018-04-09

第 2 页第 3 页第 4 页第 5 页第 6 页第 7 页第 8 页第 9 页第 10 页第 11 页

点击加载更多