- 综合排序
- 最热优先
- 最新优先
- 来自专栏.NET开发那点事
豆瓣电台WP7客户端 开发记录6
PlayListHelper.IsInited) 6 { 7 PlayListHelper.InitChannelComplete +=
41920编辑于 2022-05-07 - 来自专栏机器学习AI算法工程
6万部豆瓣电影数据，如何做数据分析？
《中国电影报》2016年12月27日发布题为“豆瓣电影评分，面临信用危机”的文章，随后人民日报客户端转发了该文，并将标题改为“豆瓣、猫眼电影评分面临信用危机，恶评伤害电影产业”。 基于此，特地把以前抓取的豆瓣电影数据拿出来分析一下，重点比较中国电影与其他国家和地区的电影的差异，以为豆瓣评分正名。 2 数据概况 这个数据只抓取到2016年上半年，总计 58127 部电影。 相关爬虫 [Python]从豆瓣批量获取看过电影的用户列表，并应用kNN算法预测用户性别 [Python]豆瓣用户读书短评下载 另外，也可以发现，评分人数越多，电影得分基本在7.0以上，属于中等以上的好片 （《小时代》除外） 3 各国电影质量分析 豆瓣评分最低打一星，换算成分数就是2.0分，因此豆瓣电影理论上的最低分不是0分，而是2.0分。 5.5 近十年6分以下的烂片 但是，近十年6分以下烂片的产出居然出现逐年递增的趋势。 ? http://blog.ursb.me/2017/01/16/6
2.4K80发布于 2018-03-14 - 来自专栏用户5305560的专栏
模拟豆瓣登录
import requests # url = 'https://www.douban.com/accounts/login' # params = { # 'source':'index_nav', # 'form_email':'xxxxx', # 'form_password':'xxxx' # } # html = requests.post(url,params) # print(html.text) url = 'https://www.douban.com/' head
1.1K20发布于 2021-08-11 - 来自专栏技术社区
豆瓣电影api系列
豆瓣电影api 1、获取正在热映的电影： 接口：https://api.douban.com/v2/movie/in_theaters?
4.2K30编辑于 2022-06-16 - 来自专栏测试游记
爬虫练习-豆瓣读书
昨晚使用不熟悉的xpath语法解析百度新闻页面碰到了好多坑，今天继续通过简单的豆瓣图书进行练习 1.分析页面 ? 进入豆瓣首页https://www.douban.com/在第一行导航栏找到读书：https://book.douban.com/ 进入页面之后发现有很多内容，由于豆瓣没有反爬措施，所以多抓取些数据 大致浏览后发现应该能通过标签查找到全部图书 >解忧杂货店 4 5
[日] 东野圭吾 / 李盈春 / 南海出版公司 / 2014-5 / 39.50元6 7<span class="rating_nums password='123456', db='douban',charset="utf8") 4 #写sql语句 5 sql = "INSERT INTO douban_book <em>6</em>( view=cloud' 4 self.page = 0 5 def get_tags(self): <em>6</em> ''' 776940发布于 2019-07-17 - 来自专栏python学习路
十、豆瓣读书爬虫
我的过程是：（python3） 1、先将豆瓣读书的所有标签以每行七个打印到页面上。 2、输入要爬取标签的名字，可以输入多个。 3、输入你想要爬取多少页。 (本来想保存到Excel中的，但是我下载的Python是最新版本，自己知道的库中，没有合适的) 6、把这些用到我练习的网站(用的Django)中，在Django下写一个脚本，将数据导入数据库 import
1.5K50发布于 2018-04-16 - 来自专栏用户5305560的专栏
【爬虫】下载豆瓣图书
from lxml import etree import requests import csv fp = open('C://Users/LP/Desktop/doubanbook.csv','wt',newline='',encoding='utf-8') writer = csv.writer(fp) writer.writerow(('name', 'url', 'author', 'publisher', 'date', 'price', 'rate', 'comment')) urls
55920发布于 2021-08-11 - 来自专栏python爬虫与js逆向
豆瓣登录滑块分析
打开豆瓣的登录。 连续点击登录大约10次，才会触发滑动。。。。 这个风控有点。。。额。。 可以作为滑块练习的网站。 这里，先从图片入手，。 分析图片是从哪里来的！！ 然后。。。
1.8K40编辑于 2022-06-02 - 来自专栏毛利学Python
豆瓣电影推荐系统
豆瓣电影推荐系统——通过爬取电影数据和用户数据，再利用所爬取的数据设计并实现相关推荐算法对用户进行电影推荐。
1.2K10编辑于 2022-12-20 - 来自专栏睡不着所以学编程
爬取豆瓣电影
嗯，今天还是挑战了爬取电影，因为我发现从别的页面进去就不是Ajax的页面了，步骤和书单差不多hhh
1K10编辑于 2022-09-20 - 来自专栏默认分类
豆瓣top250
`import requests import re url = "https://movie.douban.com/top250" headers = {
67910编辑于 2023-02-14 - 来自专栏北京马哥教育
豆瓣的基础架构
本文根据InfoQ中文站对豆瓣洪强宁（@hongqn）的沟通交流整理而成。洪强宁介绍了豆瓣的架构和组件，并分享了豆瓣基础平台部的一些团队经验。文中截图来自洪强宁在2013年CTO俱乐部中的分享。 豆瓣整个基础架构可以粗略的分为在线和离线两大块。 团队 当前，我所负责的豆瓣平台部一共包括四个部分：核心系统，这块也是由我直接带领的，共6名工程师；DAE，现在是彭宇负责，共4名工程师；DBA两人；SA两人。 跟豆瓣其他工程团队一样，平台部也强制大家做code review。 最后，对于新技术的引入上，豆瓣整体是比较偏激进的，我们鼓励大家去看看新的技术。
1.3K80发布于 2018-05-02 - 来自专栏罗超频道
豆瓣6.0来了！回归初心，豆瓣格局却变大了？
豆瓣正在回归初心。 作为Web2.0时代的代表，豆瓣如何抓住移动互联网，一直是行业津津乐道的话题。在一度同时维护超过10个移动端豆瓣系App后，豆瓣最终改变策略聚焦到“豆瓣App”这款旗舰上。 豆瓣在帮助用户发现感兴趣的书影音内容上做得更多，上线豆瓣榜单、豆瓣片单、豆瓣书单、个性化电影图书提醒功能等，整合为“豆瓣书影音助手”，用户会收到类似于“豆瓣又有8分以上的新电影了” “豆瓣电影TOP250 豆瓣1.0强调工具，主要是对书影音的评价；豆瓣2.0强调内容，整合了豆列、影视、旅行、时尚、科技宅等兴趣内容；豆瓣3.0强化社交；豆瓣4.0将工具、内容和社交更好地整合起来；豆瓣5.0则上线了豆瓣时间、 当然，豆瓣此前也知道这种割裂给用户带来的困扰，它尝试推出过豆瓣FM和豆瓣阅读，来满足用户对音乐和书籍的需求。在版权大战的环境下，豆瓣这两个业务未能突破巨头的围堵。 豆瓣，作为泛娱乐赛道的骨灰级玩家，自然不甘看着市场全部被后来者收割。 ? 剥离豆瓣音乐、豆瓣阅读独立发展，回归书影音的豆瓣，正在回归泛娱乐赛道。
65920发布于 2018-07-23 - 来自专栏Hank’s Blog
豆瓣数据分析
1 这个杀手不太冷 2 阿甘正传 3 美丽人生 4 泰坦尼克号 5 千与千寻 6 短评 249 dtype: int64 data['评分'].sort_values(ascending=False).head() 0 9.6 29 9.6 3 9.5 6 6 辛德勒的名单 559470 9.5 拯救一个人，就是拯救整个世界。 2 阿甘正传 1072395 9.4 一部美国近现代史。 6 辛德勒的名单 559470 9.5 拯救一个人，就是拯救整个世界。 2 阿甘正传 1072395 9.4 一部美国近现代史。
57540发布于 2020-09-17 - 来自专栏IT架构圈
RN请求豆瓣数据
项目中使用豆瓣网提供的开放数据接口 http://www.jianshu.com/p/c5160fda1d38 Util工具类封装 Util工具类封装了获取设备屏幕宽高、网络请求成功或者失败回调函数、数据请求成功前的等待效果
1.3K30发布于 2018-05-31 - 来自专栏程序萌部落
重写Hexo豆瓣影评插件
不知道从什么时候开始，习惯于在豆瓣找电影看，到了后来，就偶尔写个电影观后感，随着看电影看的越来越多，可比较的东西就越来愈多，所以现在看完一部新电影，写写自己的感想就成了固定环节了，作为一种“动态”，能够搬到博客上与他人共享那是再好不过的了 基于HEXO豆瓣插件 hexo-douban 的二次开发插，强烈建议先试用原插件，如果您觉得以下特性更能满足您的需要，那么再使用本插件。 原插件 hexo-douban 的不足： 书影音、大部分人就想放影评 样式不好看，字体大小的一致性即颜色 渲染全部观影记录，几百部电影会导致有几十页翻页，臃肿 单纯的构造豆瓣原页面，在“已看”列表中，只会出现短评内容 user: 你的豆瓣ID.打开豆瓣，登入账户，然后在右上角点击 “个人主页” ，这时候地址栏的URL大概是这样：“https://www.douban.com/people/xxxxxx/” ，其中的" 去掉了影评页跳转的菜单按钮 去掉了以上项目涉及的配置开关 异常 如果构建页面为空或404，且日志输出为 INFO 0 movies have been loaded in xx ms，这时怀疑您的IP由于多次请求豆瓣的页面而被豆瓣封禁了
1K00发布于 2020-12-22 - 来自专栏我是思聪
豆瓣电影数据分析
2.电影数据的地区分析 2.1 全球电影数量分布 图 6 各个地区电影数量分布 表格 2 电影数量前十的国家 根据各个国家的电影数量作图，可以得到图6，列出电影数量前十的国家可得表格2，发现美国在电影数量上占第一 比如数据6所表示的演员，参演作品以电视剧为主，在其他电影中仅仅饰演配角，但却排到了第6位。 图 17 导演电影均分与评论人数分布图 图 18演员电影均分与评论人数分布图 5. 表格 7 内地电影票房Top 20排名 6. 总结 本篇报告采集了1990-2020年间豆瓣电影29033组有效数据，从豆瓣电影的评分、时长、地区、类型、演员、导演以及票房等信息进行分析评价，主要有以下结论： 豆瓣电影影片时长主要集中在90-120 分钟，评分主要集中在6-8分，评分高的电影往往时间更长、评论人数更多。
4.4K30编辑于 2022-05-13 - 来自专栏python3
爬取豆瓣电影信息
昨天写了一个小爬虫，爬取了豆瓣上2017年中国大陆的电影信息，网址为豆瓣选影视，爬取了电影的名称、导演、编剧、主演、类型、上映时间、片长、评分和链接，并保存到MongoDB中。 extract() item["starring"] = response.xpath("//div[@id='info']/span[3]/span[2]/a[position()<6]
1.6K20发布于 2020-01-20 - 来自专栏萝卜大杂烩
爬取豆瓣海王评论
“ 最近海王大火，今天就来看看豆瓣上对于海王这个大片的评论吧” Just Do It By Yourself 01.分析页面 豆瓣的评论区如下 可以看到这里需要进行翻页处理，通过观察发现，评论的URL 02.分别获取评论 豆瓣的评论是分为三个等级的，这里分别获取，方便后面的继续分析 其实可以看到，这里的三段区别主要在请求URL那里，分别对应豆瓣的好评，一般和差评。 效果 好评 一般 差评 感觉爬取豆瓣还是比较简单的，毕竟并没有设置什么反爬手段，小伙伴们也可以一起动手试试
62820发布于 2019-07-17 - 来自专栏小锋学长生活大爆炸
豆瓣自动批量点赞
- [电脑端] 豆瓣自动顶贴 下载：http://xfxuezhang.cn/WEB/SHARE/ => [电脑版]豆瓣自动顶贴 - [安卓端] 豆瓣自动顶贴 下载：http://xfxuezhang.cn /WEB/SHARE/ [安卓版]豆瓣自动顶贴 - 自动顶贴 教程：http://xfxuezhang.cn/index.php/archives/213/ - [电脑端] 豆瓣小组回帖机器人 下载： http://xfxuezhang.cn/WEB/SHARE/ => [电脑版]豆瓣小组回帖机器人 - [安卓端] 豆瓣小组回帖机器人 下载：http://xfxuezhang.cn/WEB/SHARE / => [安卓版]豆瓣小组回帖机器人 - 回帖机器人 教程：http://xfxuezhang.cn/index.php/archives/137/ - [电脑端] 自动给指定评论点赞 下载：http 我觉得都还行吧", "或者2也行"] } 4、而对于一些配置相关的参数，放在ini里读取 [user] ;>> 查询间隔（秒） sleeptime = 5 5、配置都完成后，可以进行编程 6、
3.8K30发布于 2021-06-11
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号