首页
学习
活动
专区
圈层
工具
发布
    • 综合排序
    • 最热优先
    • 最新优先
    时间不限
  • 来自专栏开源心路

    dslinkis数据开放平台报错01

    这个是查询资源文件报错 scala.io.Source.fromInputStream 读资源,里面涉及到隐式import Codes._,这个有个隐患,去找隐式值,当前环境一直没找对,把源码改下,重新编译通过了。

    57810编辑于 2023-06-30
  • 来自专栏人人都是极客

    Apollo的数据开放平台介绍

    前段时间百度自动驾驶事业部杨凡对Apollo数据开放平台进行了介绍,介绍内容大纲如下: Apoll能力开放简介 Apoll的“云+端”研发迭代新模式 数据开放平台与训练平台实战 本文的大部分内容转载于微信群的文字交流 上图是Apollo开放路线图。Apollo从2017年4月份宣布开放计划,到7月份发布1.0,9月份发布1.5,2018年1月的CES发布2.0,迭代与发布速度非常快。 在2017年7月1.0中开放封闭场地循迹自动驾驶能力和资源,在9月1.5中开放固定车道自动驾驶能力和资源,在2018年1月2.0中开放简单城市路况自动驾驶能力和资源,之后会在2018、2019、2020 数据开放平台与训练平台实战 数据平台概要 Apollo数据集: ? 6部分数据集:激光点云障碍物检测分类,红绿灯检测,Road Hackers,基于图像的障碍物检测分类,障碍物轨迹预测,场景解析; 除开放数据外,还配套开放云端服务,包括数据标注平台,训练学习平台以及仿真平台和标定平台

    7.3K61发布于 2018-03-16
  • 来自专栏腾讯研究院的专栏

    星图数据发布国内首个“大数据开放平台

    2015年6月16日,标志性的DaaS(数据即服务)大数据公司“星图数据”宣布上线国内首个大数据开放平台—“蜂巢”。 “蜂巢(DataComb)”大数据开放平台开放星图数据自有的大数据体系,并引入第三方数据源和数据开发者,面向各行业提供更丰富更优质的“大数据+”应用服务,实现多方共赢的大数据商业化生态圈。 谷熠提到了打造开放平台的原因时说,“此次星图数据推出国内首个大数据开放平台,就是希望能联合更多具有优势资源的合作伙伴把稀缺的数据资产开放出来,让数据资产的开发与应用如“蜂巢”一般热火朝天。” “蜂巢”大数据开放平台将面向创业团队、科研院所、高校以及个人开发者提供开放数据集市,提供海量的高质量数据资源,以促进大数据产品和行业数据应用的生产与研发;并在平台上打造数据应用商店,引入大数据产品和行业应用服务 见36大数据:星图数据发布国内首个“大数据开放平台

    1.1K100发布于 2018-01-31
  • 来自专栏cloudskyme

    开放平台之安全

    什么是开放平台 开放平台就是将企业中的业务的核心部分经过抽象和提取,形成面向企业或者面向用户的增值系统,为企业带来新的业务增涨点。 因为是企业的核心业务能力,所以平台的安全性就成为重中之重。 签名的设计一般是通过用户和密码的校验,然后针对用户生成一个唯一的Token令牌, 用户再次获取信息时,带上此令牌,如果令牌正确,则返回数据。 payload使用.连接组成的字符串,然后通过header中声明的加密方式进行加盐secret组合加密,然后就构成了jwt的第三部分: 49UF72vSkj-sA4aHHiYN5eoZ9Nb4w5Vb45PsLF7x_NY 此处注意token之前有一个7字符长度的 Bearer 服务器端对此token进行检验,如果合法就解析其中内容,根据其拥有的权限和自己的业务逻辑给出对应的响应结果。 总结 关于开放平台其实还有很多需要切入的点,此处给出的安全方案只是一个示例,可以在此基础上进行二次开发,实现企业级的安全方案。

    3.8K80发布于 2018-04-17
  • 来自专栏大数据和云计算技术

    开放平台技术浅析

    1、什么是开放平台? 淘宝开放平台(Taobao Open Platform)是基于淘宝各类电子商务业务的开放平台,提供外部合作伙伴参与服务淘宝用户的各类原材料,例如API、账号体系、数据安全等。 3、谷歌开放平台能干什么? 列表,更在开放平台方面发力,推出开放的手机平台Android和云计算平台App Engine服务。 4、开放平台使用的技术 当前开发平台都是开放API的方式来提供服务。API:应用程序编程接口,开放API就是开放编程接口。 将平台能力抽象成业务API,然后提供给第三方编程。

    3.1K60发布于 2018-03-08
  • 来自专栏入门到放弃之路

    那个爬虫不被封 -- 数据开放平台之POI

    在做爬虫的时候,不免都有爬取这个数据是不是合法的这种担忧,程序中也有加代理、UA、控制爬取频率等手段来避免被网站识别。但是从一些数据平台开放的接口中爬取数据就不需要有这种考量。 每个POI包含四方面信息,名称、类别、坐标、分类,那时候就打算从一些公示网站爬取,数据更新缓慢导致不准确不说,而且因为数据量太大,爬取效果也不理想,后来就找到了高德的一个poi数据开发平台,完成了数据采集 高德开放平台通过API来提供poi数据,通过参数可以控制地区、类别等信息。 登录高德账号 点击 高德开放平台入口 进入页面,没有注册的homie先注册一个账号,注册登录之后点击申请key。 高德开放平台URL如下: https://lbs.amap.com/api/webservice/guide/api/search/ 注册密钥 1 进入注册页面的首页,点击新建应用 2 填写配置,选择 结果数据 这就是从接口中获取的poi数据,可用于地图打点等方面 日常结语 这个接口的调用也是有限制的,点击查看调用量,一般每天可以free调用3W次,一次25个poi,这样一天也能获取70W个poi,

    98030编辑于 2022-05-09
  • 来自专栏算法协议

    Centos7开放端口及查看端口开放

    开放TCP端口 firewall-cmd --zone=public --add-port=80/tcp --permanent # 开放tcp80端口 firewall-cmd --zone=public --add-port=443/tcp --permanent # 开放tcp443端口 firewall-cmd --zone=public --add-port=3306/tcp --permanent # 开放tcp3306端口 firewall-cmd --zone=public --add-port=6379/tcp --permanent # 开放tcp6379端口 开放UDP端口 firewall-cmd public --remove-port=9595/udp--permanent #关闭udp9595端口 配置生效 firewall-cmd --reload # 配置立即生效 查看防火墙所有开放的端口 firewall-cmd --zone=public --list-ports 关闭防火墙 如果要开放的端口太多,嫌麻烦,可以关闭防火墙 systemctl stop firewalld.service

    27.8K30编辑于 2022-01-13
  • 来自专栏Frank的专栏

    开放平台连接时代

    开放技术平台,是集成了物联网、云计算、大数据及移动技术的平台,由此成为互联网+时代企业转型与变革的最佳利器。 传统企业面临的技术困境与挑战 传统企业互联网技术运营相对缺位。 除基础设施技术与资源之外,多数云计算技术平台还提供业务发展所需的专业支撑服务:如由专业的工程师提供架构咨询与优化,技术支持团队提供7*24小时的技术响应与支持,更有提供研发与运维团队直接对接服务。 前面讲过,传统企业往往对顾客的积累和挖掘做得不够,有了分布式数据处理技术与平台,就可以尽可能地收集并积累产品与顾客的数据,进行大数据分析。如腾讯云分布式数据处理的开放技术平台。 chapter=8_1 4、开放搜索。开放技术平台服务商将搜索引擎组件化、平台化、服务化,形成的一套成熟的搜索开放能力,为企业提供数据处理、检索串识别、搜索结果获取与排序,搜索数据运营等搜索相关服务。 如腾讯云提供:“优图人脸识别”服务成功应用于微众银行远程开户,其基本技术架构图见下: 7、推送服务。

    6.3K20发布于 2017-09-14
  • 来自专栏博客专栏

    接入bilibili直播开放平台

        在前几天,无意间看到了b站直播互动平台开放了开发者接入的功能,所以继接入qq和baidu登录授权功能后决定研究一下b站的直播互动平台接入有哪些不同。 回顾开发的总结     先来对这些天开发的内容进行一个总结和比较 qq互联 baidu网盘开放平台 bilibili直播开放平台 接口功能 登录与基本信息 登录与基本信息 直播弹幕、礼物、舰队时时信息 审核 严格,需要网站提前准备好各项功能、开放授权即能使用,否则不予通过。 , 1);len += 2 // Version [0:raw, 2:zlib] view.setInt32(len, op);len += 4 // Operation [OP_AUTH:7, 当然,我也成功的通过接入该开放平台,实现了全民弹幕互动扫雷的项目,虽然没啥人来测试(;´д`)ゞ     哦,还有,springboot切换数据库真的是非常方便,我一开始连接的mysql,配置依赖时候用的是

    8K30编辑于 2022-12-26
  • 来自专栏JMCui

    小米开放平台逆向工程

    前言 最近在调研 小米开放平台 API 的能力,发现能力支持的实在有点少,没办法只能另辟蹊径去逆向 Consule UI 的能力。 逆向工程最重要解决的就是“认证”。 逆向工程-认证 首先,抓到小米开放平台登录接口:/pass/serviceLoginAuth2 curl 'https://account.xiaomi.com/pass/serviceLoginAuth2 逆向工程-鉴权 有了以上信息后,我们就能直接通过 username + password 的方式登录小米开放平台了,返回信息如下: &&&START&&&{ "qs": "? "desc": "成功" } 然后直接访问返回的 location 地址,在 reponse 的 header 的 set-cookie 信息里面就能找到 serviceToken 的信息,这个就是开放平台的鉴权信息 /DXCnMRAr727GzINrcV2qRC6JGxScmMA835wenAdpBRixjxFdTKyPT/zwlUTT4h42NxxxxxWwYJ5d1DeWmvDwIq+so7dsE/ibzDcnPJRhhatIefbBbgyHpsBzTMa7Vgw057finoamZs7hc2q7E

    2.1K30编辑于 2022-11-12
  • 来自专栏坚毅的PHP

    开放平台接口调用测试

    console.log("Got error: " + e.message); }); 使用weibo的nodejs sdk的公共key去做访问,打印body无误,但是想解析chunk为json数据时出错 JSON.parse(data).statuses[0].user) 也可以正确得出结果,不指定编码也没有问题 尝试方法4:使用nodejs demo,启动server和client,server发送简单的json格式数据无误 ,拷贝weibo json复杂数据,结果出错 尝试去掉 json数据的某个属性,使用nodejs server 发送数据,然后客户端去解析打印属性,可行。 chunk + ")"); 方式转换为字符串未果,出错 JSON.parse(chunk)会有字符非法问题, JSON.stringify(chunk) 转换object为string后无法再解析出JSON数据 p=801,发现了自己的问题,不应该在 response的 data事件中去处理(数据可能正在发送中),而应该是end事件中再去做解析。

    3.2K60发布于 2018-03-20
  • 来自专栏空空裤兜

    添加微信开放平台

    在微信开放平台刚出来的时候,就申请了一个号码,并热乎乎的发布了出来,也关注了几个公共号码,一时间微信消息此起彼伏,好不热闹,不过空空裤兜只是注册了号码,并没有发布消息,所以这个所谓的平台是一片冷清。 最近,微信开放平台升级后,很多公共号码的更新急剧减少。偶然又跑进开放平台去看了看,并且试着发布了一条图文消息,效果还是很不错的,虽说还是欠缺专业水准,但是可以先自我陶醉一下。 屁颠颠的在侧栏放上了空空裤兜的开放平台二维码,有兴趣交流的童鞋也可以搜索kongkudou添加。 PS:搜索结果会读取文章中的图片,没有配图的文章就会很丑,以后要多找找美图配上,咔咔咔。

    3.9K10编辑于 2023-03-03
  • 来自专栏大数据文摘

    澳大利亚:开放数据平台和公共服务大数据战略

    为将六大原则落实到实处,该战略将还制定了一个具体的行动安排:2014年3月推出大数据实践指南,2014年7月前出台一份关于大数据分析中所遇难题的报告;然后推动ICT行业和教育行业提供大数据分析中的必要技巧 Data.gov.au是政府信息目录的开放数据平台,用户可以在该网站上简便地搜索、浏览和利用澳政府国家、地区政府的公共数据,政府鼓励所有用户通过更新工具和应用从信息中得到实惠。 2013年1月7日,澳大利亚研究理事会发布新的开放获取政策,要求受其资助的研究项目产出的所有出版物都必须在出版日期后的12个月内存储到开放获取机构知识库中。 部分海外测试显示,全国宽带网络将覆盖全澳93%的用户,剩余的7%可使用速度相对较慢的无线和卫星网络。 财政部收集的数据通常是结构化数据,但数据量却在急剧增加。目前,该部门在Odysseus平台上有一批微软数据提取和分析工具来处理大数据,并需要不断地寻找更多的技术方案来解决大数据

    3.5K110发布于 2018-05-22
  • 来自专栏云云众生s

    信任GenAI需要一个开放数据移动平台

    基于开源的数据移动平台是确保所有正确的数据都能轻松供人工智能模型访问的唯一途径,而人工智能模型将指导影响深远的决策,推动您的业务向前发展。 那么,组织如何确保能够覆盖其所有 自定义数据源 并信任其数据?尤其是在数据动态且不断更新的情况下。 在几乎所有情况下,内部完成所有工作并跟上所有更改都被证明是一种不可持续的 模型——来自太多不同来源的太多数据,无法以可信赖的数据完整性进行维护。 然后,选择成为封闭或开放的商业选项。 一个开放源代码 数据移动平台,它可以轻松构建和维护自定义数据源,在透明度方面提供了最高程度的信任。 基于开源的数据移动平台是确保所有正确的数据都能轻松供人工智能模型访问的唯一途径,这些模型将指导影响深远的决策,推动您的业务向前发展。任何低于此标准的做法都是不可接受的。

    26110编辑于 2024-06-05
  • 来自专栏sofu456

    微信开放平台配置

    https://developers.weixin.qq.com/miniprogram/dev/framework/

    4.6K10编辑于 2022-12-30
  • 来自专栏PPV课数据科学社区

    普及、开放平台:大数据价值运营之路(上)

    围绕社会、企业与个人,我觉得有三个事情是需要重点关注的:即社会需要关注大数据概念的普及、个人需要以分享的心态迎接数据开放、企业则要走平台化的战略让自己基业长青,我会分三篇文章表达下个人的看法。 ? 上面4种是当前大数据变现的一些典型形式,因此说阿里是个大数据帝国一点不假。你看,我列的所有变现模式它都有份,从广告   到金融、从产品到技术平台,现在它还在疯狂的拓展它的边界,医疗、文化、IP等等。 所以大家不要仅把它当成一个卖商品的平台公司, 马云不是说了吗,我们本质上是个数据公司,一点不假。    PPV课-国内领先的大数据学习社区和职业培训平台 ? 6、回复“答案”查看hadoop面试题题目及答案 7、回复“爱情”查看大数据与爱情的故事 8、回复“笑话”查看大数据系列笑话 9、回复“大数据1、大数据2、大数据3、大数据4”查看大数据历史机遇连载

    65360发布于 2018-04-23
  • 来自专栏测试开发干货

    数据工厂平台-7:菜单和首页

    平台一般都有自己的lOGO的。一个好的设计会让使用者增加印象,如果实在没有,你就用你们公司自己的产品公司LOGO~ 我这里随便找了个图片做为LOGO: 但是发现这里居然原来用的是.svg格式的。 现在回到我们的views.py中,给前端传递当前登录用户的总数据,这样之后我们之后就可以随意使用user. xxxx 了 效果如下: 好了,今天的内容到此结束。

    58030编辑于 2022-05-19
  • 来自专栏图南科技

    开放平台技术实践-开放生态与授权服务

    文本基于 大型互联网企业平台开放技术实践 整理,原文值得收藏,多次阅读。 文章从开放生态、开放网关、开放授权和开放安全四个方面阐述了开放平台的建设路径。 开放生态 开放生态包含四个角色,开放平台,开发者(ISV),商家和用户。 ? image.png “ISV 通过企业的开放平台可以开发出商家所需要的 SAAS 软件。 每个大的开放平台下,总会有许多依附于这个平台下的软件开发商,合作伙伴和自由软件者。 我找了一张阿里云合作伙伴的介绍文案如下 ? pin,OpenID 和 unionID 仅仅是开放场景下的用户标识 开放安全 数据归属判断 数据安全的数据归属判断 获取到资源 Id 之后,进行数据更新删除修改之前,做一步判断资源是否属于当前用户的操作 接口提供方数据归属判断.png 原文中有这么一句话 “开放网关的时候开放网关将 accestoken 置换成了 pin 这句话展开来说,消息及数据在系统之间传递时用的是 token 票据,过了网关,在每个服务内部交互时

    2.9K10发布于 2020-02-20
  • 来自专栏Man_Docker

    centos7搭建superset数据平台

    最后,建议大家再运行命令: pip install --upgrade pip 3.安装superset平台: 依赖包安装; yum upgrade python-setuptools yum install 将superset的元数据存储改成mysql,就需要这一步。 } } #=============== superset_config.py结束=============== 最后,安装 superset,在安装之前需要在mysql先创建superset的数据库 show variables like "%char%"; create database superset use superset --这里如果不设置数据库为utf8,在后面初始化数据库时会报 user]: admin Email [admin@fab.org]: admin@163.com Password: admin Repeat for confirmation: admin 初始化数据

    1.5K30发布于 2020-05-28
  • 来自专栏数据派THU

    清华“法律数据科研平台”向校内师生开放试运行

    社科学院、法学院老师初步试用后,一致认为该平台的海量数据快速检索功能够提高老师们的科研效率、在线服务模式打破了老师们对自有计算机的性能约束、多维度的数据分类检索功能满足老师们不同课题的数据需求、免费开放数据服务大大降低了老师们日常的科研数据采集成本 平台免费向校内师生开放,由平台管理方统一调度资源和管理账号分配; 2. 平台上使用数据服务,原则上对校内用户无限开放,免费使用; 5. 平台提供数据资源的开放引用和引证服务,以便清华师生在发论文、论著等情况下标注数据出处,以便核查和复用,形成权威的、可追溯的数据资源引证体系,满足科研工作的真实性和严谨性要求; 6. 此次向校内师生开放试用的“法律数据科研平台”仅仅是数据院推动科研数据开放共享工作的开始。平台上的数据会及时更新,数据源也将不断丰富。

    66020发布于 2018-09-17
领券