腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
搜索
关闭
文章
问答
(9999+)
视频
开发者手册
清单
用户
专栏
沙龙
全部问答
原创问答
Stack Exchange问答
更多筛选
回答情况:
全部
有回答
回答已采纳
提问时间:
不限
一周内
一月内
三月内
一年内
问题标签:
未找到与 相关的标签
筛选
重置
4
回答
有哪些编程语言是用于机电
一体
化的?
有没有专为机电
一体
化编程而设计的语言?我知道LabView,这是一种数据
流
语言,但不确定它的主要平台。 除了c/c++之外,你能向我推荐一些语言吗?用于机电
一体
化(机器人、传感器编程等)主题的任何语言。
浏览 0
修改于2015-05-17
得票数 1
回答已采纳
1
回答
从批处理顺序Mule ESB调用
流
我创建了一个批处理
流
。从一
批
流
,我调用另一
批
,从第二
批
,我调用简单的第三
流
。我需要第三次流动的选择应该是完整的,然后,只有2条记录应
浏览 1
修改于2017-04-06
得票数 1
1
回答
tensorflow验证监视器
流
auc
在tensorflow验证监视器
流
auc中,它对流意味着什么?案例1:每次调用验证监视器时,都会重置auc状态,因为在每个验证步骤中,对10个
批
进行
流
处理。案例2: auc状态没有重置,因此
流
auc是从验证监视器的第一次调用中计算出来的。即,第一输出( 100步)从10
批
计算,第二验证输出( 200步骤)基于第
浏览 5
修改于2017-06-09
得票数 1
回答已采纳
0
回答
Spark RDD apend
在Spark中,我以RDD的形式加载了一个数据集,并且喜欢不频繁地向其追加
流
数据。我知道RDDs是不可变的,因为它简化了锁定,等等。其他处理静态和
流
数据的方法是
一体
的吗? 类似的问题以前也被问过:
浏览 7
修改于2017-05-23
得票数 0
1
回答
是否有一个变量来识别火花
流
中的每一
批
数据?
在火花
流
中,数据按
批
间隔进行处理。is first batch of data10s~15s is third batch of data是否有一个变量来识别火花
流
中的每一
批
数据如果有这样的变量:我可以获得batchID的值来识别哪一
批
数据,也可以通过batchID (如:window(……).filter(_.batchId == 1) )过滤数据或者有什么方法来区分每一
批
数据?
浏览 6
修改于2016-02-02
得票数 3
回答已采纳
1
回答
具有周期性更新静态数据集的结构化
流
流
和静态数据集的合并是结构化
流
的一个很好的特点。但是每一
批
数据集都会从数据源中刷新。由于这些源并不总是动态的,因此在指定的时间段(或
批
数)缓存静态数据集将是一种性能增益。在指定的批处理期间/
批
数之后,数据集将从源重新加载,否则将从缓存中检索。 在星火
流
中,我使用缓存的数据集来管理它,并在指定数量的批处理运行后取消它的持久化,但是由于某种原因,这不再适用于结构化
流
。
浏览 1
修改于2018-10-27
得票数 9
2
回答
星火
流
和星火结构化
流
使用相同的微
批
引擎吗?
星火
流
和星火结构化
流
是否使用相同的微
批
调度引擎?星火结构
流
比星火
流
有更低的延迟吗?
浏览 0
修改于2019-02-02
得票数 3
回答已采纳
1
回答
PyFlink性能与Scala的比较
冷(
批
)层将用Apache (PySpark)实现。但是对于热(
流
)层有不同的选择:火花
流
或Flink。提前谢谢你!
浏览 3
提问于2021-11-05
得票数 1
回答已采纳
1
回答
如何在其中一个作业失败时关闭/杀死火花
流
应用程序
我正在运行一个星火
流
应用程序。有几次,其中一个作业由于某些运行时异常而失败。streaming将作业标记为失败,并继续处理下一个
流
批
。如果其中一个作业失败,是否有一个参数可以设置为通知Spark关闭应用程序(而不是处理下一个
流
批
)?我在独立集群模式上使用Spark1.4.1。
浏览 0
提问于2016-06-10
得票数 0
3
回答
当使用Spark结构化
流
时,如何才能获得当前批处理的聚合结果,如Spark
流
?
星火结构
流
( SSS )和星火
流
(SS)的一个很大的区别是SSS可以利用状态。它可以存储以前
批
的聚合结果,并将当前结果与先前的结果一起应用。因此,它可以从输入流的一开始就得到真正的聚合结果。因此,我的问题是,在SSS中,是否仍然可以像SS一样,获得当前
批
产品的受害结果?当下一
批
"cat“出现时,我的预期输出是cat|1
浏览 0
提问于2018-01-23
得票数 3
回答已采纳
1
回答
如何避免火花
流
中批量排队
我有直接
流
的火花
流
,我使用下面的配置 spark.streaming.kafka.maxRatePerPartition 42 当我使用最早的选项启动
流
批
时是否有可能实现以下场景,我们的批处理间隔为60,如果每批运行在60,下一
批
可以准时开始。如果一
批
花费的时间超过60,我们不希望下一
批
来排队。
浏览 2
修改于2021-03-16
得票数 1
回答已采纳
1
回答
火花:如何附加到缓存的rdd?
每一
批
流
数据都缓存不同的值。 如何通过将下一
批
中的下一个不同值添加到已经缓存的RDD中来构建缓存?
浏览 1
提问于2015-12-03
得票数 0
1
回答
火花
流
缓存和转换
我是新来的火花,我使用星火
流
与卡夫卡..。假设我在第一
批
中得到100条记录,在第二
批
中得到120条记录,在第三
批
中得到80条记录。--> {sec 1 1,2,...100} --> {sec 2 1,2..120} --> {sec 3 1,2,..80}我想在处理第二
批
时使用result1,并将第二
批
的result1和120个记
浏览 1
修改于2015-04-29
得票数 3
回答已采纳
6
回答
Java 8 lambda:将集合转换为元素的映射,迭代位置
在JDK8中有没有包含
流
和收集器的
一体
机?
浏览 1
修改于2014-07-31
得票数 9
0
回答
spark
流
比较两个批处理和筛选数据
我想使用火花
流
比较两
批
和过滤数据第一
批
:aaa 0bbb 0第二
批
:aaa1ddd 0key type相邻的两个批次,最后一个批次的数据(类型为0)必须是前一个批次中的(类型为1),当前批次如下: k
浏览 3
修改于2017-06-07
得票数 2
2
回答
外部批处理的火花访问数据帧(结构化
流
)
我想要在火花
流
的foreach批处理中创建和更新一个数据帧,并在下面的foreach批处理迭代器之外访问它,这就是我在火花结构化
流
中试图做的事情。是否可以从外部访问为火花结构化
流
中的每一
批
创建或更新的数据帧?= None) {} 我甚至不能访问临时表,这些表是从外部为每个
批
创建的。即使是在foreach
批
内更新的数据框架也显示来自外部foreach
批
的陈
浏览 1
修改于2021-03-30
得票数 0
回答已采纳
2
回答
多批作业同步或异步
第一种方法是在Salesforce中执行Upsert,当它完成时,它调用具有另一个批处理作业的第二个
流
。此图像表示
流
:但是当我在控制台上看到日志时,有时第二
批
的日志与第一个的日志混合在一起。我错了吗?
浏览 1
修改于2022-04-06
得票数 1
回答已采纳
1
回答
箭
流
端到端是免费的吗?
我对箭
流
很困惑。描述Arrow的许多来源都只是转述了 然而,据我所知, 对的描述,我的理解有限,源、数据是序列化的,只有反序
浏览 1
修改于2020-06-20
得票数 1
回答已采纳
1
回答
处理spark结构化
流
中传入的运动
流
中的空批次
我们正在从kinesis读取数据,并使用spark结构
流
将其输出到文件中。当stream.these中没有数据时,kinesis实现正在生成空
批
吗?空
批
正在创建空文件作为输出?
浏览 24
修改于2019-02-27
得票数 0
回答已采纳
2
回答
如何在Spark结构化
流
中使用
流
数据更新静态数据
1540527851||3|1530529187||5|1510529182|------------------------------------------|2|1540525999|-------------- 现在,在每个批处
浏览 0
修改于2018-12-27
得票数 5
回答已采纳
第 2 页
第 3 页
第 4 页
第 5 页
第 6 页
第 7 页
第 8 页
第 9 页
第 10 页
第 11 页
点击加载更多
领券