将.ndjson文件读入R

Question

有人能告诉我如何将大型.ndjson文件加载到R中吗？

我的目标是探索Parler社交媒体数据-可以在这里找到(https://zenodo.org/record/4442460#.YCOB32j7TFj)

最初，由于文件很大，我下载了比parler_data.zip文件小得多的parler_users.zip文件。我的目标是快速探索如何在R中加载这些数据，但到目前为止我还没有成功。请注意，我是R的初学者，所以我没有太多的经验。

在能够成功加载1 1gb数据集的情况下，我将继续尝试加载32 1gb。

如果有人能帮助我完成这一过程，我将不胜感激。

Answer 1

我有一些joy在用

library(jsonlite)

并使用

jsonlite::stream_in(file('filename_here'), verbose=F)

您可能希望使用

handler=

参数，并创建一个回调函数来帮助处理每条记录

您可能还想看看

library(tidytext)