【数据分享】维基百科Wiki负面有害评论(网络暴力)文本数据多标签分类挖掘可视化...

本文主要是介绍【数据分享】维基百科Wiki负面有害评论(网络暴力)文本数据多标签分类挖掘可视化...,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

原文链接:http://tecdat.cn/?p=8640

讨论你关心的事情可能很困难。网络暴力骚扰的威胁意味着许多人停止表达自己并放弃寻求不同的意见查看文末了解数据免费获取方式。平台努力有效地促进对话,导致许多社区限制或完全关闭用户评论点击文末“阅读原文”获取完整代码数据)。

数据简介

AI团队正在研究工具,以帮助提高在线评论互动。一个重点领域是研究负面的在线行为,如有害评论(即粗鲁、不尊重或可能使某人离开讨论的评论)。到目前为止,他们已经构建了一系列可用模型。但是当前的模型仍然会出错,并且它们不允许用户选择他们感兴趣的有害评论类型,例如,某些平台可能可以接受亵渎,但不能接受其他类型的有害内容(查看文末了解数据获取方式)。

数据详情

数据格式

csv

字段

id

评论内容

有害的

严重有害的

猥亵

威胁

侮辱

身份_仇恨

大小

67191kb

样本量

159571

数据浏览

以前8行数据为例,我们来预览一下:

f10213751916c58bfed31ad8202acf21.png

变量探索:

b568c5e257d5bdfe6c01245fa14b0747.png

9e4b3a123fec22ca09b825e16ade925c.png

9dfb9c7d5c583e83a116c09e7c081799.png

6c193f72c9912a2eddfd570a0a0710fd.png

08e9e548308e6ceb87b549381ebfa4c6.png

84bce2841c4cc94fcd4b15cd23e2544d.png

78cb88178136fccf4580f7e0ed86fb01.png

50f133b6f495f99d91d9b2ec18a3f065.png

总体高频词

0534f510d58aeb2ff6924401df96b9e8.png

有害的高频词

ebbf6bc54b9b56b46f805792b3b47f6a.png

严重有害的高频词

d17ef3e211c65ecd089c8e49c7cb7f79.png

猥亵高频词

dc0d5464bad8f779d2cd4178a8afc209.png

词云

e8591b8ac4df973dbe74cde530b53745.png

数据获取

在下面公众号后台回复“有害评论文本数据”,可获取完整数据。


点击标题查阅往期内容

b70229689e648ba3824b4791c53b47f4.jpeg

Python中用PyTorch机器学习神经网络分类预测银行客户流失模型

outside_default.png

左右滑动查看更多

outside_default.png

01

ce30457d14c523df194351c063873327.png

02

979032cd6d0d77cf15d7ccc021e7c126.png

03

f3a2b126ec30d25ba7ab12f8351c15c1.png

04

1e950794c59c61e0fffbb687c3ad133d.png

34a3099b7e06b8d4b87804dd6a270968.jpeg

本文中分析的数据分享到会员群,扫描下面二维码即可加群!

6985da12cc61ce8a216ff398796a98a8.png

点击标题查阅往期内容

R语言NLP案例:LDA主题文本挖掘优惠券推荐网站数据

自然语言处理NLP:情感分析疫情下的新闻数据

R语言自然语言处理(NLP):情感分析新闻文本数据

python用于NLP的seq2seq模型实例:用Keras实现神经机器翻译

用于NLP的Python:使用Keras的多标签文本LSTM神经网络分类

适用于NLP自然语言处理的Python:使用FacebookFastText库

用于NLP的Python:使用Keras进行深度学习文本生成

用于NLP的Python:使用Keras的多标签文本LSTM神经网络分类

python在Keras中使用LSTM解决序列问题

Python对商店数据进行lstm和xgboost销售量时间序列建模预测分析

Python中利用长短期记忆模型LSTM进行时间序列预测分析 - 预测电力消耗数据

在Python中使用LSTM和PyTorch进行时间序列预测

欲获取全文文件,请点击左下角“阅读原文”。

0eb1414982a34dbe40705e8ae613abea.gif

1ad6808d8dec30b2a0801fedb0567f6a.png

b574bfb009d68d83c60ffb2bc7d3a712.jpeg

0df9fbb4065a1a27cfdcc49112eff081.png

欲获取全文文件,请点击左下角“阅读原文”。

61226745ead5d89dba963892fef69528.gif

这篇关于【数据分享】维基百科Wiki负面有害评论(网络暴力)文本数据多标签分类挖掘可视化...的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/360338

相关文章

SQL Server修改数据库名及物理数据文件名操作步骤

《SQLServer修改数据库名及物理数据文件名操作步骤》在SQLServer中重命名数据库是一个常见的操作,但需要确保用户具有足够的权限来执行此操作,:本文主要介绍SQLServer修改数据... 目录一、背景介绍二、操作步骤2.1 设置为单用户模式(断开连接)2.2 修改数据库名称2.3 查找逻辑文件名

苹果macOS 26 Tahoe主题功能大升级:可定制图标/高亮文本/文件夹颜色

《苹果macOS26Tahoe主题功能大升级:可定制图标/高亮文本/文件夹颜色》在整体系统设计方面,macOS26采用了全新的玻璃质感视觉风格,应用于Dock栏、应用图标以及桌面小部件等多个界面... 科技媒体 MACRumors 昨日(6 月 13 日)发布博文,报道称在 macOS 26 Tahoe 中

全面解析HTML5中Checkbox标签

《全面解析HTML5中Checkbox标签》Checkbox是HTML5中非常重要的表单元素之一,通过合理使用其属性和样式自定义方法,可以为用户提供丰富多样的交互体验,这篇文章给大家介绍HTML5中C... 在html5中,Checkbox(复选框)是一种常用的表单元素,允许用户在一组选项中选择多个项目。本

Python虚拟环境与Conda使用指南分享

《Python虚拟环境与Conda使用指南分享》:本文主要介绍Python虚拟环境与Conda使用指南,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录一、python 虚拟环境概述1.1 什么是虚拟环境1.2 为什么需要虚拟环境二、Python 内置的虚拟环境工具

Python实现精准提取 PDF中的文本,表格与图片

《Python实现精准提取PDF中的文本,表格与图片》在实际的系统开发中,处理PDF文件不仅限于读取整页文本,还有提取文档中的表格数据,图片或特定区域的内容,下面我们来看看如何使用Python实... 目录安装 python 库提取 PDF 文本内容:获取整页文本与指定区域内容获取页面上的所有文本内容获取

canal实现mysql数据同步的详细过程

《canal实现mysql数据同步的详细过程》:本文主要介绍canal实现mysql数据同步的详细过程,本文通过实例图文相结合给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的... 目录1、canal下载2、mysql同步用户创建和授权3、canal admin安装和启动4、canal

使用SpringBoot整合Sharding Sphere实现数据脱敏的示例

《使用SpringBoot整合ShardingSphere实现数据脱敏的示例》ApacheShardingSphere数据脱敏模块,通过SQL拦截与改写实现敏感信息加密存储,解决手动处理繁琐及系统改... 目录痛点一:痛点二:脱敏配置Quick Start——Spring 显示配置:1.引入依赖2.创建脱敏

详解如何使用Python构建从数据到文档的自动化工作流

《详解如何使用Python构建从数据到文档的自动化工作流》这篇文章将通过真实工作场景拆解,为大家展示如何用Python构建自动化工作流,让工具代替人力完成这些数字苦力活,感兴趣的小伙伴可以跟随小编一起... 目录一、Excel处理:从数据搬运工到智能分析师二、PDF处理:文档工厂的智能生产线三、邮件自动化:

Python数据分析与可视化的全面指南(从数据清洗到图表呈现)

《Python数据分析与可视化的全面指南(从数据清洗到图表呈现)》Python是数据分析与可视化领域中最受欢迎的编程语言之一,凭借其丰富的库和工具,Python能够帮助我们快速处理、分析数据并生成高质... 目录一、数据采集与初步探索二、数据清洗的七种武器1. 缺失值处理策略2. 异常值检测与修正3. 数据

pandas实现数据concat拼接的示例代码

《pandas实现数据concat拼接的示例代码》pandas.concat用于合并DataFrame或Series,本文主要介绍了pandas实现数据concat拼接的示例代码,具有一定的参考价值,... 目录语法示例:使用pandas.concat合并数据默认的concat:参数axis=0,join=