是否有一个函数可以查看变量中的单词如何出现在另一个变量中以及 R 中的数据集?

如何解决是否有一个函数可以查看变量中的单词如何出现在另一个变量中以及 R 中的数据集?

我需要在 R 中查找代码的帮助:我有一个由不同变量组成的文件 excel,但我需要比较两个变量(在我的情况下都是人名),以查看第一个变量中的名称(列)出现在第二个变量(列)中的次数。是非常大的数据集,有很多行。 提前谢谢你!!

数据如下,

df <- structure(
    list(
        Inv_name = c(
            "Meyer,Helmut-Walter,Prof. Dr. sc.","Fröhlich,Hans-Otto,Prof. Dr.","Göbel,Andreas","Klein,Wilfried","Scholz,Peter,Dr.","Hipler,Bernd","Sammler,Marina","Kreisel,Günter,"Haupt,Kerstin","Bayer,Ulrich","Schmidt,Jürgen","Furche,Thomas","Thorwirth,Günter","Kowalski,Peter","Geiler,Hans-Dieter,"Wagner,Matthias,"RIESENBERG,Dieter","SCHULZ,Volker","KNORRE,Wofgang","POHL,Hans,Dieter"
        ),Prio_Year = c(
            1990,1990,1990
        ),Firma = c(
            "Gustav Peters","id - Informationsdienst,Geschäftsvermittlung,Handelsvertretung,Marketing Kursawe & Klein OHG","\"Heizhaus-Service\" Ingenieurbüro Wilfried Gärtner","MAX LINDAU OHG Inhaber: Gerhard und Klaus-Dieter Lindau","Werther Götze \"Erfordia Numismatica\"","STUDIO 1 - John & Ziemann","Arwico-Arenswald & Wichmann OHG","Moschkowitz & Co. Schweißtechnik-Vertriebs KG","Fahrschule Simon & Frauendorf","Elmera Vertrieb Frank Fleischmann OHG","OHG Friseur Walschleben","Baumarkt Hartmut Seliger","\"Thüringer MarketingService - Hoffmann & Co. OHG\"","Walter Reuning Fleisch-Wurstwaren Inhaber Brigitte Pfautsch","Thüringer Allgemeine Verlag GmbH & Co,KG","Autoservice Grohmann-Lämmerhirt OHG","\"Sippel und Thomas Video - Land\" Offene Handelsgesellschaft","Paul Krause","Alois Reuter - Stapler-Instandsetzung","Rudolf Städtler Inhaber Willy Städtler"
        ),Ersteintrag = structure(
            c(
                -2209075200,643420800,643248000,645235200,646617600,646963200,648432000,649382400,648777600,648950400,649468800,650073600,650678400,-2156112000,650678400
            ),tzone = "UTC",class = c("POSIXct","POSIXt")
        )
    ),row.names = c(NA,-20L),class = c("tbl_df","tbl","data.frame")
)

目的是将 Inv_name 中的元素依次与 Firma 中的所有索引进行比较,并计算部分匹配的数量,如果 df$Inv_name[[1]] = "A" 则计数将为 {{1 }},如果2

for (i in 1:nrow(df1)){

  • df$Firma = c("A GMBH","B GMBH","A Inc")
  • # Extract the Inv_name
    
  • # as a matrix; this will be our pattern search
    
  • # along the Firma
    
  • tmpName <- str_to_lower(
    
  •     str_split(df1$Inv_name[i],pattern = ",",simplify = T)
    
  • )
    
  • # Create a new variable that counts the number of 
    
  • # occurences of the id
    
  •     str_detect(
    
  •         string  = str_to_lower(df1$Firma),
  •         pattern = paste(tmpName,sep = "",collapse = "|")
    
  • )
    
  • # NOTE: That it it cannot count correctly
    
  • # due to titles like Dr. Mr. and MS.
    
  • # If you are certaing about the pattern on
    
  • # how these titles are generated then we can ignore these.
    
  • # Here we remove all matches on the form Dr. Mr. Ms.
    
  • tmpName <- str_remove_all(
    
  •     tmpName,
  •     pattern = "[:alpha:]+[:punct:][:blank:]+"
    
  • )
    
  • # We then recount without titles
    
  • # to avoid confusion
    
  • df1$count2[i] <- sum(
    
  •     str_detect(
    
  •         string  = str_to_lower(df1$Firma),collapse = "|")
    
  •     )
    
  • } 警告信息: 1:未知或未初始化的列:) 。 2:未知或未初始化的列:count1

tmp 名称 [1] 不适用

解决方法


您要查找的函数是 str_detect() 包中的 stringr


这可能是我会做的。请注意,此解决方案假设您有一个数据帧 df,其索引少于 500k。如果超过此数量,则提供的算法可能需要太多时间才能运行。但是测试一下,看看效果如何。

如果你没有安装相关的包,运行下面这行代码,

install.packages("tidyverse")
library("tidyverse")

此外,我生成了一个通用的 df 来指出执行 string-matching 时的潜在缺陷。

数据

df <- data.frame(
    id     = c("Dr. A,D"," Mr. B,C","Ms. E,F,D"),string = c("ABC Bankrupt","ADEF LTD","D GMBH")
)

这里id对应Inv_namestring对应Firma如果您确定姓氏和姓名在所有索引中的分隔方式相同,我们可以轻松地使用 str_split 分隔名称。

在泛型 df 中,我假设名称构造为 Surname,Name(s)。例如,第三个指数是 F-D E 女士,即。她的名字是 F-D,姓 E,头衔是女士

然后我们可以运行下面的代码,

for (i in 1:nrow(df)){
    
    # Extract the Inv_name
    # as a matrix; this will be our pattern search
    # along the Firma
    tmpName <- str_to_lower(
        str_split(df$id[i],pattern = ",",simplify = T)
    )
    
    # Create a new variable that counts the number of 
    # occurences of the id
    df$count1[i] <- sum(
        str_detect(
            string  = str_to_lower(df$string),pattern = paste(tmpName,sep = "",collapse = "|")
        )
    )
    
    # NOTE: That it it cannot count correctly
    # due to titles like Dr. Mr. and MS.
    # If you are certaing about the pattern on
    # how these titles are generated then we can ignore these.
    # Here we remove all matches on the form Dr. Mr. Ms.
    tmpName <- str_remove_all(
        tmpName,pattern = "[:alpha:]+[:punct:][:blank:]+"
    )
    
    # We then recount without titles
    # to avoid confusion
    df$count2[i] <- sum(
        str_detect(
            string  = str_to_lower(df$string),collapse = "|")
        )
    )
    
}

产生以下结果,

         id       string count1 count2
1   Dr. A,D ABC Bankrupt      2      3
2   Mr. B,C     ADEF LTD      1      1
3 Ms. E,D       D GMBH      2      2

请注意,在 count1 中有一个错误,算法错过了 string 中的所有 A,因为最初该算法分别比较 Dr. AD。这会产生意想不到的结果(因为我假设 Dr. 是一个通用标题,您不想计算)。因此,我们需要从 Dr. 中删除 Dr. A

如果您知道所有标题的构造相似,那么这很容易解决。 IE。如果您 100% 确定 所有 标题都采用 字母后跟 . 的形式,那么我们可以通过 str_remove_all 轻松删除它。这就是 count2 中所做的。

注意事项

  1. 该算法会分别处理多个姓名,例如对于 E 女士,她的姓名 F 和 D 会被单独处理。
  2. 它只对一个字符串计数一次,因此如果字符串中有多个匹配项,则计数为一个。这可以防止过度计数。
  3. 假设所有标题后跟 .

进一步文献

我非常怀疑这是否能完全解决您的问题,因为您提供的数据是一个不幸的样本,因为根本没有匹配项可供测试。

因此,我建议您使用以下备忘单,以进一步了解正在发生的事情;

https://evoldyn.gitlab.io/evomics-2018/ref-sheets/R_strings.pdf

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。

相关推荐


使用本地python环境可以成功执行 import pandas as pd import matplotlib.pyplot as plt # 设置字体 plt.rcParams[&#39;font.sans-serif&#39;] = [&#39;SimHei&#39;] # 能正确显示负号 p
错误1:Request method ‘DELETE‘ not supported 错误还原:controller层有一个接口,访问该接口时报错:Request method ‘DELETE‘ not supported 错误原因:没有接收到前端传入的参数,修改为如下 参考 错误2:cannot r
错误1:启动docker镜像时报错:Error response from daemon: driver failed programming external connectivity on endpoint quirky_allen 解决方法:重启docker -&gt; systemctl r
错误1:private field ‘xxx‘ is never assigned 按Altʾnter快捷键,选择第2项 参考:https://blog.csdn.net/shi_hong_fei_hei/article/details/88814070 错误2:启动时报错,不能找到主启动类 #
报错如下,通过源不能下载,最后警告pip需升级版本 Requirement already satisfied: pip in c:\users\ychen\appdata\local\programs\python\python310\lib\site-packages (22.0.4) Coll
错误1:maven打包报错 错误还原:使用maven打包项目时报错如下 [ERROR] Failed to execute goal org.apache.maven.plugins:maven-resources-plugin:3.2.0:resources (default-resources)
错误1:服务调用时报错 服务消费者模块assess通过openFeign调用服务提供者模块hires 如下为服务提供者模块hires的控制层接口 @RestController @RequestMapping(&quot;/hires&quot;) public class FeignControl
错误1:运行项目后报如下错误 解决方案 报错2:Failed to execute goal org.apache.maven.plugins:maven-compiler-plugin:3.8.1:compile (default-compile) on project sb 解决方案:在pom.
参考 错误原因 过滤器或拦截器在生效时,redisTemplate还没有注入 解决方案:在注入容器时就生效 @Component //项目运行时就注入Spring容器 public class RedisBean { @Resource private RedisTemplate&lt;String
使用vite构建项目报错 C:\Users\ychen\work&gt;npm init @vitejs/app @vitejs/create-app is deprecated, use npm init vite instead C:\Users\ychen\AppData\Local\npm-
参考1 参考2 解决方案 # 点击安装源 协议选择 http:// 路径填写 mirrors.aliyun.com/centos/8.3.2011/BaseOS/x86_64/os URL类型 软件库URL 其他路径 # 版本 7 mirrors.aliyun.com/centos/7/os/x86
报错1 [root@slave1 data_mocker]# kafka-console-consumer.sh --bootstrap-server slave1:9092 --topic topic_db [2023-12-19 18:31:12,770] WARN [Consumer clie
错误1 # 重写数据 hive (edu)&gt; insert overwrite table dwd_trade_cart_add_inc &gt; select data.id, &gt; data.user_id, &gt; data.course_id, &gt; date_format(
错误1 hive (edu)&gt; insert into huanhuan values(1,&#39;haoge&#39;); Query ID = root_20240110071417_fe1517ad-3607-41f4-bdcf-d00b98ac443e Total jobs = 1
报错1:执行到如下就不执行了,没有显示Successfully registered new MBean. [root@slave1 bin]# /usr/local/software/flume-1.9.0/bin/flume-ng agent -n a1 -c /usr/local/softwa
虚拟及没有启动任何服务器查看jps会显示jps,如果没有显示任何东西 [root@slave2 ~]# jps 9647 Jps 解决方案 # 进入/tmp查看 [root@slave1 dfs]# cd /tmp [root@slave1 tmp]# ll 总用量 48 drwxr-xr-x. 2
报错1 hive&gt; show databases; OK Failed with exception java.io.IOException:java.lang.RuntimeException: Error in configuring object Time taken: 0.474 se
报错1 [root@localhost ~]# vim -bash: vim: 未找到命令 安装vim yum -y install vim* # 查看是否安装成功 [root@hadoop01 hadoop]# rpm -qa |grep vim vim-X11-7.4.629-8.el7_9.x
修改hadoop配置 vi /usr/local/software/hadoop-2.9.2/etc/hadoop/yarn-site.xml # 添加如下 &lt;configuration&gt; &lt;property&gt; &lt;name&gt;yarn.nodemanager.res