一、方法2

1. 导入库

2. 构建关键词

3. 构建句子

4. 建立统一索引

5. 表连接

6. 关键词匹配

二、方法2

1. 构建字典

2. 关键词匹配

3. 结果展示

4. 匹配结果展开

一、方法2

此方法是两个表构建某一相同字段，然后全连接，在做匹配结果筛选，此方法针对数据量不大的时候，逻辑比较简单，但是内存消耗较大

1. 导入库

import pandas as pd
import numpy as np
import re

2. 构建关键词

#关键词数据
df_keyword = pd.DataFrame({"keyid" : np.arange(5),"keyword" : ["numpy", "pandas", "matplotlib", "sklearn", "tensorflow"]
})
df_keyword

3. 构建句子

df_sentence = pd.DataFrame({"senid" : np.arange(10,17),"sentence" : ["怎样用pandas实现merge？","Python之Numpy详细教程","怎么使用Pandas批量拆分与合并Excel文件？","怎样使用pandas的map和apply函数？","深度学习之tensorflow简介","tensorflow和numpy的关系","基于sklearn的一些机器学习的代码"]
})
df_sentence

4. 建立统一索引

df_keyword['match'] = 1
df_sentence['match'] = 1

5. 表连接

df_merge = pd.merge(df_keyword, df_sentence)
df_merge

6. 关键词匹配

def match_func(row):return re.search(row["keyword"], row["sentence"], re.IGNORECASE) is not None
df_merge[df_merge.apply(match_func, axis = 1)]

匹配结果如下

二、方法2

此方法对编程能力有要求，在大数据集上计算量较方法一小很多

1. 构建字典

key_word_dict = {row.keyword : row.keyidfor row in df_keyword.itertuples()
}
key_word_dict

{'numpy': 0, 'pandas': 1, 'matplotlib': 2, 'sklearn': 3, 'tensorflow': 4}

2. 关键词匹配

def merge_func(row):#新增一列，表示可以匹配的keyidrow["keyids"] = [keyidfor key_word, keyid in key_word_dict.items()if re.search(key_word, row["sentence"], re.IGNORECASE)]return row
df_merge = df_sentence.apply(merge_func, axis = 1)

3. 结果展示

df_merge

4. 匹配结果展开

df_result = pd.merge(
left = df_merge.explode("keyids"),
right = df_keyword,
left_on = "keyids",
right_on = "keyid")
df_result

Pandas实现两个表格内容模糊匹配相关推荐

excel两个表格内容合并怎么做？
今天跟大家分享一下excel两个表格内容合并怎么做? 1.要求将这两个工作簿合并为一个 2.首先打开这两个工作簿 3.然后点击下图选项 4.选择[汇总拆分]-[合并多簿] 5.然后点击[确定] 6.完 ...
pandas求两个表格不相交的集合
Hi,好久不见,我还是那颗翻滚的老鼠屎.处理数据时想求两个表格求不相交的部分,或许是对知识的匮乏限制了我的想象力,并未找到直接求的方法,在这里介绍老鼠屎技己使用的方法,希望对读者会有帮助. 阴影部分为 ...
xpath爬取airbnb民宿价格信息，为啥用属性定位不到元素，但是用文本内容模糊匹配却可以
超级小白,刚刚接触python.今天想要试着爬一下爱彼迎上的民宿信息,包括房屋情况.位置.价格三个信息: 我一开始的代码是这样的: 前两个信息都可以用find_elements_by_xpath很容易 ...
excel两列数据如何模糊匹配
在Excel中模糊匹配两列数据,可以使用函数进行解决.具体来说,您可以使用 VLOOKUP 函数,它可以在第一列中查找指定的值,并返回与其相关的值. 例如,如果您有第一列包含公司名称,第二列包含城市名 ...
python数据模糊匹配,使用python中两个数据集的模糊匹配创建标志
我尝试了两个df的模糊比较,就我的研究而言,没有快速的方法来做.使用4fuzz方法也会降低脚本的速度.一种方法是使用'工艺提取酮()`并创建一个函数:from fuzzywuzzy import pr ...
python基于pandas使两个表格之间匹配某一属性
import pandas as pd import numpy as np #编码距离,用于匹配最相近的中文字符串 def edit_distance(word1, word2):len1 = le ...
python两个excel字段模糊匹配_Python对两个Excel操作
简介现在有个需求,我们根据需要 data.xlsx 中某些单元格的内容来查找 find.xlsx 中的某些內容. 数据内容(为了数据安全,所有数据均已模糊处理) data.xlsx内容: find. ...
python两个excel字段模糊匹配_Excel模糊查找中使用的算法 - python
我正在匹配两个公司的公司名称.我试图用Levenstien的距离在Python中进行编码.我遇到公司简称以及诸如Pvt,Ltd之类的尾随问题.我已经使用Excel Fuzzy查找运行了相同的集合,并获 ...
excel两个表格内容合并
1.在工作中可能会遇到要将两个工作表合并到一个工作表的情况,下面我们就以下图为例跟大家演示一下Excel如何快速合并多工作表. 2.点击下图选项(Excel工具箱,百度即可了解详细的下载安装信 ...

Pandas实现两个表格内容模糊匹配

一、方法2

1. 导入库

2. 构建关键词

3. 构建句子

4. 建立统一索引

5. 表连接

6. 关键词匹配

二、方法2

1. 构建字典

2. 关键词匹配

3. 结果展示

4. 匹配结果展开

Pandas实现两个表格内容模糊匹配相关推荐

最新文章

热门文章