html table nei边框线,GitHub - meichuanneiku/TableCell: 在TableBank的基础上,进一步标注到单元格精度,利用目标检测/分割实现单元格定位。...
项目说明
本项目是我2019年7月份的实习工作的**展示与记录**:
把倾斜的表格旋转水平;
制作5000张表格数据集,需要标注每一个单元格,并实现单元格检测
第一项比较简单,仿射变换、透视变换已经很成熟了,关键是第二项。
考虑到人工标注太费时(1张表格图片大概30个单元格,大概3~5分钟一张,一共需2500小时),所以尝试利用常规的图像处理,提取出表格线,自动标注。
涉及代码:图像旋转(仿射变换)、表格线提取、转coco格式、可视化、随机保存文件、根据图片文件名匹配对应的标签文件等
关键代码说明:
表格旋转
table-rotation.py
只需指定输入图像路径,自动计算旋转角度、仿射变换、旋转调整整个图像(不限于表格图像,文字图像也可以)
过程: 1. HoughLines ——> get the rotation angle 2. warpAffine ——>
affine(rotation)
从表格图片提取每个单元格坐标
extract-table-visual.py
输入一张图片,通过腐蚀膨胀等操作去除表格内容,得到表格线,可视化。本代码的参数设置使可视化效果很好,但实际上左边框可能未闭合(肉眼不可见)
extract-table.py
输入一张图片,可视化表格线。为了使表格闭合、得到交点,故意调整参数,使得横线、竖线都更长。
制作coco格式数据集
table-cell-to-coco.py (刚刚修改了多线程处理的bug-12月11日)
table-cell 单元格识别说明文档
任务一:tabel-bank数据集(标注到表格级,coco格式)
数据集下载
该数据集分两块,word文档版和LaTeX文档版,其中word版比较杂,文件命名不规范,文件名有大量的拉丁文、俄文,中文系统下可能会有编码错误。表格识别任务建议使用LaTeX版的数据集。
使用mmdetection目标识别库进行训练时,只需修改config/xxx.py的数据集目录、图片大小、label_name、label种类数(2,表示表格和背景两类)。
表格检测示例图
检测结果示意图(使用最简单的faster rcnn训练12个epoch,准确率达到99%以上):
任务二:tabel-cell 数据集(标注到单元格级,coco格式)
对应代码:
table-cell-to-coco.py
图片来源:
table
bank数据集word版图片,选取以a-c开头的5116张图片(然后从这5116张图片中随机选择1000张做测试集、其余做训练集)。
标签制作:
``` bash
利用opencv库,提取出表格、单元格,然后转成coco格式
#### 分割单元格步骤
# 1. 读取图像;
# 2. 二值化处理;
# 3. 横向、纵向的膨胀、腐蚀操作,得到横线图img_row和竖线图img_col;
# 4. 得到点图,img_row + img_col=img_dot;
# 5. 得到线图,img_row × img_col=img_line(线图只是拿来看看的,后续没有用到);
# 6. 根据点图得到闭合矩形单元格(左上角、右下角坐标)
# 7. 人工设计规则,优化这些坐标
# 8. 利用得到的坐标、可视化、保存可视化结果,人工从中选出结果好的样例,做数据集
# 9. 转化为coco格式
```
示例图
步骤5示例图:
步骤8示例图:
任务三:倾斜矫正、单元格识别
倾斜矫正
``` bash
# 输入一张倾斜的图像,自动仿射变换、旋转调整整个图像
# 步骤:
# 1. HoughLines ——> get the rotation angle
# 2. warpAffine ——> affine(rotation)
```
对应代码:
table-rotation.py
示例图:
示例图2(拍照,也能精准地调整到水平状态,且不影响表格内容):
单元格识别
利用mmdetection目标识别库,训练任务二标注的table-cell数据集。
需要修改config文件,如config/cascade_mask_rcnn_r101_fpn_1x.py的字段:
数据集路径data_root = '/home/weidafeng/dataset/coco/TableBank/Word/'
类别数目num_classes=2,#两处
图像大小img_scale=(596,842)
修改label name:
mmdetection/mmdet/core/evaluation/class_names.py
mmdetection/mmdet/datasets/coco.py
python setup.py install
我使用config/cascade_mask_rcnn_r101_fpn_1x.py进行测试,修改后的config文件、训练12个eopch达到99%以上的准确率,该配置文件及模型以上传到云盘(链接:
https://pan.baidu.com/s/1nfGd7s0AMujJ00pCFAOyrA 提取码:
hupu),下载后可进行测试。
测试步骤(详见mmdetection使用说明):
使用提供的inference.py文件替换mmdetection/mmdet/apis/inference.py(我主要添加以文本形式保存预测结果的函数,不替换也能看到可视化效果)
重新编译 python setup.py install
运行测试代码:
``` bash
bash test.sh ~/test_images/ ../mmdetection/config/mask_xxxx.py
../mmdetection/workdir/latest.pth
```
测试结果示例图:
测试结果示例图(拍照,结果一样很好):
测试示例图(少部分结果出现漏检、误检):
Reference:
TableBank:
制作coco格式数据集:
mmdetection
图像旋转数学原理:
仿射变换与透射变换:
仿射变换和透视变换更直观的叫法可以叫做“平面变换”和“空间变换”或者“二维坐标变换”和“三维坐标变换”.
从另一个角度也能说明三维变换和二维变换的意思,仿射变换的方程组有6个未知数,所以要求解就需要找到3组映射点,三个点刚好确定一个平面.
透视变换的方程组有8个未知数,所以要求解就需要找到4组映射点,四个点就刚好确定了一个三维空间.
傅里叶相关知识:
频率:对于图像来说就是指图像颜色值的梯度,即灰度级的变化速度
幅度:可以简单的理解为是频率的权,即该频率所占的比例
DFT之前的原图像在x y方向上表示空间坐标,DFT是经过x
y方向上的傅里叶变换来统计像素在这两个方向上不同频率的分布情况,
所以DFT得到的图像在x y方向上不再表示空间上的长度,而是频率。
html table nei边框线,GitHub - meichuanneiku/TableCell: 在TableBank的基础上,进一步标注到单元格精度,利用目标检测/分割实现单元格定位。...相关推荐
- html table的边框线怎么变圆角_css实现带有四个圆角的table表格 2019年9月6日
CSS制作一张带有四个圆角的表格 示例如下: 实例 星期星期一星期二星期三星期四星期五 上午 8:30~11:50语文数学英语政治历史语文数学英语政治历史语文数学英语政治历史下午 13:50~17:3 ...
- html table的边框线怎么变圆角_css怎么让表格四角变圆角?
css怎么让表格四角变圆角?下面本篇文章给大家介绍一下使用CSS属性设置table表格圆角的方法.有一定的参考价值,有需要的朋友可以参考一下,希望对大家有所帮助. 使用CSS属性设置table表格圆角 ...
- 设置elment ui plus 的el table的边框线
:**代码 设置类名,给奇偶行设置类名 const tableRowClassName = ({ rowIndex }) => {if (rowIndex % 2 === 0) {return ...
- html table的边框线怎么变圆角_CSS偶有所得 - table 边框加圆角踩坑
1.发现问题 看到代码里,关于表格,大家不是很喜欢用原生的table,基本都是div来做.究其原因,大概是table的样式有时候难把控,不像直接操作div那么方便.比如:我们想做一个表格,然后希望这个 ...
- 正确给table加边框线的三种方法
第一种:html中通过table标签的border属性添加. <table id="tab01" border="1px solid #ccc" cell ...
- html table的边框线怎么变圆角_实现CSS3中的border-radius(边框圆角)示例代码
实现边框圆角 -moz-border-radius: 32px; -webkit-border-radius: 32px; border-radius: 32px; behavior: url(bor ...
- div盒子双线边框线内的颜色处理方法
本人是萌新一枚,刚刚接触h5c3,如有不足, 请各位大佬多多指教! 这个问题是我在写作业时发现的,我以为有什么属性可以去控制双线边框线内的颜色,我在CSDN上搜了之后并没有发现有什么可以去解决这个问题 ...
- html表格边框线透明度度标签,css如何让边框具有透明度
css如何让边框具有透明度 css让边框具有透明度,可以使用RGBA来表示边框的颜色. RGBA在RGB的基础上多了控制alpha透明度的参数.R(红).G(绿).B(蓝)三个参数,正整数值的取值范围 ...
- 什么是目标检测?理论+实操(github全面解析)?(持续更新中)
温馨提示:文章内容完整但是过长,由于前后内容有关联,读者学习可以多开几个浏览器分屏有助于定位 目录 目标检测理论部分: 1.目标检测介绍 2.YOLOv5的检测原理 3.目标检测的意义 4.目标检测的 ...
最新文章
- icop java,java基于spring注解AOP的异常处理的方法
- html网页自动铺满屏幕,如何使HTML元素的区域铺满全屏
- 2018深圳云栖拉开帷幕,飞天技术汇五大专场邀你参加~
- 雷军:技术立业是小米血液里最重要的东西
- 一个历时五天的 Bug,是如何被灭的?
- Eclipse中,lombok安装
- phpstudy所需的vc11和vc14运行库
- 2021年下半年软考数据库系统工程师真题答案解析
- 社区计算机考试内容,社区工作人员计算机考试大纲
- 纯Html + Css 设置Div 圆角和 鼠标悬停渐变色
- 战争游戏红龙mod简介
- Coq Art第二章 类型和表达式
- SQL Server下载和安装步骤
- Biotin-PEG-CHO,生物素PEG醛基
- 代码主题darcula_darcula主题模式是()模式。_学小易找答案
- python中多行注释可以嵌套单行注释吗_Python单行注释与多行注释
- VC雕虫小技集(四)
- zookeeper 数据节点的增删改查
- WeUI:专为开发微信HTML5应用的开源Web UI组件库
- 关于mac下搭建php、apache、mysql环境