当前位置：网站首页>关于数据字典的一些解惑

关于数据字典的一些解惑

2022-07-17 18:34:00 【51CTO】

这里面有3个问题一直困扰着我，简单阐述一下：

1、什么是数据字典？

2、数据字典是什么时候的产物，主要是从信息化项目建设的阶段来说的，就是在什么时候会编写这个东西？

3、先有数据字典还是现有数据库表，如果现有数据字典，按照数据字典的格式怎么转换为数据库的表？

先看一个常见问题：

有的说，数据字典就是一组只读的、加密的表和视图，是用db系统自动生成
有的说，数据字典是一个说明文档，是对数据库的描述，里面包含的内容有数据项、数据结构、数据流、数据存储和处理过程五个部分
看得有点头晕了，到底数据字典是一个系统自动生成的表，还是数据库设计者自己写的一个说明文档？求解答~~
希望能有所得明白一点的答案~~重点是，数据字典到底是开发者自己写还是不用写？

然后有这样的一些解答：

数据字典是一个概念，它一般包含对数据库的描述，里面包含的内容有数据项、数据结构、数据流、数据存储和处理过程等几个部分。可以自己编写。有的数据库管理系统有自动生成数据字典的功能。写数据字典对于后人读懂开发者的数据库是很有帮助的。

数据字典的定义网上讲的都是一样的，说数据库可以自动生成数据字典也是可以的，不过严格来讲通过数据库再生成数据字典，对于系统开发过程是不对的，因为数据字典往往在需求阶段就出来了，如果通过数据库功能导出来数据字典，那就是纯粹为了写文档（补文档）方便了。

下面这句话各位觉得对吗？

ORACLE的数据字典是数据库的重要组成部分之一，它随着数据库的产生而产生, 随着数据库的变化而变化, 体现为sys用户下所有的一些表和视图.

数据字典是什么时候的产物，数据字典是需求分析产物。概念设计的产物是E-R图，逻辑设计的产物是关系模式，物理设计是设计物理存储方法及存储结构，实施阶段就是具体代码实现。那么按照正常流程，需求分析阶段先出来数据字典，那就会出来上一段反过来的问题，就不能通过数据库导出数据字典，那数据字典怎么转换为数据库呢？百思不得其解，然后从网上找到了自己想要的答案，确实还是有人按照正规流程来做的。下面看看怎么转换吧

按部就班来看看：数据字典生成SQL建表语句

这个例子从知乎拿过来，原文地址： https://zhuanlan.zhihu.com/p/361522225

先看一个常见问题

在工作中，每次用EXCEL做完数仓建模，生成数据字典以后，还要一个个编写hive的建表语句，如果表比较少还行，但是如果是成百上千张表，手动建表就比较繁琐了。

网上哥们这么说的

之前有学过python，很久没用了，所以顺便就捡起来，写了一个自动化通过EXCEL生成sql建表语句的python脚本，请教了一个项目上以前做爬虫的同事，所以比较快的完成了。这里做一个记录分享。

给定数据字典Excel格式如下，说明：每个表单里，第一列第二行是表名，第二列第二行是表的中文备注，第三列是字段名，第四列是字段备注，第五列是数据类型，字段的最后一行如果有分区字段，则说明是分区表。

关于数据字典的一些解惑_sql

Python代码来了

       
       import xlrd #操作Excel的库
       
#Excel文件路径
       
file_name = input('请输入Excel文件路径：')
       
jb_name = input("输入脚本存放路径：")
       
#读取Excel文件 
       
excel = xlrd.open_workbook(r'%s'% file_name)  #输入绝对路径要加^，同目录下则直接输入，r识别转义符/，%s引用%后面的变量
       
#开始遍历sheet
       
for i in range(excel.nsheets): #.nsheets获取excel的sheet数量，确定循环次数
       
    #跳过第一个sheet目录
       
    if i != 0:
       
        #构建建表sql头,第一个%s定义表中文备注，第二个%s定义表名
       
        sql = '''\n\n--%s
       
CREATE TABLE IF NOT EXISTSC %s 
       
( 
       
'''
       
        sheet = excel.sheet_by_index(i)  #.sheet_by_index()通过索引查找,定位到此时遍历的是哪一张sheet
       
        table_name = sheet.row_values(1)[0]  #表名等于sheet的第2行，第1列(顺序是从0开始)，.row_values定位到行
       
        table_comment = sheet.row_values(1)[1] #表备注等于sheet的第2行，第2列
       
        sql = sql % (table_comment,table_name) #给sql头变量填充值
       
        row_num = sheet.nrows #获取当前表单总行数
       
        if ('PART_' in sheet.row_values(row_num-1)[2] or 'part_' in sheet.row_values(row_num-1)[2]) and '分区' in sheet.row_values(row_num-1)[3]:
       
            row_num = row_num -1 #有分区就过滤最后一行，算出总行数
       
        for m in range(row_num): #确定需要循环的字段行数
       
            if m > 0: # 过滤掉第一行表头
       
                col_name = sheet.row_values(m)[2] #获取第m行,第3列的值作为字段名称
       
                col_type = sheet.row_values(m)[4] #获取第m行,第5列的值作为字段的数据类型
       
                col_comment = sheet.row_values(m)[3] #获取第m行,第4列的值作为字段备注
       
                if m == row_num -1:#当遍历到最后一行时
       
                    col_sql = "    %s %s COMMENT '%s'\n)\n" % (col_name,col_type,col_comment) #最后一行结尾带括号并换行
       
                else:
       
                    col_sql = "    %s %s COMMENT '%s',\n" % (col_name,col_type,col_comment) #每一行结尾带,号并换行
       
                sql = sql + col_sql
       
        sql = sql + "  COMMENT '%s'\n" % table_comment #给表添加备注
       
        #判断该表是否分区,分区表分区格式为parquet,非分区表为textfile
       
        if ('PART_' in sheet.row_values(sheet.nrows - 1)[2] or 'part_' in sheet.row_values(sheet.nrows - 1)[2]) and '分区' in sheet.row_values(sheet.nrows - 1)[3]:
       
            sql = sql + "    PARTITIONED BY (%s STRING COMMENT '%s')\n" % (sheet.row_values(sheet.nrows - 1)[2], sheet.row_values(sheet.nrows - 1)[3])
       
            sql = sql + "    ROW FORMAT DELIMITED FIELDS TERMINATED BY '\\036'\n"
       
            sql = sql + '    STORED AS PARQUET;\n\n'
       
        else:
       
            sql = sql + "    ROW FORMAT DELIMITED FIELDS TERMINATED BY '\\036'\n"
       
            sql = sql + '    STORED AS TEXTFILE;\n\n'
       
        with open(r'%s' % jb_name, 'a', encoding='utf-8') as jb: #输入脚本存放路径,注意结尾以sql文件结尾,'a'：追加写入,编码为utf-8
       
            jb.write(sql)
      
1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.
13.
14.
15.
16.
17.
18.
19.
20.
21.
22.
23.
24.
25.
26.
27.
28.
29.
30.
31.
32.
33.
34.
35.
36.
37.
38.
39.
40.
41.
42.
43.
44.
45.
46.
47.
48.

执行脚本如下

关于数据字典的一些解惑_字段_02

生成的SQL语句如下

关于数据字典的一些解惑_Oracle_03

后补或维护的方式：从数据库表导出数据字典/维护数据字典

使用PHPmyAdmin是可以导出数据字典的，phpmyAdmin是一个用php语言写的B/S架构,其配置文件在其应用的根目录config.inc.php;在该文件中可以设置数据库链接的一些信息。

打开phpmyadmin，选中需要导出数据字典的数据库

关于数据字典的一些解惑_字段_04

在表列下面有数据字典选项，点击

关于数据字典的一些解惑_Oracle_05

进入数据字典的预览页

关于数据字典的一些解惑_字段_06

在页面右键，点击存储为

关于数据字典的一些解惑_sql_07

取名保存，既可以看见

关于数据字典的一些解惑_数据字典_08

Oracle怎么导出数据字典呢，看一个栗子

原文描述是这样的问题

系统快要开发完了，甲方要求验收项目的时候提供数据字典文件，但是我们开发的时候注释直接写在实体的字段上了。我们要求提供的数据字典是word文档。要是一个一个的复制那太麻烦了，于是怎么做呢？

解决办法：

(1) 写个小工具类，把所有实体中的注释提取出来生成一个给表中字段添加注释的sql文件；

(2) 执行sql文件将注释添加到数据库表中;

(3) 采用datagrip或者navicat工具查询出你需要的数据字典项，然后导出为excel文件;

(4) 复制到word;也就是后补贴到文档里面。

前两步开发小工具提取实体注释然后生成一个给表添加注释的sql文件，执行sql文件将注释添加到表中，省略......讲第（3）步：

我们需要生成数据字典需要用到的信息一般有：字段名、字段类型、字段长度、是否非空、备注等。于是乎，我们可以用获取字段的基表和获取字段注释的基表进行关联，然后查询出你想要的信息，由于我们自己能够确定自己要生成数据字典的表是位于哪个用户，所以可以使用user_tab_columns和user_col_comments组合获取，而且使用这两个表的数据量相对小一些，效率高一些。

       
       -- 1.你可以先看下这两个表中都有哪些字段信息
       
select * from user_tab_columns where TABLE_NAME = 'MEM_LEVEL_TEMP_HISTORY';
       
select * from user_col_comments where TABLE_NAME = 'MEM_LEVEL_TEMP_HISTORY';
       
-- 2.核心sql: 可以更具你的需求修改
       
select
       
t.COLUMN_NAME as "字段名",
       
decode(c.COMMENTS, null, ' ', c.COMMENTS) as "含义",
       
decode(t.DATA_TYPE, 'TIMESTAMP(6)', t.DATA_TYPE, 'NUMBER', (t.DATA_TYPE || '(' || t.DATA_PRECISION || ')'),
       
    'DATE', t.DATA_TYPE, (t.DATA_TYPE || '(' || t.CHAR_LENGTH || ')')) as "长度",
       
-- t.DATA_TYPE || '(' || t.CHAR_LENGTH || ')' as "类型(长度)",
       
--  t.CHAR_LENGTH as "字段长度",
       
t.NULLABLE AS "是否为空",
       
' ' as "备注"
       
from USER_TAB_COLUMNS t join USER_COL_COMMENTS c on c.TABLE_NAME = t.TABLE_NAME and t.COLUMN_NAME = c.COLUMN_NAME
       
where c.TABLE_NAME = 'MEM_LEVEL_TEMP_HISTORY'  --表名应该大写
       
order by t.COLUMN_ID
       
;
      
1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.
13.
14.
15.
16.
17.