当前位置: 首页 > news >正文

赣州网站建设精英中山高端企业网站设计

赣州网站建设精英,中山高端企业网站设计,成都网站设计建设,龙华营销型网站制作哪家好上一篇文章已经对7个txt文件做出了初步的筛选#xff0c;现在借用excel来进行需要的数据筛选以及对空值的填补。#xff08;ps,其实主要就是对DEMO以及DRUG的清洗#xff09; 1.DEMO文件#xff1a;#xff08;主要存储了报告信息以及病例患者的基本信息#xff09; pr…        上一篇文章已经对7个txt文件做出了初步的筛选现在借用excel来进行需要的数据筛选以及对空值的填补。ps,其实主要就是对DEMO以及DRUG的清洗 1.DEMO文件主要存储了报告信息以及病例患者的基本信息 primaryid$caseid$caseversion$i_f_code$event_dt$mfr_dt$init_fda_dt$fda_dt$rept_cod$auth_num$mfr_num$mfr_sndr$lit_ref$age$age_cod$age_grp$sex$e_sub$wt$wt_cod$rept_dt$to_mfr$occp_cod$reporter_country$occr_country 去除对报告的客观描述后提取需求信息如下 primaryid$i_f_code$age$age_cod$age_grp$sex$e_sub$wt$wt_cod 主要就是年龄体重是否是首例病例但是数据存在大量空白以如下规则进行补缺 1.综合age$age_cod$age_grp三项数据生成年龄段信息(ps:age有不同单位需要换算成年统一标记同理体重字段也是) 标记规则 N--0新生儿出生后28天内 I--1婴儿28天到1岁 C--2儿童2-12岁。 T--3青少年13-19岁 A--4成年人20-60岁 E--5老年人60岁以上 2.以是否首例体重、性别、年龄段为关键词利用KNN补齐缺失部分数据的报告ps:KNN需要都是数值,str字段需要更改为对应数值i_f_code中i记为0f记为1sex字段中M记为0F记为1 当前数据中体重一列缺失数据约70%如果使用KNN或其他补空会产生比较大的噪声所以选择利用有体重录入的数据行对性别、年龄、是否首例进行4字段KNN补空。 补空完成后观察数据发现年龄段和是否首例已经没有缺失值但利用年龄段、是否首例来推测性别前2者与后者没有关联性所以选择用3填充剩余性别信息约5000条表示UNKNOW。在样本数充足的情况下或许直接删除会更好全填充3也是便于后续直接删除。 def fill_null_with_wt_demo(excel_path:str,excel_sheet_name:str,save_path):# 读取原始数据文件df_original pd.read_excel(excel_path, sheet_nameexcel_sheet_name)# 创建新副本用于填补age_grp和sexdf_filled df_original.copy()# 筛选出已知的非空体重值的行df_known_weight df_original.dropna(subset[wt])#选取非空体重值的3的数据df_known_values df_known_weight[[i_f_code,age_grp, sex,wt]]# 使用KNNImputer拟合imputer KNNImputer(n_neighbors3)imputer.fit(df_known_values) # 填补进度条with tqdm(totallen(df_known_weight)) as pbar:for i in range(len(df_known_weight)):row df_known_weight.iloc[i]filled_values imputer.transform([row[[i_f_code,age_grp, sex,wt]]])df_filled.loc[df_known_weight.index[i], [i_f_code,age_grp, sex,wt]] filled_values[0]pbar.update() # 将填补后的数据保存到新的Excel文件df_filled.to_excel(save_path, indexFalse) 3.删除全部缺失数据或只有性别的数据总计约3W条占比约25%最后留余9.6W条数据
http://wiki.neutronadmin.com/news/288654/

相关文章:

  • 网站宣传的优点微信公众号登录平台登录
  • 专业做网站建设的网站建设公司 lnmp
  • 免费如何创建网站平台创网址
  • 网站建设行业动态网站推广策略和效果评价
  • 深圳手机端网站建设收费二室一厅60平米装修案例
  • 洞口网站开发公司推荐房地产集团网站建设
  • 网站怎么做支付宝接口网站维护服务合同
  • 广告网站留电话整人网站建设费用5万入账
  • 中国建设银行网站特色wordpress教程文档
  • 基于ssh框架的网站开发流程做手机版网站和做app差别
  • 关注网站制作河北保定网站建设
  • 做网站哪个地方需要钱海安建设局网站
  • 营销型网站规划建设的七大要素淄博手机网站建设
  • 北京网站建设策划解决方案防疫大数据平台
  • 源码可以做网站吗建筑设计网站issuu
  • 昆山网站建设推广斗鱼网站开发是用什么语言
  • 怎样搭建属于自己的网站如何查看网站的外链
  • 怎么做一个公司网站济南建设工程交易网官网
  • vs做的网站如何做微信商城设计网站
  • 泰安创意网络公司北京度seo排名
  • 论文网站建设与运营合肥制作小程序
  • 怎么做跳转不影响原网站排名图们市建设局网站
  • 火币网站怎么做空前端网页设计招聘
  • 广汉网站分销系统平台有哪些
  • 淘宝客推广网站建设建筑公司logo设计大全
  • 广西建设厅网站地址室内设计培训学费多少
  • 大型网站开发的书网站开发招聘职位
  • ps怎么做网站的广告条改革开放40周年网站发展建设
  • 安平网站建设莱芜高新区
  • 怎么创网站赚钱吗建设银行个人