V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
爱意满满的作品展示区。
coolwulf
V2EX  ›  分享创造

在 D 版发过了,不过因为不少朋友看不到 D 版,我就放在这里吧,说说我最近做的这个 Project

  coolwulf · 2018-06-13 05:39:11 +08:00 · 42152 次点击
这是一个创建于 2136 天前的主题,其中的信息可能已经有所发展或是发生改变。

去年的时候,我一个在芝加哥比我小几级的南京大学校友去世了。乳腺癌,发现得晚了,才 34 岁,留下了一个 4 岁的孩子。非常可惜。想想能不能做点什么事情可以帮助大众来提高乳腺癌的早期检测成功率。因为如果在 stage 1 发现乳腺癌的话,5 年存活率是 99%。

想想能否写一个完全免费的网站和 ios app 来让用户可以迅速得到 X-ray Mammogram 的诊断结果。至少可以是 2nd Opinion. 因为用户做完 Mammography 之后有时候需要等好几天才能有 Radiologist 来读片子。而且现在 Radiologist 有 20% 的概率会漏掉早期的肿瘤。我决定用 Deep Learning (深度学习) 来做这件事情。

对于一个足够好的 Deep Learning Model, 一是要有足够多的数据 (即使是做 Transfer Learning 的情况下), 二是要有足够强大的计算力。为了做成这件事情,我在本地搭建了一个 50 个 Nvidia Geforce GTX 1080 Ti 的 GPU cluster, 这是搭成之后的硬件:

有了硬件之后就是设计 Model 和收集数据。我从北美和欧洲的几个研究组获取了 Annotated Breast Mammo 的数据。这些 Annotation 大多都是根据北美 ABR certified 的 Radiologist 做出的。也就是如果这个 Model 能够训练好,就可以达到 ABR Certified Radiologist 的 Reading 的平均水平或者更好。

最终的结果我在欧洲的 InBreast 数据上做了测试,达到了 90% 的准确度 (AUC).

我觉得这个 Model 已经可以给大众实用了,在这里公开出来:

http://neuralrad.com

你可以直接上传 .jpg 形式的 Mammo 图片,这个 AI 会给出判断结果. 这是 Screenshot:

这个网站是完全免费使用的。我现在还在继续更新和改进 Model, 也在联系国内的几家医院来合作来获取更多的数据来 Training.

University of Kentucky Hospital 和国内的一家合作公司已经在测试了这个模型

乳腺癌检查去年有个全世界竞赛,他们先用这个竞赛获得第二名程序测试了 MIAS 数据,漏了 10 个 case, 然后他们用我的网站测试了一下,只漏了一个

这个第二名程序发表了一篇自然杂志的论文:

https://www.nature.com/articles/s41598-018-22437-z

这两天,我也公布了完全免费的桌面版本,支持读取和浏览 dicom 文件,并自动转换 Normalize for AI analysis. 在 InBreast 的 Dicom 数据上 AUC (准确率)大概 93%。桌面版本截图:

下载地址就在网页主页上。

[06/12/2018 更新] NeuralRad Mammo AI 桌面版本更新到了 1.2, 修复 dicom/jpg 文件路径有中文或者空格导致无法返回正确结果的问题。依然从主页 http://neuralrad.com 免费下载

第 1 条附言  ·  2018-07-18 03:08:25 +08:00
[07/17 更新 桌面版本 1.4]

+ 修复标注的一个 bug
+ 标注保存文件 annotation.txt 保存在图像当前目录下
312 条回复    2022-06-01 16:48:04 +08:00
1  2  3  4  
mringg
    201
mringg  
   2018-06-13 21:48:35 +08:00 via iPhone
支持!!!我感觉这才是技术的意义
danliuwo
    202
danliuwo  
   2018-06-13 21:52:06 +08:00
这计算能力真强啊
gscsnm
    203
gscsnm  
   2018-06-13 21:56:25 +08:00
赞!!
sidgwick
    204
sidgwick  
   2018-06-13 22:01:29 +08:00
厉害了
zhandi
    205
zhandi  
   2018-06-13 22:10:16 +08:00
墙裂支持
xxlong
    206
xxlong  
   2018-06-13 22:18:21 +08:00
真大佬啊,比那些混比赛的强多了啊
AA0
    207
AA0  
   2018-06-13 22:41:44 +08:00
厉害,榜样啊!
steveway
    208
steveway  
   2018-06-13 22:49:59 +08:00
在最近戾气极其可怕的 V 站里看到这个帖子
可以说是十分感动了
感谢楼主.
xingzw
    209
xingzw  
   2018-06-13 22:55:05 +08:00
感动!这才是技术存在的价值!
HXM
    211
HXM  
   2018-06-13 23:13:25 +08:00 via Android
来自 D 版带着爱
Sivan2017
    212
Sivan2017  
   2018-06-13 23:13:44 +08:00
感谢楼主
rvmedtech
    213
rvmedtech  
   2018-06-13 23:26:08 +08:00
谢谢楼主,让我们看到了一个以一己之力通过技术改变人们健康的例子,由衷钦佩!我们公司最近也开放了针对眼底照片的在线预测系统,可以通过 1 张眼底照片分析 12 种疾病 /指标,包括眼病和部分全身性疾病,在线版本完全免费,也希望能够为医疗尽一份力,欢迎大家提意见: https://www.deepfundus.com
viosey
    214
viosey  
   2018-06-13 23:35:50 +08:00
非常正能量!感谢
cchange
    215
cchange  
   2018-06-13 23:47:09 +08:00 via iPhone
支持一下 期待可以务实一些
si
    216
si  
   2018-06-13 23:55:19 +08:00
支持一下吧
sobigfish
    217
sobigfish  
   2018-06-14 00:12:32 +08:00
厉害,但 lz 宣传时用人家的片子经过同意了么, 虽然没显示名字 但外国人对隐私很敏感吧 而且最近的 GDPR 让大家更重视
incompatible
    218
incompatible  
   2018-06-14 00:35:23 +08:00
来自 D 版带着爱
ymqm
    219
ymqm  
   2018-06-14 00:45:42 +08:00 via Android
敬佩楼主,计算资源就应该用在这些方面。
param
    220
param  
   2018-06-14 01:03:08 +08:00 via Android
数据的提供方愿意无偿提供吗?
Jzer0n
    221
Jzer0n  
   2018-06-14 01:06:43 +08:00
技术改变世界!
LittleYangYang
    222
LittleYangYang  
   2018-06-14 01:12:44 +08:00
支持楼主!
deadseven
    223
deadseven  
   2018-06-14 01:16:13 +08:00
这才是牛人学 DL,凡人只是为了赚钱而已
01802
    224
01802  
   2018-06-14 01:16:20 +08:00 via Android
d 版路过赞一个
xnth97
    225
xnth97  
   2018-06-14 04:19:57 +08:00
厉害厉害...前段时间搞的类似,也是对医疗影像的诊断,不过还在 data annotation 和炼丹的阶段...
shrekshao
    226
shrekshao  
   2018-06-14 05:29:03 +08:00
牛逼。。支持。。还是要技术+应用领域啊
bestkayle
    227
bestkayle  
   2018-06-14 06:52:29 +08:00 via iPhone
@Willjim #15 关键是有钱……
chiu
    228
chiu  
   2018-06-14 07:22:20 +08:00 via Android
真大佬
zhijiansha
    229
zhijiansha  
   2018-06-14 07:33:51 +08:00 via iPhone
膜拜大佬
Yien
    230
Yien  
   2018-06-14 08:06:39 +08:00 via iPhone
叻🆒
sharkrice
    231
sharkrice  
   2018-06-14 08:10:33 +08:00
震惊
osp321
    232
osp321  
   2018-06-14 08:18:31 +08:00
实用落地技术!!大佬!!!!!
什么是 D 版?
osp321
    233
osp321  
   2018-06-14 08:20:26 +08:00
主页蓝绿色是医院主色?
可以做的更酷一些。
Keyes
    234
Keyes  
   2018-06-14 08:22:23 +08:00 via Android
非常支持楼主!
Devilker
    235
Devilker  
   2018-06-14 08:30:13 +08:00
硬核!!!!太硬
alpenstock
    236
alpenstock  
   2018-06-14 08:41:57 +08:00
宅心仁厚技术大牛!
NullException
    237
NullException  
   2018-06-14 08:43:33 +08:00
啥是 D 版
eric1202
    238
eric1202  
   2018-06-14 08:58:57 +08:00
感恩
ssshooter
    239
ssshooter  
   2018-06-14 09:01:58 +08:00
支持
IvanLi127
    240
IvanLi127  
   2018-06-14 09:04:37 +08:00 via Android
真大佬!膜拜
zhuzhengce
    241
zhuzhengce  
   2018-06-14 09:08:25 +08:00
网站不行了?打开后注册后登录是空白的页面
mengdisheng
    242
mengdisheng  
   2018-06-14 09:15:56 +08:00
愿圣光指引你前行
Mithril
    243
Mithril  
   2018-06-14 09:22:47 +08:00
作为过来人说一句,别碰辅助诊断。换个名词远离诊断链还是能赚钱的。
Norie
    244
Norie  
   2018-06-14 10:26:35 +08:00
Just Do It。
SsuchingYu
    245
SsuchingYu  
   2018-06-14 10:27:54 +08:00
真·硬核技术。
tornado233
    246
tornado233  
   2018-06-14 10:28:59 +08:00
太厉害了!支持
27149
    247
27149  
   2018-06-14 10:54:49 +08:00
来自 D 版带着爱
hippies
    248
hippies  
   2018-06-14 11:10:13 +08:00 via Android
不是用来挖矿的牛逼应用
Reign
    249
Reign  
   2018-06-14 11:17:23 +08:00
哪里能下载免费的 model ?
c9
    250
c9  
   2018-06-14 11:23:36 +08:00
有些感动。希望人工智能可以更快地在医学方面发展。

另外,访问你的网站,会自动在域名后面加上:5000 的端口。
asic1024
    251
asic1024  
   2018-06-14 11:46:03 +08:00
so cool
Lawlieti
    252
Lawlieti  
   2018-06-14 11:49:49 +08:00
希望多一些像楼主这样的人,推动现代医学的发展!
yechengzhe
    253
yechengzhe  
   2018-06-14 11:53:45 +08:00 via Android
这个必须赞了,技术改造世界
sindy
    254
sindy  
   2018-06-14 12:03:20 +08:00 via iPhone
膜拜大佬,太赞了!!
Mervyn
    255
Mervyn  
   2018-06-14 13:52:41 +08:00   ❤️ 1
最近去医院给小孩子检查,各种科室,各种报告,各种等待医生看结果。医生根据化验结果,知道的就给你说了,不知道的又会诊,又去其他机构进行求证。 实际上现在的化验结果出来的参数,如果有大数据进行支撑的话, 医生通过自己的学识经验去根据结果进行判断,不如通过计算机大数据进行筛查来的快跟准确。 这方面应用确实非常有意义。
wzehai
    256
wzehai  
   2018-06-14 14:13:11 +08:00
支持,强烈支持
tanranran
    257
tanranran  
   2018-06-14 14:16:55 +08:00
献上今年的膝盖,赞一个
WytheHuang
    258
WytheHuang  
   2018-06-14 14:17:48 +08:00
前星期六, 母亲乳房有肿块, 检测出四类. 对这些不是很懂, 不停找资料查看, 越看越害怕. 尤其是 B 超图片完全看不懂, 肿块在哪都不知道. 就知道四类.疑似恶性. 好在住院做手术,是良性.
楼主这个是在太赞了, 希望能够帮助更多人.,
qk3z
    259
qk3z  
   2018-06-14 14:20:53 +08:00 via Android
大佬真实令人佩服
qdpoboy
    260
qdpoboy  
   2018-06-14 14:21:17 +08:00
牛逼,不光是技术,方方面面都佩服!
luofan004
    261
luofan004  
   2018-06-14 14:32:23 +08:00
膝盖在此,请收下~~
cedoo
    262
cedoo  
   2018-06-14 14:49:04 +08:00
膝盖在此,请收下~~
ZiLong
    263
ZiLong  
   2018-06-14 15:51:56 +08:00
厉害 支持!
mario85
    264
mario85  
   2018-06-14 16:58:30 +08:00 via iPhone
后排膝盖
stormwindcity
    265
stormwindcity  
   2018-06-14 17:47:34 +08:00
中排支持~
JoeoooLAI
    266
JoeoooLAI  
   2018-06-14 18:01:10 +08:00
支持!!!膝盖在此,请收下~~希望多一些像楼主这样的人,推动现代医学的发展!
cocang
    267
cocang  
   2018-06-14 18:42:47 +08:00
很佩服,很有意义。
Last43
    268
Last43  
   2018-06-14 18:51:25 +08:00
支持!
KAYA
    269
KAYA  
   2018-06-14 19:06:53 +08:00 via Android
支持楼主
honeyshine75
    270
honeyshine75  
   2018-06-14 20:20:18 +08:00
赞赞赞
gerorim
    271
gerorim  
   2018-06-14 20:21:22 +08:00
佩服楼主,Do have faith in what you're doing.
soybean920
    272
soybean920  
   2018-06-14 20:51:30 +08:00 via iPhone
希望最终结局是好的,技术成就美好生活,这个项目即使没有盈利模式,也应获得各基金会的支持
coolwulf
    273
coolwulf  
OP
   2018-06-15 03:04:47 +08:00
很多朋友希望我写个英文的 Post 来让更多的人有机会使用这个工具,Here it is:

https://imgur.com/gallery/PuWx39O

可以随便转到 Reddit 或者其他英文网站,没有问题。
banksiae
    274
banksiae  
   2018-06-15 10:59:40 +08:00
大写的佩服,佩服。怒赞楼主
Comphuse
    275
Comphuse  
   2018-06-15 11:09:19 +08:00
想起这两天一条提到欧美女性和亚洲女性乳腺结构差异的推文,不知是否有参考意义: https://twitter.com/hengdm/status/1005364913001267200
hiyoi
    276
hiyoi  
   2018-06-15 11:34:29 +08:00
厉害啊。
sibao
    277
sibao  
   2018-06-15 11:44:14 +08:00
希望这类工具,更多是被医生使用,而不是被毫无医学基础的病患随便使用,影像是需要结合病史的,单凭一个读片网站得出的结论,很容易造成病患之间的不信任。

以上是来自一位医生朋友的观点。个人表示,相信医生,也对 coolwulf 做的事情深感佩服。
showgood163
    278
showgood163  
   2018-06-15 13:37:04 +08:00
真正的大佬,请收下我的膝盖
haobo
    279
haobo  
   2018-06-15 15:18:59 +08:00
大佬厉害
victorzhao1984
    280
victorzhao1984  
   2018-06-15 16:10:20 +08:00
厉害了,我有合作的想法和资源,不知道怎么联系你?
GWesley
    281
GWesley  
   2018-06-15 16:41:05 +08:00
不得不顶一下
AAAgch
    282
AAAgch  
   2018-06-15 17:30:43 +08:00
真大佬,科技的实质作用。 支持
zhouyut001
    283
zhouyut001  
   2018-06-15 17:44:10 +08:00 via Android
厉害,赞一个
Fenng
    284
Fenng  
   2018-06-15 19:59:20 +08:00
路过。
coolwulf
    285
coolwulf  
OP
   2018-06-15 21:41:33 +08:00
@zhuzhengce 网站使用不需要注册。直接点击上面的 "Screen Mammograpny" 链接就可以使用。以后可能会提供让用户登陆来保存一些测试结果的功能。但这个功能现在还没有时间写完。
coolwulf
    286
coolwulf  
OP
   2018-06-15 21:43:31 +08:00
@victorzhao1984 我的微信很多朋友都知道:haojiang420251,我们可以谈一谈,我也希望能够让这个项目进入到 clinical setting 里面 make radiologists more confident.
daibude
    287
daibude  
   2018-06-16 11:28:44 +08:00 via iPad
特意前来支持
frozenshadow
    288
frozenshadow  
   2018-06-17 21:23:29 +08:00 via Android
感谢!这才是技术的意义
MrPotter
    289
MrPotter  
   2018-06-18 21:14:56 +08:00
膜拜大佬,贡献出自己 50 块 1080Ti 的 GPU,做这样一件有意义的事情,真是太厉害了。这才是深度学习应该关注的技术方向。求赞助连接。
roytam1
    290
roytam1  
   2018-06-20 11:51:17 +08:00
@coolwulf 大佬方便回應一下這篇嗎? https://www.v2ex.com/t/256045
另外有想過把 KMCCF 的源碼放出來嗎?
coolwulf
    291
coolwulf  
OP
   2018-06-21 12:05:20 +08:00
@roytam1 关键我得能找到源码... 大部分的 KM-CCF 源码都在 KM 1.5 里面了
coolwulf
    292
coolwulf  
OP
   2018-06-21 22:56:42 +08:00
更新 NeuralRad Mammo 桌面客户端 1.3 版本,针对 FujiFilm 等平板厂商的 dicom 图像提供选择不使用 Normalization, 下载地址: http://neuralrad.com:5000/static/NeuralRad_Mammo_Installer.exe
Conte
    293
Conte  
   2018-06-22 09:16:19 +08:00
膜拜,技术造福!
wanwan
    294
wanwan  
   2018-06-22 15:57:06 +08:00
厉害。。膜拜一下。。
okayz
    295
okayz  
   2018-06-23 20:07:00 +08:00
膜拜大佬
E1n
    296
E1n  
   2018-06-23 22:26:51 +08:00 via Android
达则兼济天下!
horizon
    297
horizon  
   2018-06-25 10:56:04 +08:00
支持楼主。DL 真是牛。
gaoryrt
    298
gaoryrt  
   2018-06-25 17:37:42 +08:00
来自 D 版带着爱
snailjw
    299
snailjw  
   2018-06-26 15:40:37 +08:00
厉害
yesqu
    300
yesqu  
   2018-07-12 23:24:04 +08:00
膜拜大佬!!!稍微有一点不严谨的地方就是 Scientific Reports 真的不能直接说是自然杂志。说自然子刊比较好,但是说自然子刊最好也说一下是“ Scientific Reports ”。 大家懂的。逃~:-P
>>>“这个第二名程序发表了一篇自然杂志的论文:”
1  2  3  4  
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   我们的愿景   ·   实用小工具   ·   948 人在线   最高记录 6543   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 39ms · UTC 20:56 · PVG 04:56 · LAX 13:56 · JFK 16:56
Developed with CodeLauncher
♥ Do have faith in what you're doing.