V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
推荐学习书目
Learn Python the Hard Way
Python Sites
PyPI - Python Package Index
http://diveintopython.org/toc/index.html
Pocoo
值得关注的项目
PyPy
Celery
Jinja2
Read the Docs
gevent
pyenv
virtualenv
Stackless Python
Beautiful Soup
结巴中文分词
Green Unicorn
Sentry
Shovel
Pyflakes
pytest
Python 编程
pep8 Checker
Styles
PEP 8
Google Python Style Guide
Code Style from The Hitchhiker's Guide
jerrycmht024
V2EX  ›  Python

求推荐 Python 的可视化数据编排框架

  •  
  •   jerrycmht024 · 94 天前 · 1716 次点击
    这是一个创建于 94 天前的主题,其中的信息可能已经有所发展或是发生改变。

    求推荐个可视化数据编排的框架,主要用来做大规模的数据预处理,类似 etl 。

    1. 支持界面化的编排:调研过 airflow ,只能通过 python 写脚本来定义 dag ;
    2. 预置或者自定义数据转换 operator:读取数据源,连接各种 operator ,然后写到某个数据端。

    另外像一些 workflow 好像都是在各个系统之间运转,系统内部之间好像都得自己写脚本、SQL 、代码。

    应该是想要一个类似 dataframe 转换可视化编排的东西。

    9 条回复    2024-07-31 11:02:09 +08:00
    flmn
        1
    flmn  
       94 天前
    Python 系的很多都要写代码,Node 系很多可视化的。
    tikazyq
        2
    tikazyq  
       93 天前
    PowerBI
    dayeye2006199
        3
    dayeye2006199  
       93 天前
    相信我 -- 最流行的框架是写代码,而不是拖拖拽拽,是有原因的。
    jerrycmht024
        4
    jerrycmht024  
    OP
       93 天前
    @dayeye2006199 同意,但是奈何架不住需求
    hackhu2019
        5
    hackhu2019  
       93 天前   ❤️ 3
    yb2313
        6
    yb2313  
       93 天前
    @hackhu2019 我去,真有啊, 不过感觉还是直接写代码更舒服. 但是如果非要用拖拉拽编排这个可就太爽啦
    NoOneNoBody
        7
    NoOneNoBody  
       93 天前
    dataframe 自用还是 plt 和 plotly 方便,后者基于 web/ipython notebook ,客户端想交互则是 pyqt+qchart ,这个写起来很烦,第一版没两三周写不好,但完成后可以做成字段选择、拖放等等变换,不同数据复用

    另有专门为 dataframe 做的可视化,去 gthub 能搜到,只是我懒得学没试过
    hackhu2019
        8
    hackhu2019  
       93 天前
    @yb2313 这里支持写 python 脚本,也支持 rest api 调用,就是有点重
    lixile
        9
    lixile  
       92 天前
    plotly dash
    基本上就是这些
    需求二 感觉需要逐一实现呀
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   5912 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 24ms · UTC 02:27 · PVG 10:27 · LAX 19:27 · JFK 22:27
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.