求推荐 Python 的可视化数据编排框架 - V2EX
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
推荐学习书目
Learn Python the Hard Way
Python Sites
PyPI - Python Package Index
http://diveintopython.org/toc/index.html
Pocoo
值得关注的项目
PyPy
Celery
Jinja2
Read the Docs
gevent
pyenv
virtualenv
Stackless Python
Beautiful Soup
结巴中文分词
Green Unicorn
Sentry
Shovel
Pyflakes
pytest
Python 编程
pep8 Checker
Styles
PEP 8
Google Python Style Guide
Code Style from The Hitchhiker's Guide
jerrycmht024
V2EX    Python

求推荐 Python 的可视化数据编排框架

  •  
  •   jerrycmht024 2024-07-30 10:06:55 +08:00 2569 次点击
    这是一个创建于 485 天前的主题,其中的信息可能已经有所发展或是发生改变。

    求推荐个可视化数据编排的框架,主要用来做大规模的数据预处理,类似 etl 。

    1. 支持界面化的编排:调研过 airflow ,只能通过 python 写脚本来定义 dag ;
    2. 预置或者自定义数据转换 operator:读取数据源,连接各种 operator ,然后写到某个数据端。

    另外像一些 workflow 好像都是在各个系统之间运转,系统内部之间好像都得自己写脚本、SQL 、代码。

    应该是想要一个类似 dataframe 转换可视化编排的东西。

    9 条回复    2024-07-31 11:02:09 +08:00
    flmn
        1
    flmn  
       2024-07-30 10:23:42 +08:00
    Python 系的很多都要写代码,Node 系很多可视化的。
    tikazyq
        2
    tikazyq  
       2024-07-30 10:28:07 +08:00
    PowerBI
    dayeye2006199
        3
    dayeye2006199  
       2024-07-30 10:43:05 +08:00
    相信我 -- 最流行的框架是写代码,而不是拖拖拽拽,是有原因的。
    jerrycmht024
        4
    jerrycmht024  
    OP
       2024-07-30 10:59:15 +08:00
    @dayeye2006199 同意,但是奈何架不住需求
    hackhu2019
        5
    hackhu2019  
       2024-07-30 11:18:49 +08:00   3
    yb2313
        6
    yb2313  
       2024-07-30 14:22:30 +08:00
    @hackhu2019 我去,真有啊, 不过感觉还是直接写代码更舒服. 但是如果非要用拖拉拽编排这个可就太爽啦
    NoOneNoBody
        7
    NoOneNoBody  
       2024-07-30 14:38:11 +08:00
    dataframe 自用还是 plt 和 plotly 方便,后者基于 web/ipython notebook ,客户端想交互则是 pyqt+qchart ,这个写起来很烦,第一版没两三周写不好,但完成后可以做成字段选择、拖放等等变换,不同数据复用

    另有专门为 dataframe 做的可视化,去 gthub 能搜到,只是我懒得学没试过
    hackhu2019
        8
    hackhu2019  
       2024-07-30 15:24:24 +08:00
    @yb2313 这里支持写 python 脚本,也支持 rest api 调用,就是有点重
    lixile
        9
    lixile  
       2024-07-31 11:02:09 +08:00
    plotly dash
    基本上就是这些
    需求二 感觉需要逐一实现呀
    关于     帮助文档     自助推广系统     博客     API     FAQ     Solana     5023 人在线   最高记录 6679       Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 22ms UTC 05:43 PVG 13:43 LAX 21:43 JFK 00:43
    Do have faith in what you're doing.
    ubao msn snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86