推荐学习书目
› Learn Python the Hard Way
Python Sites
› PyPI - Python Package Index
› http://diveintopython.org/toc/index.html
› Pocoo
值得关注的项目
› PyPy
› Celery
› Jinja2
› Read the Docs
› gevent
› pyenv
› virtualenv
› Stackless Python
› Beautiful Soup
› 结巴中文分词
› Green Unicorn
› Sentry
› Shovel
› Pyflakes
› pytest
Python 编程
› pep8 Checker
Styles
› PEP 8
› Google Python Style Guide
› Code Style from The Hitchhiker's Guide
jerrycmht024
V2EX  ›  Python

求推荐 Python 的可视化数据编排框架

  •  
  •   jerrycmht024 · Jul 30, 2024 · 6424 views
    This topic created in 833 days ago, the information mentioned may be changed or developed.

    求推荐个可视化数据编排的框架,主要用来做大规模的数据预处理,类似 etl 。

    1. 支持界面化的编排:调研过 airflow ,只能通过 python 写脚本来定义 dag ;
    2. 预置或者自定义数据转换 operator:读取数据源,连接各种 operator ,然后写到某个数据端。

    另外像一些 workflow 好像都是在各个系统之间运转,系统内部之间好像都得自己写脚本、SQL 、代码。

    应该是想要一个类似 dataframe 转换可视化编排的东西。

    9 replies  •  2024-07-31 11:02:09 +08:00
    flmn
    flmn
    Jul 30, 2024
    1
    Python 系的很多都要写代码,Node 系很多可视化的。
    tikazyq
    tikazyq
    Jul 30, 2024
    2
    PowerBI
    dayeye2006199
    dayeye2006199
    Jul 30, 2024
    3
    相信我 -- 最流行的框架是写代码,而不是拖拖拽拽,是有原因的。
    jerrycmht024
    jerrycmht024
    OP
    Jul 30, 2024
    4
    @dayeye2006199 同意,但是奈何架不住需求
    user1284
    user1284
    Jul 30, 2024
    6
    @hackhu2019 我去,真有啊, 不过感觉还是直接写代码更舒服. 但是如果非要用拖拉拽编排这个可就太爽啦
    NoOneNoBody
    NoOneNoBody
    Jul 30, 2024
    7
    dataframe 自用还是 plt 和 plotly 方便,后者基于 web/ipython notebook ,客户端想交互则是 pyqt+qchart ,这个写起来很烦,第一版没两三周写不好,但完成后可以做成字段选择、拖放等等变换,不同数据复用

    另有专门为 dataframe 做的可视化,去 gthub 能搜到,只是我懒得学没试过
    hackhu2019
    hackhu2019
    Jul 30, 2024
    8
    @yb2313 这里支持写 python 脚本,也支持 rest api 调用,就是有点重
    lixile
    lixile
    Jul 31, 2024
    9
    plotly dash
    基本上就是这些
    需求二 感觉需要逐一实现呀
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   1091 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 32ms · UTC 18:18 · PVG 02:18 · LAX 10:18 · JFK 13:18
    ♥ Do have faith in what you're doing.