• 请不要在回答技术问题时复制粘贴 AI 生成的内容
simonvis
V2EX  ›  程序员

一般企业会在处理数据上遇到哪些问题

  •  
  •   simonvis · Jul 8, 2019 · 1899 views
    This topic created in 2683 days ago, the information mentioned may be changed or developed.

    目前我总结的问题有以下几点: 1、数据采集(数据埋点,用 elasticsearch 收集埋点数据); 2、数据抽取(之前用存储过程,不易维护;也用过开源 ETL 工具,talend,效率低;现在用 python 脚本,成本较大) 3、数据整合(埋点数据和业务数据整合),数据存放在 mysql,目前没有用到数据仓库;

    想知道大家在工作中会遇到哪些数据上的问题,一起探讨一下呀!

    vanton
    vanton
    Jul 8, 2019
    1
    > 数据存放在 mysql

    最好不要这么干。
    LaFayette
    LaFayette
    Jul 9, 2019
    2
    上阿里云 dataworks
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   2282 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 29ms · UTC 13:31 · PVG 21:31 · LAX 05:31 · JFK 08:31
    ♥ Do have faith in what you're doing.