V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
推荐学习书目
Learn Python the Hard Way
Python Sites
PyPI - Python Package Index
http://diveintopython.org/toc/index.html
Pocoo
值得关注的项目
PyPy
Celery
Jinja2
Read the Docs
gevent
pyenv
virtualenv
Stackless Python
Beautiful Soup
结巴中文分词
Green Unicorn
Sentry
Shovel
Pyflakes
pytest
Python 编程
pep8 Checker
Styles
PEP 8
Google Python Style Guide
Code Style from The Hitchhiker's Guide
omg21
V2EX  ›  Python

如何简化每天的数据发送流程?

  •  
  •   omg21 · 2016-04-24 14:39:44 +08:00 · 3660 次点击
    这是一个创建于 3169 天前的主题,其中的信息可能已经有所发展或是发生改变。
    我现在每天采集一千条左右的数据,分三个时段采集,每次采完整理完后把数据输入到 Excel 中,再传给公司,公司再把数据发布到网站上,这就是我每天的流程。
    我现在想的是,如何能简化这个流程?能不能在采集整理完成后自动发送到对方的网站上?还有没有其他的传递方式?
    17 条回复    2016-04-25 23:26:37 +08:00
    pc10201
        1
    pc10201  
       2016-04-24 15:52:39 +08:00
    可以的,用 python+requests 可以做采集和群发,我以前就是做这个的
    omg21
        2
    omg21  
    OP
       2016-04-24 17:04:48 +08:00
    @pc10201 群发怎么讲?能详细说说吗?
    我现在是把数据发给公司的技术员,然后他负责把数据传到公司网站上。
    yeyeye
        3
    yeyeye  
       2016-04-24 17:16:51 +08:00
    都能采集了 为什么不能自动发布?

    你到底想问什么?问个问题这么难么?
    omg21
        4
    omg21  
    OP
       2016-04-24 18:56:40 +08:00
    @yeyeye 我现在是把数据发给公司的技术员,然后他负责把数据传到公司网站上。我不能直接接触网站程序。
    cheerzeng
        5
    cheerzeng  
       2016-04-24 21:16:35 +08:00
    crontab 就可以定时发了吧?
    jackroyal
        6
    jackroyal  
       2016-04-24 21:54:31 +08:00 via Android
    公司网站给接口,然后采集完成自动通过接口发布就行啊
    cloudqq
        7
    cloudqq  
       2016-04-24 23:34:33 +08:00
    为何要导入到 EXCEL ?
    SlipStupig
        8
    SlipStupig  
       2016-04-25 03:26:00 +08:00
    @omg21 让他开个 FTP 账号给你,你直接上传就完事了.....
    julyclyde
        9
    julyclyde  
       2016-04-25 10:49:03 +08:00
    建议辞职吧
    目前贵公司的技术水平难以支持这么平常的应用
    realpg
        10
    realpg  
       2016-04-25 11:38:29 +08:00
    支持楼上
    EXCEL 给“技术员”,技术员上传网站
    而且公司有一个会 python 的人还这流程 还是辞职合适
    ytmsdy
        11
    ytmsdy  
       2016-04-25 18:55:59 +08:00 via iPhone
    就不能直接写个客户端,你整理完了以后你自己发布到网站上?
    omg21
        12
    omg21  
    OP
       2016-04-25 23:10:46 +08:00
    楼主被你们这样说感觉好丢人啊,可是我这是五线小城,老板真是找不到会用 py 做个爬虫的人,我来之前全部是复制粘贴,现在老板已经感到很逆天了好么。
    Aksura
        13
    Aksura  
       2016-04-25 23:11:29 +08:00
    omg21
        14
    omg21  
    OP
       2016-04-25 23:16:35 +08:00
    而且我现在不在公司办公,我是每天采集下来整理好,发给公司的技术员,他再导入网站。
    我之前的想法是我做一个网站,他的网站用框架页调用我网站上相应的页面,这样都省事,但是页面风格不一致,所以想了解下还有没有其他 的方法。
    omg21
        15
    omg21  
    OP
       2016-04-25 23:17:41 +08:00
    @Aksura 这是个什么东东?
    omg21
        16
    omg21  
    OP
       2016-04-25 23:20:41 +08:00
    @jackroyal 你是指网站给 post 接口,我直接往数据库里输入?
    omg21
        17
    omg21  
    OP
       2016-04-25 23:26:37 +08:00
    刘强东为了支持家乡的建设,非得在宿迁设置一个呼叫中心,现在知道后果了,实在是招不到合格的人才,没办法只好从邻近的徐州招聘。
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2804 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 26ms · UTC 03:17 · PVG 11:17 · LAX 19:17 · JFK 22:17
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.