仓库物控工作总结

2024-09-05

仓库物控工作总结(共7篇)

仓库物控工作总结 篇1

JHS仓库管理流程操作及要求

一,各仓管员要按单据,分客户,机型,物料的名称·颜色·规格,来区分确认物料。二,各仓管员要严格按正规单据发料,确保每笔进出物料都以有效单据的文字形式为依据来操作。三,收料员

1.供应商或客户送来的每一笔物料,要按单据确认好实物,点料收货(要以全点,抽点形式点收),物料放置待检区,摆放整齐后,填写收料日报表,开送检单知会IQC检验,送货单交到记账员单据盒里,2小时后查看物料状态,如未检要知会IQC检验,如检验OK要通知仓管员收料入库,如需返工或待确认,物料应移置到待定区,如品质判退(询问有无知会到客户或供应商),不良品仓管员要做好及时处理退货或快递退货。

2.当天计划有欠料的,应多加注意来料,及时通知到IQC检验,仓管员发料。

3.各供应商有送货来,要询问不良品仓管员有无不良品物料退货,以便做到库存不良品能及时清理。

4.如供应商来货短装,当场确认马上改单,供应商要在更改处签名留证。如是快递,按快递单上的电话号码询问到寄件方,同时上报给主管,或改单或拒收或填写来料短装记录表传真给客户或供应商,同时上报给主管。四,记账员

1.上班要查询收料员或前晚值班人员有无未上交的来货或退货的单据,当天计划的扣账,前天计划的成品入库或出货,及时入账,确保9:30把报表发送到客户和本公司相关人员的邮箱里。产线的超领单据和退仓单据也要及时入账,以此类推,下午16:30再发送一次报表。.每天要去抽点仓管员的物料,不定时地对账,确保帐与实物相符。

3.记录客户反应的问题,上报给主管,以便做好跟踪处理。五,各良品仓物料管理员

1.保证所管物料要以先进先出的要求来发料和移位摆放。

2.每天把检验好的物料按客户,机型,供应商,物料的名称·颜色·规格,来区分入库,规范摆放到货架,建好物料卡,做好每份物料入库帐,如单批物料有部分不良品,要把不良品物料并附带送检单转交到不良品仓。

3.每天的预定计划查料,要准确的查询到物料状态,是物料欠料,物料在品质检验,物料要返工,以书面形式填写好物料的名称和数量,附带个人名字,正式计划下达,收到备料单时,应结合BOM以及一些生产要求来按备料单备料。

4.当天计划发料完后要及时在物料卡上做帐,有物料超领单,退仓单,退货单,也是要及时做账,保证每笔进出物料不会遗漏。发完物料后要做一个小盘点。

5.库存的每一种物料只允许有一个尾数,包装好的外箱要确保写有物料的机型.名称.数量。

6.在无需发料的工作下物料箱的状态是闭合的,不允许承打开状态。7.物料放置在货架或栈板,不允许出现零散状态,要严格要求自己,物料要叠合整齐(不可叠合过高),无用的物料托盘.物料箱.物料袋检查有无夹藏到物料,及时清理整齐摆放到垃圾放置区。

六,不良品仓物料管理员

1.注意区分物料归属于来料不良还是制成不良的状态,同一物料不同供应商也要区分,以便按供应商所属物料达成正确退货。

2.不良品退料时间以一星期提报一次退料为基础。

3.供应商返工的物料产生的不良品要做好交接,确保数量,及时退料。4.实施退料前先对账,特别注意要清空的物料,防止混退,漏退。七,成品管理员

1.产线入库的成品要按照计划单上的要求确认。2.每天实行成品对账,成品盘点。

3.成品出货要按照客户的授权书要求给予出货(月更新授权书一次)。4.自做一份成品库存帐。七,关于单据的操作明细。

(所有单据都要求用圆珠笔填写,字迹要清晰,工整。单据填写要规范。)

1.供应商送货单:注意单据上有无填写,客户名称,供应商名称,物料机型,物料名称,日期。签单后盖上仓库专用章,留两联送货单上交给统计员。

2.快递单:注意单上收件方公司名称,收货人名称,快递件数。3.收料日报表:注意每批来货都要填写,以便来料查询。

4.送检单:如送货单的物料名称与BOM上的描述有差异,以BOM为准填写,写上送检时间,备注上送检的件数,来货数+备品数的累计数量要填写在送检数一栏上,开好的送检单黄联留底,其他联要与实物放置在一起,IQC检验OK后也是按照送检单的明细入库。白联上交统计员,蓝联入库人员留底。

5.计划单:注意线体,机型,颜色,备注上的要求。统计员保留一份(每天按计划单查询上交的备料单),仓管员共享一份。

6.备料单:结合BOM参考,按要求备料,同时填写上所发的物料。仓管员和物料员确认清楚签名,白联上交给统计员,红联.黄联给到物料员,蓝联.绿联仓管员留底。

7.借料单:在正常计划发料之外产线所要领用的物料需开借料单,按单据要求应由借料人,拉长,主管各自签名确认。三大件要有总经理/副总经理签名审核,方能生效。单据填写要工整,如过于潦草,看不清晰,当作废,收到借料单后发料人要在单据写上自己名字和发料时间。当天计划产生的借料单的红联由各仓管员保留,第二天交由不良品仓管员再保留2个工作日,如2个工作日内产线未开领料单来抵消借账,再交由主管处理。借用的物料退还仓库后归还。

8.领料单:除正常领料外,领料单和退仓单是同时产生,领料内容和退仓内容是相对应的。注意单据上的实发数量不能多于申请的数量。领料单由不良品仓人员签字确认,再给到良品仓人员签字发料。

9.退仓单:注意所退物料应区分良品,来料不良品,制成不良品,退仓单上要有品质部签名以及不良品物料要有标签标识不良原因。红联上交统计员,蓝联仓管员留底。

10.丢失单:每单计划完成后,产线所退的物料少于除正常领料外借用的物料,必需开出产线物料丢失单来抵消物料账,如不开单,借料单据照常上交主管。

10.物品入库单:属工厂采购的物品,除供应商应有的送货单(留两联),另同时开份物品入库单,单上备注送货单的单号,单据要有仓库主管签名确认,盖上仓库专用章,蓝联和其中一联送货单给到行政部,另外一联送货单与物品入库单订一起。如要领用,填写物资领用登记表。

11.物料入库单:是在客户送料到工厂,无送货单的情况下才产生的,开完单后盖上仓库专用章,给于客户蓝联,白联留底,开出送检单,红联.黄联上交给统计员。绝不允许给供应商开物料入库单,让其另外补送货单。

12.退货单:注意填写供应商名称,退货原因,如是退不良品,单上要有品质部门人员的签名以及实物的确认。蓝联给客户/供应商,白联留底,红联.绿联上交统计员。

13.成品入库单:注意开单明细要按照计划单上的备注开单,不同客户分开开单,机型,颜色,标贴,镜片,按键,各状态要写清楚。红联上交统计员,蓝联留底。

14.成品出货单:按照单天计划出货指令开出货单,单据备注好客户提货或物流公司提货,如是返修机出货要特别注明。正常计划出货和返修机出货要分开开单。成品出货单在有管级以上人员签名以及客户签名的情况下有效。蓝联给客户/供应商,白联留底,红联.黄联上交统计员。

15.物品放行条:按在有效单据的情况下对比实物,开出放行条。开单人员签名,主管级以上人员签名有效。成品出货的放行条要盖上成品出货专用章,其他物料的放行条则要盖上仓库专用章。

16..内部调拨单:良品库存被品质判定不良,以此单调拨到不良品仓。单批来货品质判不良已入库后品质改特采为良品,以此单调拨到良品仓。以调拨单日期做账为准。

2011.12.15生效。

仓库物控工作总结 篇2

关键词:工作流,仓库管理,库存控制

一、工作流的内涵

工作流是经营过程的一种计算机化的表示模型, 定义了完成整个过程所需要的各种参数。这些参数包括对过程中每一个步骤的定义、步骤的执行顺序、条件, 以及数据流的建立、每一步骤由谁来负责及每个活动所需要的应用程序。

二、仓库的作业流程

1. 订单处理。

仓库与其他经济实体一样, 具有明确的经营目标和服务对象。因此, 在仓库规划建设、开展仓储活动之前, 必须根据订单信息, 对顾客分布、商品特性及品种数量、送货频率等资料进行分析, 以此确定所要仓储的货物的种类、规格、数量和仓储时间等。订单处理是仓库组织、调度的前提和依据, 是其他各项作业的基础。

2. 进货。仓库进货主要包括订货、接货、验收入库三个环节。

(1) 订货。仓库收到和汇总用户的订单以后, 首先确定仓储商品的种类和数量, 然后查询现有存货数量是否满足仓储需要。如果存货数量低于某一水平, 则必须向供应商发出订单、进行订货。仓库也可以根据需求情况提前订货, 以备发货。

(2) 接货。当供应商接到仓库或用户发出订单之后, 会根据订单的要求组织供货, 仓库则必须及时组织人力、物力接收货物, 有时还必须到站 (港) 、码头接运货物。

(3) 验收。货物到达仓库, 即由仓库负责对货物进行验收, 验收的内容包括质量、数量、包装三个方面。验收的依据主要是合同条款要求和有关质量标准。验收合格的商品即办理有关登帐、录入信息及货物入库手续, 组织货物入库。

3. 储存。

在仓库活动的运作过程中, 仓库的储存作业是为了给仓储提供货源保证, 仓库可以集整条供应链企业的需求, 集中采购, 储备一定数量商品, 享受价格上的优惠。在储存阶段主要任务是保证商品在储期间质量完好, 数量准确。

4. 分拣。

分栋作业即拣货作业人员根据客户订单要求, 从储备的货物中拣出用户所需要商品的一种活动。对于小体积多品种商品可以采取摘取式拣选, 工作人员拉着集货箱在排列整齐的仓库货架间巡回走动, 按照拣货单上的标明的品种、数量、规格挑选出用户需要的商品放入集货箱内, 再按一定方式进行分类, 或采用人工作业配合自动传输系统拣取, 也可以采取自动分拣设备拣取商品。而对大体积或大数量的商品出货, 也可以采取播种分堆的方式分拣。

5. 流通加工。仓库所进行的加工作业主要有:

初级加工活动, 如按照用户的要求下料、套裁、改制等;辅助性加工活动, 如给商品加贴条码、拴标签、简单包装等;深加工活动等, 加工作业不仅是一种增值性经济活动, 而且完善了仓库的服务功能。

6. 配装出货。

为了充分利用运输车辆的容积和载重能力, 提高运输效率, 可以将不同用户的货物组合配装在同一辆车上, 因此, 在出货之前还需组配或配装作业。有效地混载与配装, 不但能降低送货成本, 而且可以减少交通流量、改变交通拥挤状况。

三、工作流理论下仓库管理策略

1. 市场需求。

市场需求指所有的社会用户订货单、提货章或供货合同, 也包括下属子公司、下属各地区仓库的订货单。这些需求都按品种、需求日期进行统计整理成市场需求。如果没有这些预先签订好的订货单、供货合同等, 则市场需求就要靠预测来确定。

2. 库存列表。

这是指仓库的仓库里所有商品库存量的列表。仓库根据库存确定什么商品可以从仓库里提货、送多少, 什么商品需要订货进货。仓库里有的商品, 应从仓库里提货送货, 送货的数量不能超过现有的库存量:仓库里没有的商品则要立即订货进货。

3. 生产企业资源。

这是商品生产企业的可供资源。它包括可供的商品品种、生产企业的地理位置情况。生产企业资源主要为制定订货进货计划用的。

4. 订货进货计划。

进货计划是对于生产企业委托储运、委托经营的商品而言, 这些商品的所有权在生产方, 仓库只是代理经营服务, 货物没有了, 就直接到生产企业进货即可。而订货计划是针对仓库自己买断经营的商品, 所有权属仓库, 货物没了, 需要重新订货进货。对用户需求的商品, 如果届时仓库里没有库存量, 则需要向生产企业订货进货。当然订货进货也需要根据具体品种、具体供应者高设定订货进货提前期, 这由生产企业资源提供。

5. 送货计划。

这是对用户的送货计划。对于用户需求的物资, 如果仓库里有, 就要出仓库里提货送货。由于仓库与用户、下属子公司、子仓库 (统称为需求者) 都有一定路程, 所以提货送货需要有一个提前时间, 才能保证货物能够按需求者的需求时间及时送达。对于大批大量需求的需求者应实行直送, 对于小批量的需求者则应实行配送。

四、结论

工作流理论下仓库管理对策的目的是根据仓库管理预定的目标, 找到合适的方法和手段优化工作流程, 工作流理论下仓库管理对策的应用会给单位带来巨大的效益。

参考文献

[1]瞿毅:综合仓库管理方案的研究.中国高新技术企业, 2008.13

[2]贾桂珠:仓库管理在物资管理中的重要性.辽宁经济, 2008

[3]李目洪:浅谈仓库的日常管理.当代经济, 2008.02

仓库保管员的日常工作流程讲义 篇3

仓库管理人员要拥有强烈的责任感,日常工作要严格履行仓库的保管员岗位职责,仓库保管员的日常工作流程有哪些呢?为了更好地发挥仓库对物资的调配功能,在这里总结了一些老的保管经验结合实际工作流程简单为您整理如下:

做好仓库保管工作的前期条件

要做好仓管工作这就要求每一位仓管工作人员有良好的职业道德和较强的责任心和使命感;保证仓库库区的安全、整洁,消防通道的畅通和消防设施的完好;保证库区内所有保管设备、物资完好,摆放整齐利于收、发货和盘库;严格执行入库、出库管理流程,随时掌握物资数量、动态;熟练掌握物资台账、簿的建账和明细汇总的方法,利用信息技术,实现仓库管理的信息化;定期对各类物资分类、整理、检查和盘点,控制相关物资的库存量。

入库管理流程

检查入库手续。物资入库时,保管员必须凭送货单、合格证及相关的技术资料核对准确无误后方可入库,针对不合格物资或相关手续不全的物资,不能办理入库手续,禁止入库。

物资验收要求。对直接入库的物资要保证数量准确、质量完好的重要环节,坚持“按实验收”的原则,认真、细致、准确、及时做好物资验收工作。

物资验收方法主要分为数量检验和质量检验:数量检验方法有:点件查数法、过磅验收、理论重量检尺换算等;质量检验主要分为外观质量检验和内在质量检验。外观质量检验含几何尺寸的检验、形状缺陷和表面质量缺陷检查,内在质量检验是对物资的化学性能和物理性能进行检验,内在质量检验依据《采购物资必检目录》,外委有资质的专业技术检验部门检验。验收合格后填写器材到货验收记录,物资到货通知单及物资现场验收记录,做到日清月结。ERP系统收货入库流程如图1所示。

物资保管保养。物资进库要分区、分类存储,物资摆放应实行“四号定位、五五摆放”,标牌要齐全,对于不具备上述摆放条件的,要以有利于物资质量和方便盘点的原则规范摆放。

库存物资维护保养要注意以下几点:对易燃、易爆、易污染、易腐蚀的物资要隔离或单独存放,危险品、剧毒品要设专库双人双锁保管和收发。对精密、易碎及贵重物资要轻拿轻放,严禁碰撞、倒置、要防潮、防尘,要设专库专柜保管。对有存储期限的物资,要标明生产、入库日期,分期存放,先收先发,临近期限要主动向主管业务部门反映以便及时处理。对怕冻、怕潮、怕晒物资要采取保温、防潮和防晒措施,要入库保管,不得露天存放。

物资出库流程

物资出库保管员要遵循先进先出的原则,严格审查《发货通知单》是否内容齐全、清晰,印章、签字、财务手续是否齐全,确认无误后方可发料。对突发事件、节假日、夜间等特殊情况急需用料,凭部门主管领导或仓库主任书面通知单发料,并及时补办发料手续。无正式发料手续或书面通知单的,一律不准发料。保管员必须严格按照《发货通知单》所列名称、规格、数量发货,领料人要求变更数量、规格时,必须经业务人员办理变更手续,保管员无权予以变更。

物资出库,保管员必须做到“三个坚持、四不出库’的原则:三个坚持是指,坚持现场发料;坚持查库存、动料签、取料、五五点交、复核,保证准确无误;坚持先到物资先出库的原则,保证库存物资质量完好。四不出库是指,手续不全、不清不出库;数量未交接清楚不出库;质量不合格、设备附件、备件不全,严重锈蚀、变质不出库;技术资料不全不出库。

物资退库的流程:凡需要退库的物资,退料单位要填写申请退料明细表,经供应计划部门审核同意后方可办理相关手续,退料单位要保证退货物资的完好无损,否则仓库有权拒收。接收退料仓库,必须认真仔细核对实物保质保量点清后互相签字确认。

物资出库后的账务处理:账务处理必须有正式凭证,保管员要按照有关规定和管理系统业务流程,将物资收、发、存信息及时登录管理系统,使用手工帐建立器材收、发、存明细账,每月分类汇总,按月结出,与稽核对口。未经办理手续和有关部门批准,不得擅自进行账务处理。

物控员工作职责 篇4

1、在部门组长的安排下,负责各备料部门物料清点签收、品质检验及物料需求部门备料、发料、调配工作。

2、根据客人对物料要求标准,负责对物料进行检验、检验过程中出现异常,要及时上报组长。

3、根据组长安排,负责在规格时间内做好物料检验、数量清点、备料发料工作。

4、负责对签收物料及检验物料进行妥善管理,对于不良品进行分类处理,并放到指定位置,以防良、次混用。

5、妥善管理日常所用单据,并每日整理、核对无误后交于组长。

6、每日做好检验物料数量、异常问题记录,并整理后交于组长保管。

7、服从厂里规定,服从厂部决策,服从领导安排,积极配合完成任务。

物控员工作流程

1、接收各备料部门物料时,一定要核对单据显示信息与实物名称、规格、数量、颜色是否一致,双方确认后方可签单;对于数量较大,不能及时清点的,一定要给备料部门一个时间表,可做暂签单处理。

2、根据各物料属性及物料检验要求,合理公证对开裁物料、二次加工物料进行检验,并对物料进行分类放置,避免良、次混淆,发现异常,要及时上报组长。

3、每日根据生产任务指示,优先处理急需原则,积极备料,做到物料及时、正确、数量准确。

4、积极配合用料部门,特别是补料问题的处理,补料部门手续完整时,请在4小时内处理补料问题,对于加急物料,请及时沟通相关部门协商解决。并妥善保管补料单据,交于组长。

物控部工作职责 篇5

目的就是为了降低成本,提高生产效率. 工厂物控部门的主要职责有:

1、物料的分析计算及计划 >物料计划的制定。

2、物料的请购,3、存量的控制。

4、物料进度的控制。

5、呆废料的预防、控制及处理。

6、物料盘点的监管等。物控人员的职责也是也就是完成以上的内容,当然会分得更细一些;物控员的职责是: 1.物料的分析与计算。2.物料的请购。3.物料进度的跟催。4.存量控制。

5.有关部门之间事务的沟通协调。物控部经理岗位职责

1.及时、准确制定备货及物料需求计划、协调相关部门,满足销售、客服出货需求。

2.审核仓库的出入库单据,确保公司库存物品的胀、物、卡一致; 3.规范公司物流ERP的实物流程。

4.制定安全库存,定期组织清理仓库呆滞物料;

5.协助总经理提升公司物控方面的管理水平;请购方式与存量基准的设定 6.生产用料的请购与余料转用。7.进料异常与生产管理采购协调处理。

8.定期召开物控部例会,布置任务,及时指导协调工作,处理部门员工工作中遇到的困难和问题。

9.整理、汇总部门考核数据,定期报送人力资源部; 10.完成上级领导交办的其他工作。采购部主管岗位职责

1、在物控部经理的领导下,根据和产或工程进展,具体编各种、季度、月度的采购供应计划和用款计划,在批准后协助落实执行。

2、根据审核批准的每月原辅材料供应清单和用款计划,与财务部及时协调,确保采购购用款。

3、定期了解原辅材料库存情况,以及和产和销售情况;适时提出或修改下期采购计划,避免进料积压或进料短缺的现象。

4、负责采购物资原妈发票、收料凭证、质检证明及付款结算单据等整理登记入帐工作,进行统计和核查,发现问题及时上报。

5、及时与采购员、保管员核对到达、在途物料的价格、数量、总价,不断清理应付、应退和预付款项目,每月结清进、出、存明细帐,做好统计报表。

6、具体了解、收集和产资料市场的供求状况、价格走向及消耗定额等信息,考察公司物料损耗水平,提出改进采购建议。

7、督促和配合保管员定期对物料仓库盘点清查,发现帐、物、卡不符时,找出原因予以调帐或上报处理。

8、具体进行采购、物资的资料、帐册、报表的收集、整理和归档工作,及进编制相关的统计报表,以及利用计算机管理采购与物资工作。

9、完成物控部经理临时交办的其他任务。仓库主管岗位职责

1.负责原料、辅料的外包装检验及数量核对工作,组织*车库工,搬运整齐码放指定位置,填写货物卡;

2.负责产品的外包装、型号、批号检验及数量核对工作,组织搬运工,搬运整齐码放指定位置,填写货物卡;

3.负责办理一切物料出、入、退库手续; 4.负责仓库一切物料和产品的台帐登记工作;

5.负责仓库一切物料和产品的电子版每日库存共享工作;

6.负责仓库一切物料和产品的外表清洁、整齐码放、储存和盘点工作; 7.负责产品、原料、辅料的控制和发放工作,及时填写货物卡; 8.完成物控部经理临时交办的其他任务。搬运队长岗位职责

1.了解职工的思想状况、业务水平和工作作风,抓好服务质量和服务意识教育,组织落实本队职工日常政治学习和业务学习,做好职工的思想稳定工作。

2.合理安排装卸搬运作业计划,组织协调做好计划的实施。3.合理确定本队所属岗位的职责及人员调配,明确岗位业务分工。

4.明确本队各项业务的工作程序、落实有关标准和管理制度,并监督指导实施。5.跟班作业,掌握本队人员的安全生产状况和规章制度的落实情况,发现问题及时指导改进。

6.协调自理本队业务工作上与其他科室及有关部门的配合与协作,解决工作中发生的矛盾和纠纷,保证本队工作顺利进行。

7.协助部门领导做好本队的考评工作。

8.认真填写值班日记,检查落实行车记录,将待办事项交接清楚。9.完成领导交办的其他工作。

要目的就是为了降低成本,提高生产效率. 工厂物控部门的主要职责有:

1、物料的分析计算及计划 >物料计划的制定。

2、物料的请购,3、存量的控制。

4、物料进度的控制。

5、呆废料的预防、控制及处理。

6、物料盘点的监管等。物控人员的职责也是也就是完成以上的内容,当然会分得更细一些;物控员的职责是:1.物料的分析与计算。

2.物料的请购。3.物料进度的跟催。4.存量控制。

5.有关部门之间事务的沟通协调。物控部经理岗位职责

1.及时、准确制定备货及物料需求计划、协调相关部门,满足销售、客服出货需求。

2.审核仓库的出入库单据,确保公司库存物品的胀、物、卡一致; 3.规范公司物流ERP的实物流程。

4.制定安全库存,定期组织清理仓库呆滞物料;

5.协助总经理提升公司物控方面的管理水平;请购方式与存量基准的设定 6.生产用料的请购与余料转用。7.进料异常与生产管理采购协调处理。

8.定期召开物控部例会,布置任务,及时指导协调工作,处理部门员工工作中遇到的困难和问题。

9.整理、汇总部门考核数据,定期报送人力资源部; 10.完成上级领导交办的其他工作。采购部主管岗位职责

1、在物控部经理的领导下,根据和产或工程进展,具体编各种、季度、月度的采购供应计划和用款计划,在批准后协助落实执行。

2、根据审核批准的每月原辅材料供应清单和用款计划,与财务部及时协调,确保采购购用款。

3、定期了解原辅材料库存情况,以及和产和销售情况;适时提出或修改下期采购计划,避免进料积压或进料短缺的现象。

4、负责采购物资原妈发票、收料凭证、质检证明及付款结算单据等整理登记入帐工作,进行统计和核查,发现问题及时上报。

5、及时与采购员、保管员核对到达、在途物料的价格、数量、总价,不断清理应付、应退和预付款项目,每月结清进、出、存明细帐,做好统计报表。

6、具体了解、收集和产资料市场的供求状况、价格走向及消耗定额等信息,考察公司物料损耗水平,提出改进采购建议。

7、督促和配合保管员定期对物料仓库盘点清查,发现帐、物、卡不符时,找出原因予以调帐或上报处理。

8、具体进行采购、物资的资料、帐册、报表的收集、整理和归档工作,及进编制相关的统计报表,以及利用计算机管理采购与物资工作。

9、完成物控部经理临时交办的其他任务。仓库主管岗位职责

1.负责原料、辅料的外包装检验及数量核对工作,组织*车库工,搬运整齐码放指定位置,填写货物卡;

2.负责产品的外包装、型号、批号检验及数量核对工作,组织搬运工,搬运整齐码放指定位置,填写货物卡;

3.负责办理一切物料出、入、退库手续; 4.负责仓库一切物料和产品的台帐登记工作;

5.负责仓库一切物料和产品的电子版每日库存共享工作;

6.负责仓库一切物料和产品的外表清洁、整齐码放、储存和盘点工作; 7.负责产品、原料、辅料的控制和发放工作,及时填写货物卡; 8.完成物控部经理临时交办的其他任务。搬运队长岗位职责

1.了解职工的思想状况、业务水平和工作作风,抓好服务质量和服务意识教育,组织落实本队职工日常政治学习和业务学习,做好职工的思想稳定工作。

2.合理安排装卸搬运作业计划,组织协调做好计划的实施。3.合理确定本队所属岗位的职责及人员调配,明确岗位业务分工。

4.明确本队各项业务的工作程序、落实有关标准和管理制度,并监督指导实施。5.跟班作业,掌握本队人员的安全生产状况和规章制度的落实情况,发现问题及时指导改进。

6.协调自理本队业务工作上与其他科室及有关部门的配合与协作,解决工作中发生的矛盾和纠纷,保证本队工作顺利进行。

7.协助部门领导做好本队的考评工作。

物控MC文员工作职责 篇6

1.物料进度报表等相关资料的统计。

2.有关文件资料整理、归档与分发。

3.有关数据的输人。

4.有关文件的打印与资料的传递等。

物控文员介绍:

PMC代表Product Material Control的缩写形式,意思为生产及物料控制。

通常它分为两个部分:

PC:生产控制或生产管制(台、日资公司俗称生管)。主要职能是生产的计划与生产的进度控制。

MC:物料控制(俗称物控),主要职能是物料计划、请购、物料调度、物料的控制(坏料控制和正 常进出用料控制)等。

● 产能分析主要针对哪几个方面? 产能的分析主要针对以下几个方面:

1、做何种机型以及此机型的制造流程。

2、制程中使用的机器设备(设备负荷能力)。

3、产品的总标准时间,每个制程的标准时间(人力负荷能力)。

4、材料的准备前置时间。

5、生产线及仓库所需要的场所大小(场地负荷能力)。

● 生产排期应注意什么原则?

生产计划排程的安排应注意以下原则:

1、交货期先后原则:交期越短,交货时间越紧急,越应安排在最早时间生产。

2、客户分类原则:客户有重点客户,一般客户之分,越重点的客户,其排程应越受到重视。如有 的公司根据销售额按ABC法对客户进行分类,A类客户应受到最优先的待遇,B类次之。C类更次。

3、产能平衡原则:各生产线生产应顺畅,半成品生产线与成品生产线的生产速度应相同,机器负 荷应考虑,不能产生生产瓶颈,出现停线待料事件。

4、工艺流程原则:工序越多的产品,制造时间愈长,应重点予以关注。

● PMC管理做得差,容易造成什么现象?

PMC的计划能力、控制能力及沟通协调能力做得差,容易造成以下现象:

1、经常性的停工待料:因为生产无计划或物料无计划,造成物料进度经常跟不上,以致经常性的 停工待料

2、生产上的顿饱来一顿饥:因为经常停工待料,等到一来物料,交期自然变短,生产时间不足,只有加班加点赶货,结果有时饿死,有时撑死。

3、物料计划的不准或物料控制的不良,半成品或原材料不能衔接上,该来的不来,不该来的一大 堆,造成货仓大量堆积材料和半成品,生产自然不顺畅。

4、生产计划表仅起形式上的作用,生产计划与实际生产脱节,计划是一套,生产又是一套,生产 计划根本不起作用,徒具形式。

5、对销售预测不准或对产能分析不准,不能针对产能进行合理安排,没有空留余地,生产计划的 机动性不强,生产计划变更频繁,紧急订单一多,生产计划的执行就成了泡影。

6、计划、生产及物料进度协调不强,影响交货期,降低公司声誉。

7、生产经常紊乱,品质跟着失控,造成经常性的返工,经常返工又影响生产计划的执行,造成恶性循环.PMC的流程从大的来看就是公司的运作流程:从销售得到订单开始,PMC就该接手并参与到后面所有的工作中,新产品的关务的合同备案(如无外销则无需海关备案),然后是根据需求得到MRP(物料需求计划),指导采购下单并根据料况及时调整生产,因为料况的变化是比较大的,所以工作的重点肯定是根据料况来调整生产。成品OK后还得关注是否及时入库,然后出货扣账,再就是关务出货是否会有问题...直到物品到达客户手中你还得考虑到中途是否产生损坏(RMA),当然了,做到后面就是细节问题了.其实,快速建立一个具有可执行性的PMS分四个环节做就可以了。

第一个环节:

确定公司的产品方向和产品策略 这个环节是一个PMS中的基础,也可以说是一个公司的市场基础,盈利基础,一个公司必然有一个非常明确产品方向和产品策略,这个方向和策略只是一个框架性的东西,只是画了一个圈子,告诉公司的员工我们要做什么东西,那些是重点产品的,那些二线产品,如何做这些产品,比如说一个软件公司,其产品方向就是个人用户,一共有四条产品线,分别是娱乐,办公,网络应用和系统安全,娱乐和办公是一线产品,其产品策略根据公司的实际情况,是以自研为主,市场零售为主渠道,还是以合作为主,OEM为主渠道,是做领头羊还是做追随者,这就是一个原则性的东西,公司任何人都得了解,如果是面向个人用户的系统安全软件,以OEM为主,那么这个公司即使有实力开发企业级的系统安全软件,那么他也不会去做的,因为不能违反公司的产品方向,违反了方向,就会造成公司资源的紧张,尤其对于产品管理中心来说,这更是大忌,一个PM如果连自己公司的产品方向都不清楚,你能想象他可能会和公司呼吸保持一致吗? 联盟中有兄弟就说的好:PM一定要把握公司的想法,公司想要什么,你就做什么,而不是你做了什么,就希望公司接受什么。因此,在你建立PMS的时候,首先要把这个明确了,形成一个文档,每当一个PM入职的时候,把这个文档交给他看,这个公司不是人力资源部来做的,而是你来做的,只有你是最了解公司产品方向的人,其实这个文档非常简单,我建议用一个矩形图来描述就可以了,上面说明公司的产品线有那些,所有产品的技术核心是什么,在技术核心上已经存在有那些产品应用,每个产品应用都处于那个阶段(上升还是下降,其实就是一个简单的产品生命周期线)等可以让新人一幕了然的信息,这样,新人进来后就不会每天追着你问:我们应该做什么产品;做这个产品合适吗?等这些基础的问题,如果是一个比较有经验的PM,他在看到这份文档之后,可以立即找到自己的定位和工作方向,无需再多费口舌。总结一下:这个环节就是明确PMC能做什么。

第二个环节:

确定公司的内外资源 如果说第一个环节确定了PMC能做什么,那么这个环节要解决的问题就是能做到什么程度,也就是你做出来的产品能做成什么样子。公司的内外资源主要包括技术资源,市场资源,物质资源(包括设备和可投入资金),外部资源则包括合作伙伴,公共关系(含政府),口碑,影响力等。其实起主要作用的还是内部资源,先说一下技术资源。技术资源简单的说就是研发和生产部门能把你设计出来的产品做到那种程度,举个不太恰当的例子,同样是一部汽车,都是四个轮子一个发动机,国产和进口车的质量却是千差万别,难道是我们的产品设计人员笨,设计不出好的汽车来,不是的,是因为我们的生产部门的制造工艺比不上国外的企业,这点在国内好多产品中都可以看到,东西是能做出来,但是品质就不是一个档次的了。市场资源就是要明确我们目标用户有那些,市场范围有多大,每个市场中我们的份额有多少,一般采用什么样的形式进入市场等等,明确了这个资源,在你前期做一些市场调研的时候就会有针对性,而不会出现把羽绒服考虑卖到广东的笑话,在后期的时候就会有助于PM制定合适的市场销售策略,更好的协助销售部门完成产品的上市。物质资源就是要明确公司现有那些设备是可用的,公司愿意为那些产品多投入,那些产品少投入或者不投入,这就决定了PM在工作的时候必须有侧重,不要为一个公司不重视的产品而渴望获得公司大部份的资源,除非你有回天之力,否则还是慎重为好,避免出现自己把自己折到里面的窘境。对于外部资源,就不一一说了,因为外部资源可变因素太多,不是PM一个人可以把握好的,就只说一下外部资源中的合作伙伴吧。曾经在设计一款软件的时候,有一个功能出了一些问题,其实这个功能很简单,开发人员不是不能做,而是一旦自己去开发的话,会直接影响到产品的发布周期,这个时候就需要考虑借助外力来实现了,因此我们找到了一个做共享软件的个人,正好他已经有一个成型的东西了,为什么要找个人呢,因为个人比公司来说,更容易谈成,并且价格也不会很高,记得当时只花了2000块钱就把这个功能搞定了。举这个例子就是说明PM手里一定要有一些外部的资源,尤其是合作伙伴的资源,行业不限,积累足够多的外部资源,可以使你在工作中更得心应手,不过应该注意一点的是:产品的核心一定要在自己手里,并且合作要考虑成本,还要采用合适的合作方式。一旦有足够的合作伙伴,从某种意义上来说,是把自己产品的外延大大地延伸了,这对于自己来说,是非常有好处的。总结一下:这个环节就是明确PMC能把产品做成什么

第三个环节:

确定上下游部门的工作联系 这个环节是PMS中得必要手段,因为只要是体系,就必然和各种各样的人和部门打交道,尤其对于PMC和PM而言,更是重要,因为PM工作的本质实际就是运用公司内外的各种资源为产品服务,缺乏了关系的产品部门是根本不可能做出任何产品来的,但是因为PMC要涉及的部门基本都是同级的或者是还要高一级的,因此确定上下游部门的工作联系一定要明确成文,经过公司高层的认可,并且和其它部门形成共识,主要的作用是要让其它部门能够意识到PMC是干什么的,有什么作用,能为其它部门提供什么,同时又需要其它部门为PMC提供什么,这个过程是比较繁琐的,可以通过培训,私聊等各种方式灌输PMC的思想,实在不行,就必须靠高层的强制力来推动了,但是前提一定是高层铁了心要建立自己的PMS,否则一旦涉及到部门利益之争,高层肯定会牺牲新建部门的利益。其实这个环节的核心就是确定PMC的入口和出口分别是什么部门,相应的接口规范是什么,一旦出现问题,应该如何解决的问题。部门之间肯定是存在利益之争的,公司为了保证各部门能在共同利益的前提下协同工作,就必须制定一个顾大兼小的契约,这就是部门规范和接口规范,这对于PMC来说,就更显的重要,因为PMC是公司内唯一会和公司所有部门打交道的部门,包括市场,销售,研发,生产,甚至财务等,如果没有一个明确的上下游部门的工作规范,PMC是很难开展工作的。总结一下:这个环节就是明确PMC的工作得依靠那些部门来做 第四个环节:确定部门内部的规范和流程(保证)这个环节是PMS中的保证,也是整个PMS中的核心建设方向,也是唯一的可以完全由PMC自己控制的环节。

1.接单与交期确认:从销售部门或下游生管处获取订单等工作指令。并评审与确认订单交期。

2.制定总生产计划:根据客人订单交期,结合制成品库存计划和生产线平衡原则,制定生产跟单的主生产计划(MPS)。

3.生产资源准备:结合库存现状和库存管制计划,责成物控(MC)制定物料需求计划(MRP)与采购进料计划;跟进机器设备的产能负荷空余,并确保机器设备的正常运行;跟进人力工时空余,必要时跨部门调度人力。

4.生产排程:按交期、订单性质和大小、顾客习性和重要性、产品生产周期、规模生产、工序瓶颈、设备技术瓶颈等要素原则制定部门的生产计划排程和每日制造指令。

5.生产进度跟进:通过车间生产进度看板、《生产日报表》、现场巡视沟通等方式跟进生产进度,以便生产计划落实推行,并及时修正不符实际的计划安排。

6.处理异常:及时发现并解决异常,必要时寻求上级的支援解决。

仓库物控工作总结 篇7

关键词:ETL,数据仓库,依赖关系,有向无环图,并发控制

数据仓库要对企业的决策制定提供可靠的、有效的数据的前提就是对数据进行抽取、转化、加载 (extract, transform, load, ETL) 。客户或者决策者通常只接触如联机事务处理 (on-line analytical processing, OLAP) 、查询、报表等用于前端的展示和分析功能, 但这些数据的可靠性、有效性必须依赖于ETL过程正确的执行, 同时如何高效的执行也是一个重点问题。本文主要针对ETL的执行顺序和依赖关系设计和实现了一种混合调度系统, 并在此基础上实现了一个可以应用于实际生成环境的工作流系统。

1 相关研究

1.1 数据仓库

数据仓库是一个面向主题的、集成的、非易失性的且随时间变化的数据集合, 为海量存储和高层决策分析提供的一种解决方法。它抽取和净化了来自不同应用系统的数据, 从事物发展和历史的角度进行组织和存储, 并通过对这种集成化数据的分析和挖掘, 为最终用户提供综合性和分析性的深层次信息, 是决策支持系统的基础。

数据仓库作为一种新技术, 从异构和分布式数据源中收集数据, 这些数据首先被聚合, 然后按照OLAP所定义的组织标准进行定制。数据仓库的结构能够通过一种分层存储的方式加以定义。这种方式涉及到的存储形式包括从底层的数据源到高度的聚合数据。在这两种存储形式之间, 按照OLAP程序的要求, 对操作型数据的存储, 操作型数据是以单一和干净的方式来表示数据源中的数据。企业级数据仓库 (CDW) 则包含高度聚合的数据, 并且被组织成多维表的形式。从每个数据源中抽取的数据可以存储在中间数据容器中。

数据仓库更新是一个非常重要的过程, 它决定了数据采集和数据聚合的实效性。首先, 与数据仓库系统在合理的时间内将数据从数据源转换到数据集合的能力有关。其次, 与数据仓库对数据源中信息发生变化的敏感程度有关。数据更新的目标是反映数据源的变化, 并将这些变化导入到数据仓库中。这个导入和转换行为可以通过一系列独立的活动 (抽取、清洗、集成等) 来完成。按照用户对数据更新过程的语义以及他对所获取的数据的要求, 这些活动可以以不同的方式进行组织。同时, 这些活动的顺序和它们执行的上下文环境也定义了语义并影响质量。

1.2 ETL工具

ETL中三个字母分别代表的是Extract、Transform、Load, 即抽取、转换、加载。

数据抽取, 从源数据源系统抽取目的数据源系统需要的数据;数据转换, 将从源数据源获取的数据按照业务需求, 转换成目的数据源要求的形式, 并对错误、不一致的数据进行清洗和加工;数据加载, 将转换后的数据装载到目的数据源。

ETL工具负责将分散的、异构数据源中的数据如关系数据、平面数据文件等抽取到临时中间层后进行清洗、转换、集成, 最后加载到数据仓库或数据集合中, 成为联机分析处理、数据挖掘的基础。现在也越来越多地将ETL应用于一般信息系统中数据的迁移、交换和同步。

目前, ETL工具的典型代表有:Informatica、Datastage、OWB、微软DTS、Beeload、Kettle。开源的工具有eclipse的etl插件、Cloveretl。这些工具都具有自身的局限性, 或者无法支持分布式的数据仓库, 或者无法支持异构数据源的ETL操作。

1.3 工作流系统

工作流是将一组任务组织起来以完成某个经营过程, 它定义了任务的触发顺序和触发条件, 每个任务可以由一个或多个软件系统完成, 也可以由一个或者一组人完成, 还可以有一个或者多个人与软件系统协作完成。工作流系统是一套支持业务定义和自动运转工作流的系统, 它会将日常工作的业务处理或协同工作按预先定义好的规则和过程进行流动, 并且这一过程能被跟踪和监控。

在数据仓库中, 为了保证数据仓库中的数据的时效性, 将一系列相互衔接的、自动进行的任务组合成为一个有效的工作流单元中, 从而完成更大型的任务。

为了保证现有数据仓库的负载均衡和灾难恢复等机制, 需要分布式的任务调度系统。这些任务主要是异步执行的, 这意味着对于大多数工作流动作触发的计算或处理任务的类型来说, 在工作流操作转换到工作流的下一个节点之前都需要等待, 直到计算或处理任务结束了之后才能够继续。任务调度系统通过回调和轮询来检测计算或处理任务是否完成。

2 任务调度系统

本文实现的工作流系统采用了三种任务调度策略, 分别是基于crontab的任务调度、基于依赖关系的任务调度和两者混合的任务调度。

工作流系统的核心是任务调度系统, 任务调度系统的工作效率将直接影响整套工作流系统的效率。

任务调度系统就是在满足资源系统约束调节和并行应用程序的基础上的一个可以有效管理应用程序如何调用这些资源和各个程序的执行顺序, 并使得整个系统性能达到最优或接近最优。

本文的工作流系统中用到的任务调度系统是从两个不同的因素来考虑任务的调用顺序, 一种是以时间为基准的基于crontab的任务调度, 另一种是基于依赖关系的任务调度。本文的工作流系统还将两种任务调度方式结合在一起的混合调度。

2.1 基于crontab的任务调度

有任务需要定期处理的时候, crontab无疑是最佳的选择。crontab是一个linux下的定时执行工具, 可以在无需人工干预的情况下运行作业。基于crontab的任务调度属于静态调度, 就是在固定的时间节点, 如每天、每月、每年按照一定的频率执行ETL任务。这种任务调度主要用于对数据进行最初的清洗, 数据迁移和一些简单的数据处理。

2.2 基于依赖关系的任务调度

基于依赖关系的任务调度属于动态调度, 是根据要执行任务的依赖关系自动生成的任务执行序列。

在一个ETL工作中通常包含多个的ETL任务, 如果其中的ETL任务彼此间没有时间的顺序则可以同时并行执行。但一些ETL任务都有其所依赖的前继任务, 在前继任务没有完成之前该任务是不能被执行的, 如果强制先执行后面的任务, 将会得到错误的数据。如何判断两个流程是否具有依赖关系, 可以通过下图来判定。即当任务B需要任务A的输出数据, 任务C需要任务B的输出数据时, 可以得到任务C是依赖于任务A的。

根据这一特性我们编写了基于依赖关系的任务调度算法, 该算法就是是根据ETL任务之间的依赖关系来制定这些任务的执行顺序。下图是该算法的基本流程。

首先需要获取要执行的ETL任务信息, 从而获取任务之间的依赖关系, 每个任务都是拓扑图中的一个节点, 根据之前得到的依赖关系生成任务的关系拓扑图, 然后用Trajan算法判断该拓扑图是否有环, 因为ETL任务关系拓扑图是不允许出现环结构的, 如若出现环将去掉, 然后生成任务执行顺序。

2.3 基于crontab和依赖关系的混合任务调度算法

将基于crontab的时间顺序调度算法和基于依赖关系的调度算法进行融合, 从而可以提高执行效率, 缩短执行周期。

所有流程的节点可以生成一个巨大的有向图。这个有向图是一个森林, 它由多个有向树组成。由于任意两个有向树之间的流程没有彼此的依赖关系, 因此可以独立执行。根据有向树的个数设置多个线程并行开始任务, 每个线程的执行起始时间通过crontab时间设定控制, 单个有向树中的流程执行顺序按照其彼此依赖关系执行。

3 分布式工作流系统设计与实现

3.1 整体结构

分布式工作流系统包括任务设计和生成模块、任务注册模块、依赖关系解析模块、任务执行模块、任务管理模块和任务监控模块。

它的主要工作原理如下:首先根据业务需要, 编写相应的ETL流程或者shell脚本;将新的ETL流程在系统中进行注册;解析新的ETL流程, 根据它的上流和下流流程, 生成新的流程的依赖关系模型;根据流程的依赖关系和cron文件, 生成新的执行顺序;根据流程的优先级执行所有的流程文件, 并在执行过程中监控是否出现错误, 如果出错及时通知管理员, 停止工作流系统, 并从错误的地方重新执行整个工作流程序。

3.2 任务设计和生成模块

根据业务需求设计相应的任务内容, 并编写相应的ETL流程或者shell脚本。

ETL流程或者shell脚本都是将一个或者多个数据源作为输入, 经过数据清洗、转化和集成等操作, 最终生成一个数据结果表作为ETL流程或者shell脚本的输出。

所有的任务都使用ETL工具进行执行。

3.3 任务注册模块

编写完成ETL流程后, 将新的ETL流程在系统中进行注册。主要包括执行的方式、执行的权限以及运行的参数等。注册完毕后可以查看“任务的依赖关系图”。

执行的方式包括基于crontab的时间顺序, 这里主要是设置具体的执行时间;如果是基于依赖关系, 则需要进行依赖关系的解析, 并将其放入数据库表etl_relation中。

执行的权限可以进行设置, 例如管理员、开发人员、行政人员等。这里设置权限主要是方便任务的管理, 从而可以优先执行权限高的任务, 保证企业各项工作的协调一致的完成。

如果任务不再需要, 可以将其下线;下线后, 必须将其从依赖关系进行删除。

3.4 依赖关系模块

依赖关系模块是基于依赖关系的任务调度的核心内容, 主要完成将注册模块得到的ETL任务信息转化为依赖关系拓扑图, 并保证该拓扑图为有向无环图。

该模块主要分为三个部分:

(1) 从etl_taskinfo里取出任务的信息, 然后通过这些信息找出任务之间的依赖关系, 并将依赖关系存入表etl_relation中;

(2) 根据依赖关系生成对应的任务拓扑排序图;

(3) 测试拓扑图是否为有环, 若果有环则去掉拓扑图中的环。

解除环的主要流程如下图所示:

3.5 任务执行模块

通过用户手动输入启动或者crontab促发启动任务执行模块, 根据得到的要执行ETL任务的信息决定执行策略。Crontab促发的任务和一些直接调用数据库表etl_tasks (存储ETL任务, 即任务执行顺序) 中存在的任务将直接按现有的顺序执行, 若是新任务 (etl_tasks里不存在的) 则生成任务执行顺序再执行, 生成任务执行顺序如下图所示:

根据生成的拓扑结果和时间顺序执行相应的任务。为了提高执行的效率, 缩短执行时间, 可以将没有依赖关系的任务放在不同的线程上进行执行。

如果是crontab, 则严格按照时间进行任务的调度和执行。

如果是基于依赖关系, 则根据拓扑排序顺序执行, 根据过回调和轮询来检测计算或处理任务是否完成。

3.6 任务管理模块

不同的用户所提交的任务需要进行权限控制和管理。这是一种公平的资源分配策略, 首先在资源足够的情况下满足每个资源池的最小共享资源, 若不够就将所有的资源分配给共享资源, 再根据优先级加权将剩下的资源分配给各个资源池。

在每个资源池中的具体分配策略是, 首先将拥有的资源按照作业的权重分配给各个作业, 然后将剩下的资源按作业的权重和缺额分配给仍需资源的作业, 如果还有资源剩余, 则将这些资源共享给其他的资源池。

(1) 对用户提交任务的优先级进行管理, 在资源不够时, 可由高优先级任务抢占低优先级任务。

(2) 对每一个任务队列进行资源控制, 在资源不够时, 保证高优先级任务得到其最低资源保障, 确保相应任务可以执行限制一些低级用户能使用的资源量。

3.7 任务监控模块

在任务执行过程中所有任务将被实时监控, 每个任务有且仅有一个实时状态。单个任务的状态有:未执行、执行中、执行完毕和异常。

如果某个流程执行过程中出现错误, 系统可以监控到发生错误的流程, 并通过邮件的方式通知启动任务的人。邮件中有该ETL工作的整体内容, 包括任务名称, 开始时间, 异常时间, 已完成任务, 异常任务和未完全任务等。下图是执行ETL工作时发出的一封异常邮件。

当出现异常的时候, 调度系统会停止当前执行的ETL工作, 等待下次启动, 在下次启动时系统会从之前出错的任务开始重新执行并将未完成的任务执行完毕, 从而保证数据的正确性。

4 实验分析

在测试实验中, 采用3台服务器搭建的hadoop分布式环境, 在host服务器上安装mysql和hive数据库。数据仓库原型为一互联网电商的数据, 有商家信息partner_map, 用户信息user_map, 商品信息goods_map, 订单信息order_detail, 财务信息pearl等数据表。

每天有约1w的新订单产生, 在每天的0点执行一系列ETL工作, 将一天收集的数据进行初步的处理供进一步的数据挖掘作业使用, 包括分别以商家和平台所有为维度的每日订单量, 每日支付订单量, 每日支付订单总价, 每日消费人数, 每日销售商品总数, 每日有销售的宝贝数等。该ETL工作由12个ETL任务组成, 分pc端和mob端两个平台的ETL任务并行执行, 全部执行完毕需要约50分钟。

对于比较单一的ETL任务采用crontab定时执行, 如对每日订单量, 交易金额等的统计, 此类单一任务执行策略是每日或每小时启动ETL工具执行任务。针对比较复杂, 需要中间数据的任务, 这类任务通常包含不止一个ETL任务, 此类任务的执行策略将是基于任务依赖关系, 如计算每次推广策略A, B所带来的交易额, 首先需要统计每日的订单量, 然后从这些订单量中找到属于策略A、B的订单集合, 最后得到集合中的订单的交易总额。以下是每日执行的ETL任务所得到的部分结果展现:

从图中数据与真实的数据对比错误率在1%以下, 基本能保证数据仓库中数据的正确性。

5 结语

ETL工作流系统是一个复杂的系统, 其中有许多或依赖或独立的任务需要执行, 本文就是针对这些ETL任务的执行进行统一管理而设计实现的。该系统已经实现了任务的注册、管理、执行、监控等功能, 能满足大规模的ETL任务的执行需求, 达到数据仓库所必须的实时性、可扩展性、易维护等要求。

文中的依赖关系算法可能并不会提供最优的调度序列, 并且对错误的处理目前只是进行简单的停止处理, 没有完善的解决错误的方案和措施;此外, 为了使系统更加的人性化和流程化, 后期需要进行图形化界面方面的设计。

参考文献

[1]R.Kimbal, L.Reeves, M.Ross, W.Thornthwaite.The Data Warehouse Lifecycle Toolkit:Expert Methods for Designing, Developing, and Deploying Data Warehouse[J].John Wiley&Sons, New York, USA.1998:78-84.

[2]Ze Hai, Jigui Sun.Common Cube-based Conceptual Modeling of ETL Processes[J].2005 Int’l Conf.Control and Automation (ICCA2005) , 2005.

[3]范玉顺.工作流管理技术基础[M].清华大学出版社, 2001.

[4]陈廷伟, 张斌, 郝宪文.网格依赖任务调度系统的设计与实现[J].小型微型计算机系统Vol.29No.3 2008.

[5]P.Vassiliadis, A.Simitsis, M.Terrovitis, S.Skiadopoulos.Blueprints and Measures for ETL Workflows[J].Proc.24th Int’l Conf.Conceptual Modeling, LNCS3716, pp.385-400, 2005.

[6]Alkis Simitsis.Mapping Conceptual to Logical Models for ETL Processes[J].Proc.8thACMIn t’l Workshop Data Warehousing and OLAP, pp.67-76, 2005.

[7]张成.基于构件库/工作流的可视化软件开发[J].计算机工程与应用, 2008, 44 (10) :82-87.

[8]胡逢彬.数据ETL过程中的数据质量控制[J].信息技术, 2006, 23 (4) :19-21.

上一篇:三年级下册第二单元同步作文:未来家乡的环境下一篇:银行征信体系