Q群章程

Q群章程（精选6篇）

篇1：Q群章程

广东金融创新群英会自律章程

（2014年1月1日试行）

目的1、建立全新、开放式的金融创新领域交流平台，努力汇聚国内（目前暂以广东为主）从事投融资、风险控制、革新前沿的专业人才，致力打造最专业的投融资讨论群，形成真正的“金融创新群英会”。

2、集思广益，通过专业讨论平台帮助群友解决日常工作中遇到的投融资难题、风险控制、项目操作、经济法规、企业管理等需求，共同丰富金融知识分享库；

3、广结人脉，搭建群友私人交流对接通道，建立金融领域人脉生态圈。

组织及宗旨

本群英会为自由松散型网络虚拟组织，不属行业协会，亦非社团组织；群主、管理员、群友发言仅代表其个人观点供参考，群友自行承担采纳建议的后果；本群≤500群友，属于小范围交流圈，转帖者自行承担转帖散播≥500的法律责任。

服务宗旨：为群友创造价值，为行业创造价值，为社会创造价值。

群主服务职责：

（1）明确本群服务目标、原则及发展方向，推动本群机制及文化建设；

（2）发展及撤销本群管理员，根据群友建议组织管理员开展各项服务工作；

（3）组织本群重要事项、重要决策、重要活动、重要议题等事宜；

（4）接受群友的监督及意见，积极改进，提高本群质量。

管理员服务职责：

（1）参与制定、宣贯、实施本群管理制度；

（2）群成员的管理；

（3）群讨论内容的日常管理与监督，引导群友讨论话题与方向；

（4）组织本群重要事项、重要决策、重要活动、重要议题等事宜；

（5）接收群友的监督及意见，积极改进，提高本群质量。

管理要求

（1）欢迎群友实名进群，每位群友加入本群后必须至少按照“职业/行业+称呼”格式修

改群名片，经管理员提醒3天后仍不修改群名片的，直接踢出，踢出后仍可申请加入本群，但必须立即修改群名片。

（2）本群禁止发广告、宣传、恶意言论、辱骂词语、不文明内容等，一经发现直接踢出。

若因QQ中毒或被盗原因违规被踢出的，可再次申请加入，但必须说明原因；

（3）本群提倡讨论规避金融风险、投融资风险控制等相关话题，不提倡过多讨论闲杂话

题，若经管理员发现群成员长期闲聊，可给予警告，警告后仍不改进的，经管理员集体讨论后清退；

（4）本群提倡群友们广泛介绍投融资领域资深人士加入，提高本群质量。

（5）欢迎群友们推荐金融、项目、风控等相关好资料，可放在群共享里面。本群提倡共

享文化，请大家积极分享。

（6）本群每季度进行一次清理，对占用群资源且长期不在线、不发言的潜水员将进行清退。

篇2：Q群章程

我比想象中勇敢

挥不去的执着

巴黎小裁缝

花楼雨谢

- 滥好人。 小样

我爱你不只是说说而已

已收到你的爱

y佝|信A誓eg

听几米唱歌

拼未来!

快喊我爷!

ㄨ_z摆摊

好好学习i

魅娘i

‖{吖~!*

努力,努力,不要放弃

-无可挑剔的爱情

百无一用是痴情

孤独成瘾

化作尘埃,随风消散

个性群网名

女子o情便是王

网名正在编辑中……

n樱花 祭

凭栏浅忆君

心o所依°

。天晴

素兮娆眉tr

△删掉了的回忆

你不会哭i

分开树的叶

谁念西风独自凉

痛定思痛。

和你共谱海枯石烂的恋歌ζ

命 h己造

哀家狠单纯

Ldū烫sんоυ

你的瞳孔°令我中毒匪浅

一世爱恋g三世缠绵/

路一直都在

yF

再次

┈┾☆殇●

叹一地红尘花败丶

SEND OUT (发光)

薄情少守空城

绿栗姑娘

k想要A未来

浅夏初眠

丶Sky灬丿Team丶

青桅涩甍

心瞎,

七色阳光散落出俏人涵养°

毁心控/°

个性群网名

孤独靶心

爱的保质期

一场繁华的戏t

你是我永远够不到的点

别跟哥谈成败

c誓言好假

°久伴我者必永驻我心

期待非同凡响me

勋世吴可取代

气可鼓不可泄

孤潮

手牵手我们一起走过

Renaissance

白头偕老不是说说而已

虽然孤单至少心安

你快乐吗我很快乐ゅ

卜驳哪

经典群网名

竹言墨语

放飞的风筝。

磕磕绊绊从不言分离

十里荒凉胭脂泪

未来的路只有靠自己

Prison囚心

穷不穷你别怂 -

我敢碰她内衣就敢给她嫁衣

→^Z的沛

挽手说梦话@

柔情少女ず

天长地久

KEAIDIANCOM

默笙。

谁把流搁浅

凉席 暴雨 西瓜 连衣裙

儿子我会拼命给你未来

a世界@麽vbolt

我的未来我决定

爱意延迟

。默陨

残留迩的`体温

茶花枯萎是流不染

视金钱如粪土

个性群网名

槟莘芏筏紊倒

我信爱情

回忆如烟烟如梦

在细雨中呼喊青春っ

面朝阳光

ゅ jz噔bgづ

在傻子面前卖个萌’

]__.浍}

男神塑造中i

情深似海不如沉入大海

布丁熊~嘟嘟

不气馁

再回首ヅ我心依旧

从心动到古稀

无关痛痒

带着梦想出发

坚信自已

天线宝宝

葬我心安你情

e n为 你 伏笔。

人[雯Y

旧纸张，满心慌

相依为命r

甜蜜的吻ぺ

斩不断情丝

Y__荒废的爱情°

踮起脚尖ヘ靠近幸福ソ

猫呓

为将来而努力

古城白衣少殇

青果学院连外星人都知道

不能错的决定

逝去的爱

Gossip

f未来不是梦

沙哑情话

深情是病是毒是珍惜和执着

闭上眼睛，默数伤痕

青春聆听朝阳的美好

轻浮f

大步向前跨*

经典群网名

乱了夏天蓝了海

无敌小魔女

板蓝根泡面i

多吃苦是为了，无悔!

q(￣m￣*)r

# 坚持下去

国名女神

做最好的自己

男Ren哭泣，不代表软弱

岁苍老后我们依然相爱g

去掉浮华虚夸#

遇见你用光了所有的运气

新欢只是欢

-信仰。

回忆泛滥泪水成灾。

输过败过但不曾怕过

催微不带悲伤

美兮g

妥妥的°y

学习雷锋好榜样

励志群网名

文艺群网名

哥m不但也不

拼命菇@

喝着酱油耍酒疯

爱我的人会发光i

JOSD 眼神空 GUIL 眼眶红

在美的誓言依旧是敷衍

深情必死

劣徒 ゅ

站在冰箱上的男人

o怨o悔Y

呆到自然萌≈

咽泣 °

忘记过往

阿骚：澎湃么*

笨蛋怎会懂疯子的疼

朝花夕拾

学霸养成

柚绿时光!

ら魔粉の晓涛

等V硪唯一u执念つ

是男人就活出你的高傲。

爱像哪边°

喵了个Hello Kitty

//痴情的对白

个性群网名

奔跑告别过去种种

文艺群网名

泪g湿了巴黎

随遇而安丶

总在赶路

少女情怀

我的温柔只给你

专业柴油批发配送中心,批零兼营,提供样品, 江浙沪小时免费配送

〃剩余的都是空心

素笺，留一纸情

那的时光

心中唯爱s

夙愿

过好哇塞

思念漫无止境c

帅死一条街

眼泪渲染了天

深情到溃不成军

卑恭的讨好

岁长衣衫薄

乞丐皇帝。r

Brave heart

孤狂一无所有

下雪的夜┃

低头泪倾城

草莓猫龚r

仙女下凡脸着地

野心与梦想,

老感觉有人在暗恋我

承诺

把世界给我

香水味太浓

竺痞。

白手起家命由己造

小三永远也当不了原配

毁心控/°

我不是方便面别泡我= =*

任性的女

慢慢坚强。

我就是这么了不起~

不服输的倔强

爱你的温度℃

薄凉* Armani

じ☆ve萌爱灬

久居深海溺我心

鱼有一颗心仅有七秒情

`

丑姑娘也有珍珠梦

低调做事高调做人。

小青菜的爱情

忽视那份爱--，

Hㄋ俗

我就是我!

风雨兼程

时光仍在，你却不在

有些人就是犯贱

用微笑代替つ

换个方向前进

未碛]我

Hypocrite[伪善者]

当凸遇上凹

再见之后再拖延

所消失的爱你给不起

学会坚强i

断翼の天使

就胖就任性

加油少丨Tfboys

错过变过错

学渣要逆

青春向上

抖掉在心里的尘埃

面对现实。

我叫意志力i

同甘共苦i

疯到深处自然静

只能用沉默回答

心已空ミ情却在

Z-沦陷你的深眸k

你若离去丶巴掌扇去*

柴油批发—文博燃料

喔喔奶糖

土嘎嘎^

梦里见i

我们正轻 有何不可

何必囚心于你i

M@^透嘞

一个人狠孤独。

t把曾经 谱写成童r

青花影

朕好帅 -

じ凌乱の舞步

半颗心的说

闫诘嫩踯━

励志群网名

影伴人久

学会抛开过去。

花美男。麻凯

矮穷丑挫瘦笨撸

无人共伞

蝴蝶飞飞

旁观者^

特别胸

e矍Nk

个性群网名

追风筝的人

待我柔情似水淹死你可好

篇3：Q群章程

关键词：模具制造项目群,随机动态规划,马尔可夫链,并行启发式仿真,多步Q学习

0 引言

模具制造的特征是面向资源的单件订货型生产、多项目并行、多企业协作, 在管理上存在多企业、多项目共享关键资源的协同管理典型需求。在模具项目执行过程中存在任务工期、费用定额不准、项目报酬随完工时间变化等不确定因素, 而且常会出现模具返修、紧急插单、工程变更等突发事件。因多个项目共享着企业的关键资源, 一个项目中的不确定因素或突发事件势必严重影响到其他项目的执行进度, 结果导致项目在执行过程中, 无法遵循开始制定的计划。而不合理的调度, 不仅严重影响到本企业其他项目的进度, 还会严重干扰协作企业的生产调度, 使得生产混乱的现象从本企业扩散到合作伙伴, 影响一大批项目的进度而导致拖期。只有采取科学的项目协同监控与动态调度手段, 才能有效应对各种不确定因素与突发事件, 确保项目按期完成。

专门研究风险性和不确定环境下项目调度理论的文献较少, 从调度角度可分为两大类:第一类将项目网络图的结构假设为确定性而将项目中的其他参数 (如任务工期等) 作为不确定性变量, 对调度方案的制订开展研究, 文献[1]认为主要存在反应性、随机性、模糊和前摄鲁棒性调度方法, 文献[2,3]对相关研究领域进行了总结与展望;第二类将项目网络图的结构假设为随机性, 研究项目调度计划与控制方法, 如文献[4,5]介绍了单机、同等并联多机、带有紧前约束的Job-shop和Flow-shop以及GERT网络的调度研究。

就模具制造项目调度而言, 廖仁[6]对确定条件下的多个模具项目的工期费用粗规划做了初步研究, 苏志龙等[7]、李英杰等[8]在单个模具项目的工期与费用的不确定性规划方面做了大量的研究, 但针对不确定因素和突发事件影响下多个模具项目的随机调度研究的国内外文献并不多见。

1 数学模型

一个模具制造项目关键路径上的任务可描述为图1所示的结构, 图中, 虚线表示可能的处理过程 (如某些情况下需要进行热处理, 项目完工后可能需要返修) 。通过对模具制造项目的历史数据进行统计、分析, 可以得到项目中每个任务有若干种实现方式。每种实现方式由任务的实际完成时间、费用、结果 (质量的优劣、是否返修) 来描述。如图2中, “AB板粗加工”有2种可能的实现方式, 分别是 (D11, C11, E) 和 (D12, C12, G) , 其中第一种实现方式的时间、费用、结果分别是 (D11, C11, E) , 第二种实现方式的时间、费用、结果分别是 (D12, C12, G) (E表示优良, G表示合格, G1、G2表示两种不同的合格结果) 。若执行结果为“F”, 则表示项目需要返修。项目的相邻两个任务之间的联系由转移概率矩阵来描述, 如图2中“CNC加工”有3种实现方式, “AB板粗加工”有2种实现方式, 因此“转移概率矩阵2”的大小为3×2, 表示“AB板粗加工”以某种方式完成的前提下, 项目转向“CNC加工”的某种执行方式的概率 (图2中矩阵2A和矩阵3A分别表示省略了“AB板粗加工”转向“电极加工”的转移概率矩阵以及“电极加工”转向“EDM加工”的转移概率矩阵) 。由此可见, 每个项目的实际完成时间也是不确定的, 若项目延期完成, 企业将会受到高额罚款。

多个项目的执行状态构成了整个项目群的状态, 在项目群的执行过程中, 可能又有新的项目插入进来。定义事件为一个任务的开始或结束, 项目群状态的转移是由“事件”触发而非“定时”触发的。第k+1个事件发生时的系统状态的概率分布取决于第k个事件发生时的系统状态, 而与第k个事件发生之前的系统状态无关, 而且从第k个事件发生到第k+1个事件发生的系统状态的转移与第k个事件无关, 因此可以采用离散时间马尔可夫链来进行系统建模[9]。在此之前, 先作以下假设:①项目中的任务都是不可分离的, 即一旦项目的某个任务开始, 就必须进行到该任务结束, 中途不能停止, 而且一个任务在同一时刻只占用一类资源;②忽略任务等待加工的时间和准备时间;③只考虑部件加工的直接费用的不确定性, 将其他直接费用与间接费用视为确定量 (两者之和为项目计划报酬的65%) ;④若项目出现返修的情况 (CNC或者EDM返修) , 则返修一次后即合格。

1.1 系统状态定义

假设某企业同时承担M个模具制造项目, 共需要N类关键资源, 每类资源的个数为Ga (a=1, 2, …, N) , 在M个项目执行过程中, 又可能有b个新的项目插入进来。定义系统状态如下:

x=[s1s2 … sMsM+1sM+2 … sM+bq1q2 …qM+bR1R2 … RNt1t2 … tbt]T (1)

si (i=1, 2, …, M+b) 为正整数, 表示项目i的当前状态, 用来描述项目i的已经完成的任务和正在执行的任务的情况。例如, 一个有5个任务的模具项目若正常完成, 则最多有15种可能的状态, 如图3所示, 各状态定义如表1所示。若该项目最后一个任务 (装配试模) 的执行结果为“返修”, 则其状态数为17。qi (i=1, 2, …, M+b) 为正整数, 表示项目i中离当前时刻最近的一个任务的完成方式的编号, 若该任务为项目i的第n个任务, 且Ci n表示第i个项目的第n个任务的可能完成方式的数目, 则qi∈[1, Ci n]。一旦项目的某个任务完成, 则qi就被更新。Ra∈[0, Ga] (a=1, 2…, N) 为整数, 表示当前状态空闲的第j类资源的数目。Ra=0表示该类资源全部被占用, Ra=Ga表示该类资源全部空闲。tw (w=1, 2, …, b) 表示第w个实际新插入的项目到来的时刻, t为当前时刻, 用来描述项目报酬随完成时间而变化。

1.2 行动

定义行动u=[ξ1ξ2 … ξM+b]T, 其中, ξi=ρ或ξi=0 (i=1, 2, …, M+b;ρ为较小的整数, ρ≠0) 。ξi=ρ表示执行第i个项目的某个任务, 其值等于第i个项目后一个状态的值减去前一个状态的值。如表1中, si由3变成5, 则表示执行“电极加工”, 但不执行“CNC加工”, 此时ξi=2;若si由9变成8, 则表示由状态“CNC加工完成, 电极加工尚未开始”转向“电极加工正在进行, CNC加工完成”, 即执行“电极加工”, 此时ξi=-1。只有当执行任务所需要的资源至少有一个空闲的时候才能采取行动。ξi=0表示不执行第i个项目的任务。

1.3 状态转移规则

系统初始状态为

$\begin{array}{l}\mathit{x}(0)=[\begin{array}{ccc}\begin{array}{l}\\ \begin{array}{l}\begin{array}{l}{\rm M}\text{个}\text{项}\text{目}\\ \text{的}\text{状}\text{态}\end{array}\\ \stackrel{⌢}{1,\cdots ,1}\end{array}\end{array}& \begin{array}{l}\\ \begin{array}{l}\begin{array}{l}b\text{个}\text{可}\text{能}\text{插}\text{入}\\ \text{的}\text{项}\text{目}\text{的}\text{状}\text{态}\end{array}\\ \stackrel{⌢}{0,\cdots ,0}\end{array}\end{array}& \begin{array}{l}\\ \begin{array}{l}\begin{array}{l}{\rm M}+b\text{个}\text{任}\text{务}\\ \text{完}\text{成}\text{结}\text{果}\end{array}\\ \stackrel{⌢}{0,\cdots ,0}\end{array}\end{array}\begin{array}{l}\\ \begin{array}{l}\\ \begin{array}{l}\\ ,\end{array}\end{array}\end{array}\end{array}\\ \begin{array}{ccc}\begin{array}{l}\\ \begin{array}{l}R{}_1,\cdots ,R{}_{{\rm N}}\\ {\rm N}\text{种}\text{资}\text{源}\text{的}\text{状}\text{态}\end{array}\end{array}& \begin{array}{l}\\ \begin{array}{l}0,\cdots ,0\\ \begin{array}{l}b\text{个}\text{可}\text{能}\text{插}\text{入}\text{的}\\ \text{项}\text{目}\text{的}\text{到}\text{来}\text{时}\text{刻}\end{array}\end{array}\end{array}& \begin{array}{l}\\ \begin{array}{l}\\ \begin{array}{l}0\\ \text{时}\text{刻}\end{array}\end{array}\end{array}\end{array}]{}^{\text{Τ}}\end{array}$

当开始执行一个任务或者某个任务完成时, 系统状态发生转移。设当前状态为x (k) , 采取行动u (k) 后, 则转移到一个临时状态x′ (k+1) :

x′ (k+1) =[s′1s′2 … s′Ms′M+1 … s′M+b

q1q2 … qM+bR′1R′2 … R′Nt1t2 … tbt]T

其中

x (k) =[s1s2 … sMsM+1 … sM+bq1q2 … qM+b

R1R1 … RNt1t2 … tbt]T

u (k) =[ξ1ξ2 … ξM+b]T

s′i=si+ξi (i=1, 2, …, M+b)

若在t时刻第f个新项目插入, 则tf=t (f=1, 2, …, b) , 否则tf=0 (f=1, 2, …, b) 。

若在x′ (k+1) 状态, 正在执行的多个项目中第p个项目的某个任务 (假设占用第n类资源, 由第m种方式实现) 比其他任务先完成, 则状态x′ (k+1) 转移到状态x (k+1) :

x (k+1) =[s′1s′2 … s″p … s′M+bq1 … q′p …qM+bR′1 … R′1R″n … R′Nt′1t′2 …t′bt′]T

其中

s″p=s′p+ψp, q′p=m, R″n=R′n+σ (σ=1或2) , ψp的取值与上文的ξi相同;t′是任务结束的时刻, 若在t′时刻第f个新项目插入, 则tf=t′ (f=1, 2, …, b) , 否则tf=0 (f=1, 2, …, b) 。如果同一时刻t′还有其他任务结束, 其状态转移也按上述方式相应更新。

1.4 目标函数

企业的目标为最大化所有项目完成后的报酬, 该报酬函数 (目标函数) 用Q值来表示。

2 模具制造项目群随机调度算法

Bellman迭代是求解上述马尔可夫决策问题的有效方法之一, 但往往面临“维数灾难”问题, 而且要分析系统状态之间的转移规则 (即明确给出当前状态的下一个状态以及其条件转移概率) 是非常困难甚至是不可能的。因此, 本文首先进行大量的基于并行启发式策略的仿真以缩小系统状态空间, 然后采用多步Q学习方法进行问题求解, 算法 (算法1) 描述如下:

(1) 基于3种启发式策略进行并行仿真, 每种仿真进行L次;

(2) 合并仿真结果, 去除冗余的状态行动对, 得到有限的状态行动对子集Y;

(3) 标识Y中每个状态行动对的下一个状态子集, 计算其转移到每一个下一个状态的概率, 得到初始Q值表;

(4) 设定截断步长和收敛条件, 利用多步Q学习算法进行Q值迭代, 直到Y中所有状态行动对的Q值都收敛;

(5) 利用收敛的Q表进行在线决策。

2.1 并行启发式策略仿真

为避免因项目拖期而造成的罚款, 往往让期望执行时间短的任务先执行。优良率高的任务的下一个任务的优良率也会高一些, 项目执行结束后, 返修的情况会少一些, 反之亦然, 因此往往让期望优良率高的任务先执行。为追求整个项目群的报酬最大化, 往往让报酬大的项目的任务先执行。本文采取如下3种启发式策略进行仿真:启发式仿真策略1, 执行时间短的任务先执行;启发式仿真策略2, 优良率高的任务先执行;启发式仿真策略3, 报酬高的项目的任务先执行。无论哪种策略, 若仿真过程中出现项目返修的情况, 则返修的任务先执行。利用MATLAB的分布式计算服务器 (distributed computing server) , 可以在具有多核CPU的机器上或局域网内实现基于以上3种启发式策略的并行仿真, 每种启发式策略的仿真结果是一个状态行动对集。然后将3个集合合并 (除去冗余的状态行动对) 。仿真的作用是:①缩小系统状态空间 (状态行动对集) , 解决“维数灾难”问题;②得到初始Q值, 用于Q值迭代;③以状态转移频率近似代替状态转移条件概率, 减小了系统复杂性。

2.2 多步Q学习方法

Q学习是一种与模型无关的强化学习算法, 主要用于求解马尔可夫决策过程环境下的学习问题。在第k个决策点, 系统处于当前状态x (k) , 选择并执行动作u (k) , 观测下一个状态x (k+1) 和回报g (x (k) , u (k) , x (k+1) ) , 按照下式更新值函数[10]:

Q (x (k) , u (k) ) = (1-α) Q (x (k) , u (k) ) +α[g (x (k) , u (k) , x (k+1) ) +γV (x (k+1) ) ] (2)

式中, α为学习率;γ为折扣因子。

在x (k) 采取行动u (k) 后, 系统到达的下一个状态x (k+1) 可能有多个, 因此所得到的回报g (x (k) , u (k) , x (k+1) ) 也因为x (k+1) 的不同而变化, 故设

$\begin{array}{l}g(\mathit{x}(k),\mathit{u}(k),\mathit{x}(k+1))=\\ \underset{x(k+1)\in X{}^{x(k+1)}}{{\displaystyle E}}(g(\mathit{x}(k),\mathit{u}(k),\mathit{x}(k+1))]\end{array}$

$V(\mathit{x}(k+1))=E\{\underset{u(k+1)\in U{}^{x(k+1)}}{{\displaystyle \max }}[Q(\mathit{x}(k+1),\mathit{u}(k+1))]\}$

式中, E表示数学期望。

由式 (2) 可知, Q学习仅仅显式地利用了下一步的信息, 预见能力较差, 更新速度也较慢。因此, 本文考虑将来多个步骤 (状态) 的影响, 采用多步Q学习方法[11], 即利用将来多步信息来更新值函数。观察式 (2) 可知, Q学习是使用g (x (k) , u (k) , x (k+1) ) +γV (x (k+1) ) 来更新Q (x (k) , u (k) ) 的, 若将g (x (k) , u (k) , x (k+1) ) 简记为gk, 则很明显, 下面的g${}_k^{(n)}$是对Q (x (k) , u (k) ) 更为精确的近似:

g${}_k^{(n)}$=gk+γ gk+1+…+γn-1gk+n-1+γnV (x (k+n) )

式中, g${}_k^{(n)}$为第k个决策点的校正n步截断回报。

为计算方便, 不直接采用g${}_k^{(n)}$来更新, 而是用g${}_k^{(n)}$ (n=1, 2, …, j) 的加权平均值来更新。考虑到, 对于0≤λ<1, 有

$(1-\lambda ){\displaystyle \sum _{i=1}^{j-1}\lambda }{}^{i-1}+\lambda {}^{j-1}=1$。因此, 可以这样来定义校正截断回报的加权平均值:

定义1 j步的时间差分回报TD (λ) 定义为g${}_k^{(n)}$ (n=1, 2, …, j) 的加权平均值, 即$g{}_k^{\lambda ,j}=(1-\lambda ){\displaystyle \sum _{i=1}^{j-1}\lambda }{}^{i-1}g{}_k^{(i)}+\lambda {}^{j-1}g{}_k^{(j)}$。将g${}_k^{(n)}$ (n=1, 2, …, j) 代入到g${}_k^{(\lambda ,j)}$中, 化简后可以得到

$\begin{array}{l}g{}_k^{(\lambda ,j)})=g{}_k+\gamma V(\mathit{x}(k+1))+{\displaystyle \sum _{i=1}^{j-1}(}\lambda \gamma ){}^i[g{}_{k+i}+\\ \gamma V(\mathit{x}(k+i+1))-V(\mathit{x}(k+i))]\end{array}$

记

$\begin{array}{l}e{}_k=g{}_k+\gamma V(\mathit{x}(k+1))\\ e^{\prime }{}_k={\displaystyle \sum _{i=1}^{j-1}(}\lambda \gamma ){}^i[g{}_{k+i}+\gamma V(\mathit{x}(k+i+1))-V(\mathit{x}(k+i))]\end{array}$

由于给定问题的系统随机复杂性较大, 同时探索和更新Q (x (k) , u (k) ) 值意义不大, Q (x (k) , u (k) ) 值收敛的速度较慢, 所以将学习率α取值为1, 则多步Q学习的更新规则为Q (x (k) , u (k) ) =ek+e′k。

需要说明的是, 本文中的gk为在状态x (k) 采取行动u (k) 后到达状态x (k+1) 的利润, 其值等于采取行动u (k) 的费用与所有项目完成后回溯得到的在状态x (k) 的项目群报酬之和。Q值为不断累加的每个阶段的利润gk, 因此Q值反映了项目群的最终报酬。

通过迭代, 直到所有状态行动对的Q值收敛后就可以进行在线决策, 即

$u{}^{*}(k)=\arg \underset{u(k)\in U{}^{x(k)}}{{\displaystyle \max }}Q(\mathit{x}(k),\mathit{u}(k))$

3 算例

某模具企业同时承担4个模具制造项目, 构成一个项目群。项目1、2无需“热处理”, 项目3、4需要“热处理”, 4个项目完工后都可能需要“返修”。4个项目的计划报酬分别是60万元、70万元、160万元、200万元, 项目实际报酬随项目完成时间而变化。项目计划工期分别是65天、75天、130天、160天。在项目群执行过程中, 有2个可能插入的新项目, 新项目1在第10、20天插入和从不插入的概率分别为50%、40%、10%, 无需“热处理”;新项目2在第15、25天插入和从不插入的概率分别为35%、55%、10%, 需要“热处理”。2个项目完工后都可能需要“返修”, 其计划报酬分别是42万元、65万元, 计划工期分别是55天、72天。若项目超期, 超期天数在计划工期的15%以内, 则每超期1天的罚款为该项目计划报酬的0.2%, 超过计划工期15%以外的每天的罚款为该项目计划报酬的0.5%。所有项目的各任务的执行方式以及任务之间的转移概率分别如表2、表3所示 (可能插入的新项目编号分别为5、6, 用黑体表示) 。在表3中, 项目3、4、6所对应的转移矩阵3A和转移矩阵4A分别表示“热处理”转向“电极加工”的转移概率矩阵以及“电极加工”转向“EDM加工”的转移概率矩阵。

该企业现有的可用于该项目群的资源数量如下:粗加工设备6台, 热处理设备2台, CNC加工中心4台, 电极加工设备2台, 电火花机4台, 装配单元2个。考虑一个模具任务的加工是A、B板同时进行的, 所以除热处理、电极加工和装配试模以外, 每个任务都相应地占用2个同类资源。

采用MATLAB 7.3编写应用程序, 在配置为Intel (R) Xeon (R) CPU E5335@2.00GHz (4核) , 4GB内存的机器上执行第2章的算法1 (取折扣因子γ=0.90, 权重参数λ=0.85, 截断步数j=3) , 结果如下:

(1) 3种启发式策略各仿真4000次, 共得到12 000条实现轨迹, 仿真结果如图4～图6所示, 图中横轴表示项目群的利润, 纵轴为仿真中利润值出现的次数。3种策略的利润最大值、最小值和平均值如表4所示。分析图4～图6和表4可知:新项目插入与否以及新项目插入时间的变化, 使得项目群的利润值出现较大的波动, 从而对项目群执行过程中应采取的决策产生较大的影响。第1种仿真策略总体上优于第2、第3种策略, 但没有一种策略在任何情况下是绝对占优的。

(2) 利用了4核CPU (实际用了3核) 的计算能力, 并行启发式仿真共耗时约15.3h, 比串行仿真节省近2/3的时间。

(3) 通过标识仿真中出现的状态和行动, 得到209 538个非冗余的状态行动对, 以及每个状态行动对的下一个状态子集, 共耗时约160.5h。

(4) 多步Q学习迭代20次后收敛, 共耗时约159.7h。收敛条件为$\underset{d}{{\displaystyle \max }}|Q{}_d^{(j+1)}-Q{}_d^{(i)})/Q{}_d^{(i)}|\le 10{}^{-4}$ (其中i为迭代的次数, d为状态行动对的编号) 。若取j=1, 则多步Q学习退化为Q学习, 同样条件下需要37次迭代后才收敛, 耗时约151.2h。由此可见, 多步Q学习预见能力较强, 减少了学习次数, 提高了算法收敛速度, 但增加了计算复杂度和计算时间, 截断步数j越大, 计算量越大。

(5) 当Q值收敛后, 对于给定状态行动对, 平均在线决策时间仅为2.0s。

4 结束语

本文通过分析模具制造项目的不确定性因素以及突发事件的特点, 构建了基于离散时间马尔可夫链的模具项目群随机演化模型, 提出了基于并行启发式策略仿真和多步Q学习的模型求解算法, 并结合示例说明了算法的可行性与有效性。与标准Q学习相比, 多步Q学习高了算法收敛速度, 但增加了计算复杂度和计算时间。

今后将要研究的问题如下:①如何采用并行强化学习方法缩短学习时间, 从而提高整个算法的效率;②是否应该预留资源给可能插入的新项目及其对整个项目群的影响程度;③新项目插入时, 若无资源, 是否应该暂停正在执行的某些项目及其对整个项目群的影响程度。

参考文献

[1]Herroelen W S, Leus R.Project Scheduling underUncertainty:Survey and Research Potientials[J].European Journal of Operation Research, 2005, 165:289-306.

[2]Aytug H, Lawley M, Mckay K, et al.Executing Pro-duction Schedules in the Face of Uncertainties:aReview and Some Future Directions[J].EuropeanJournal of Operation Research, 2005, 161:86-110.

[3]Debels D, Vanhoucke M.Future Research Avenuesfor Resource Constrained Project Scheduling:Search Space Restriction or Neighborhood SearchExtension[R]Belgium:Ghent University, 2006.

[4]Neumann K.Scheduling of Projects with StochasticEvolution Structure[M]//Weglarz J, ed.ProjectScheduling-recent Models, Algorithms and Appli-cations.Boston:Kluwer Academic Publishers, 1999.

[5]Neumann K, Steinhardt U.GERT Networks and theTi me-oriented Evaluation of Projects[M]//Lec-ture Notes in Economics and Mathematical Sys-tems, Berlin, Springer, 1979.

[6]廖仁.模具虚拟企业项目调度研究[D].广州:广东工业大学, 2003.

[7]苏志龙, 陈庆新, 陈新, 等.基于协商的模具虚拟企业生产项目规划[J].中国机械工程, 2002, 13 (22) :1931-1937.

[8]李英杰, 陈庆新, 陈新度, 等.多属性的虚拟企业并行协商项目规划算法[J].机械工程学报, 2005, 41 (2) :215-222.

[9]Choi Jaein, Realff MJ, Lee J H.Dynamic Program-ming in a Heuristically Confined State Space:a Sto-chastic Resource-constrained Project SchedulingApplication[J].Computers and Chemical Engineer-ing, 2004, 28:1039-1058.

[10]胡德文, 王正志, 王耀南, 等.神经网络自适应控制[M].长沙:国防科技大学出版社, 2006.

篇4：个人总结q群推广

以下是审核的标准

1、虚拟商品，补邮费，赠品、订金、刷信誉、提交评价时已经下架的宝贝等非实际交易不参加

2、评价需要好评，中评差评的不参与

3、必须是30天之内购买的商品

4、购买价格低于9元（9元不含运费）的商品不参与，月销量低于50的商品不参加

5、套餐只算其中一单、同一款产品只算一单 同一店铺最多2个任务

6、淘宝店必须要需要晒图 评价和追加都要晒图！晒图的图片是附件中的二维码！

7、必须发购物链接+评价或追加评价截图，不然过不了 备注：评价内容、追加评价内容、晒图图片见附件！

先推广群，后成会员：

1、注册百度、论坛、贴吧等账号时，以群号作为账号名，然后问答问题，发帖等

2、论坛上发帖推广，比如：天涯 新浪 搜狐 腾讯

21CN社区 天涯社区 中华网论坛 强

国论坛 西祠胡同

3、先拉一些自己的一些好同学，好朋友，然后再让他们宣传给他们的好同学好朋友

4、QQ群里推广：正确处理好群友与群友，群友与群主的关系。俗话说家和万事兴，如果你的群能够让加入的群友感到温馨快乐的话，想必她们也会潜意识的帮你推广的

5、群发展到一定的时期，可设置好关键词，搜索推广

6、在空间和微博里宣传

7、淘宝、天猫评价推广

Q群推广：

1、加入精准群，几个常用的方式：

(1)新人报道、群论坛策略：

是一个不错的做外链的地方，会被大部分的人忽略，但如果你用的好，群内的人会通过这里了解你，了解你要推广的内容。

(2)聊天策略：

进群后不要一开始就发广告，这样的后果就是你发广告就会容易被T掉。所以先跟大家熟悉熟悉，问问好什么的，然后将推广潜移默化到你的聊天过程中去，这个就需要大家进行QQ群的维护，也就是大家最头疼的，要不断的进行QQ群聊天，虽然很耗时间但会有效果，而且还不容易被群主T掉。当然如果你能用办法将群主搞定，你发广告让他放水不T你，也是可以的，这个就看个人的营销功底，不做过多分析。

(3)在线状态策略：

在群内的右边会有群员的在线状态，可能大家会看到这样的一个状态：

QQ在线状态 可以看到在企鹅的旁边有个笑脸的标志，那么这个对应的状态设置是：选择“Q我吧”的模式

这个模式的好处是，你在QQ群右侧的群员显示一直都会是前列，比在线的群主排序都高，那么大家一进来就会看到你，如果你的群名片又设置的跟你产品相关，如果大家对你的产品感兴趣，就会直接找你。当然这样的状态也有不好的，如果有人找你，QQ聊天框是直接弹出的，会打扰你的工作。

(4)群贴图和群共享策略：

最新上传的图片是会在QQ群的聊天框中显示出来的，如果你图片上传的有技巧也会达到推广的效果.群共享也是一个推广的好地方，你可上传你的资料，资料可带有你的产品推广和介绍，如果资料很不错，会有很多群员下载，那么进行口碑营销不在话下。

(5)群员一对一策略：

如果你加入的群是你推广的目标群的话，那么其中的群员自然是你的目标群体，那么你可对他们进行一对一的咨询和推广，这个不用多说，大家都会。但需要注意消息发的太多容易让QQ被迫下线，数量大家要自己掌握。(6)有求必答策略：

专业的技术群中，总有人会提出相关的问题，你可以把自己知道的知识说说，这样赢得别人的信任，然后把他们介绍到相关站点上。你也可以留下答案的链接，让别人上站点去找。但是你所做的必须赢得别人的可信，不要随便一个问题就把别人引入你的站点，弄得问不对答，这样就不行了哦!(7)利益诱导策略：

这一招，带有明显的商业性质，做得好，效果也好的很。可以让群主帮你想想策略，开展一些在哪个站点的活动，适当的给他们点好处，这样你的站流量就会大增了，要是论坛，人气也就火了。

2、装修自己的qq空间，头像诱人，相册丰富，将群里人吸引到qq空间中。我新建的群：332868837 注意事项

建立qq群要注意：

1.条件允许的情况下，多建高级群 2.给群取名要有针对性

3.群员组成上要注意男女比例，群成员中女成员是有足够的号召力的 4.招募负责任的管理员，建议在群里通过投票对管理员实行末位淘汰制的

做法，来调动成员的活跃度

5.保持群的活跃度，可以组织群内活动什么的，让群成员更好的互动

一个qq号一天最多可以加20个群，要正确选择目标群，所以在加群时要注意：

1.人数太少的群不加 2.不活跃的群不加 3.同质化的群不加

4.优质群一般需要验证，建议在加群前要对群有了解，填写验证信息有针

对性的填写

5.进群后要看群规。及时修改群名片(群名片前加上有利于排名的符号，通 常加空格)

6.刚进群不要直接发广告，要先和群友交流，保持一定的活跃度，再偶尔的发个广告，或者经常冒泡 利用qq群推广要注意：

1.无论是建群还是加群，要经常与群友沟通，建立感情 2.同一条推广信息每天只发一次 3.字体和颜色最好使用默认的 4.发的广告不要太硬性 5.合理利用群名称和公告栏

6.合理利用群邮件(群邮件发送要适量，尤其要注意群里的人际关系，否则很容易被举报)7.合理利用群空间，如：群论坛，群共享，群投票等

8.如果真的需要多发推广信息，建议可以挑选活跃的用户单独发送，这样单聊不至于搞得全群公愤，尤其是单聊要注意说话的技巧：

（1）、目的性，优先考虑高转化率群体

（2）、巧设“陷阱”，引导话题走向

（3）、分析目标群体特征，设置吸引点

（4）、寻找切入点，引导话题并控制话题

9.群聊发信息推广的时候最好发百度贴吧，知道，新浪论坛等大家都知道的网址，因为发大家不知道的网址很容易被认为是广告或者病毒 10.群聊还可以预先设置好场景，几个人在群里互动，要注意时间间隔 11.可以整一些qq个性动作，能自动将你和聊天对方的qq名称融入到

预设的对话当中去，我们则利用该功能推广我们的网站(2010版qq特有的功能)12.qq好友印象，利用该功能添加我们的网址或推广内容的合理编辑 13.qq好友买卖，可以买个有名气的人作为奴隶，然后将其改名为经过编辑的推广信息

14.qq农场，可以设置帮你浇水、除草、除虫、放虫的好友写上感谢的提示语，提示语内容为经过编辑的推广信息 15.qq签名，可以在qq签名上写上合适的推广信息 16.qq心情，同qq签名

17.qq秀，在聊天窗口的右侧显示qq秀的地方，可以增加qq秀心情文字，该段文字可以设置为经过编辑的推广信息

篇5：让q群活跃起来的一些想法

2.组织一些话题，一些节目、资料共享什么的，大家都有共通话题就好了

3.适当控制男女成员数的比例很重要，特别是活跃成员中女同志的数量，注意挖掘群内的活跃人物;对于长时间潜水不冒泡的，需要找他们私聊;看是怎么回事,作为管理员，有空时一定要多上群里聊聊，发现什么好东西了，第一时间和大家分享一下;群里太安静时，就没事找点事;群活跃不活跃，很大程度取决于管理员。

4.要让大家有新鲜感，让他们能接受到一些新的想法、新的信息和新的资源。

5.作为管理员，一定要有一颗博爱的心，要发自内心把所有群员都当成好朋友。谁有困难了，或是需要帮助了，一定要尽自己所能给予协助和支持。这样群员才能有归属感，才会喜欢上这个群。

6.过时过节在群里发发问候，没事多和群里的人探讨相关知识，这样群里的人才会依赖你，多写一些感兴趣的问题。

7.时常换位思考一下，假如你是这个群的会员，那么你喜欢或者希望这个群有什么氛围？

篇6：Q群圣诞节活动策划书

1、户外传统游戏(1)有奖知识问答 策划者应当准备大量的有关于旅游知识、户外运动知识、赞助企业（blackyak）相关知识等大量的题目，以大家即兴抢答(或者抽号)的方式，进行有奖问答(2)户外动手能力比赛 在室内，我们主要是进行扎帐篷和叠睡袋的比赛，通过抽号选出参赛人员，看谁能在最短的时间内能将帐篷扎起来，将睡袋叠好，在钻入睡袋后立即收拾睡袋和帐篷。时间最短者获得奖品。（扎帐篷去年圣诞晚会举办过）

2、竞赛类游戏(1)模仿秀比赛 通过抽号选出幸运观众，每组3人，由我们的主持人随机选取一首卡拉ok，由3人分别来演绎，谁的喝彩声最多，表演最好获得奖品。(2)顶气球比赛 策划者提供气球，通过抽号选出参赛人员，胜利的队伍获得奖品。(3)蒙眼喂奶油蛋糕 通过抽号选出幸运观众，每组2人，一人蒙眼，手中持蛋糕前行几步喂另一人吃蛋糕，吃得最快，身上最干净的为胜者

3、幸运奖游戏(1)从所有来宾中抽出几个幸运来宾获得奖品。(2)猜数字中大奖 策划者邀请一名观众在纸上写一个数字，让其他人猜，每猜一次就缩小一个区间，直至数字被猜中。但是中奖的不是猜中的，而是最后一个猜错的人。这个游戏适合所有的人一起来参与，而且无法作弊，每人自己掌握自己认为最佳的时机进行猜测。

4、特别节目(1)追赶女子合唱团的合唱表演(2)追赶编剧组编排的反串模仿经典电影秀