attention用法
attention用法：1.表示“注意”时，是不可数名词；2.用作可数名词时，指具体活动，表示“殷勤”、“款待”，常用复数形式。一、发音：二、中文翻译：1.作名词，注意；专心；留心；注意力；兴趣；关注；殷勤；关心；特别照料（或行动、处理）；立正姿势； 2.作感叹词，注意；立正。三、造句：1.Pay attention to time of year.注意选择一年中的时机。2.You must pay attention to your study.你必须把你的注意力放在学习上。
attention的固定搭配
attention可以作名词表示“注意；注意力；照料；兴趣；关心”等。常用搭配：attract/receive/enjoy attention 吸引注意；hold/keep somebody's attention 保持某人的注意力；draw/call attention to something 使人们关注某事。attention意思attention作名词有“注意；注意力；照料；兴趣；关心”等意思。复数 attentionsattention例句The game was boring and my attention began to wander.这场比赛很无聊，我开始走神了。We focused our attention on this particular poem.我们关注到这首不寻常的诗。The movie keeps/holds your attention [=interest] right to the very end.这部影片从始至终扣人心弦。Don't pay any attention to what the other kids say.不要管其他孩子怎么说。The children were competing for the teacher's attention.孩子们争先恐后要引起老师的注意。Be sure the dog gets plenty of attention.对这条狗一定要多加照料。She has been receiving unwanted attentions from a coworker.有个同事一直在令她讨厌地大献殷勤。attention搭配attract/receive/enjoy attention 吸引注意hold/keep somebody's attention 保持某人的注意力draw/call attention to something 使人们关注某事divert/distract/draw attention from something 转移人们对某事的注意力come to somebody's attention 吸引某人的注意力
in which的用法
当你要精确表达"在...里面"时, 用in which来代替下列例句中表示"in which"的连词where; in which不能代替代词和不可数名词where.
where (Conjunction) Where作连词的含义比in which广泛,笼统.
The place in, at or to which.
He knows where he’s going.
The situation in which.
He’s exactly where he belongs. 可用in which来代替
where (Pronoun)
The place in which.
He lives within five miles of where he was born.
where (uncountable Noun)
The place in which something happens.
A good article will cover the who, the what, the when, the where, the why and the how
attend用法归纳分点回答
1. attend on sb 照料某人，服侍某人。如： Who will attend on the patient? 谁来护理病人? 2. attend to (1) 注意听。如： Attend now to what I tell you. 现在注意听我给你讲。 (2) 处理；办理。如： I’ll attend to the matter. 这事我来处理。 扩展资料 (3)照顾；照看。如： If you go out, who will attend to the baby? 你要是出去，谁来照顾婴儿? Will you attend to the shop for a few minutes while I go to the bank? 在我去银行时你帮我照看一下店铺好吗? (4)接待；招待。如： Are you being attended to, sir? 先生， 有人招呼你了吗? I’m too busy. I can’t attend to you now. 我很忙，现在不能接待你。 (5)专心；关心。如： You must attend to your work. 你必须专心工作。 Parents must attend to the education of their children. 父母必须要关心子女的教育。 (6)治疗；医治。如： His injury was attended to by a young doctor. 他的伤由一位年轻医生医治。
请问atten和 attention有什么区别呢？
atten是attention的缩写。
读音：[英][əˈtenʃn][美][əˈtɛnʃən]
n. 注意，注意力; 照料，关怀; 殷勤;
int. [口令]立正;
复数：attentions。
例句用法：
1、You have my undivided attention.
我专心听你所讲。
2、Pay particular attention to the first page of results.
尤其要注意第一页的搜索结果。
3、Later he turned his attention to the desperate state of housing in the province.
其后，他将注意力转向了该省形势严峻的住房问题。
4、Young children with short attention spans.
小孩子很难长时间保持注意力集中。
5、Volume Two, subtitled 'The Lawyers', will also attract considerable attention.
副标题为“律师”的第二册也将获得广泛关注。
Attention注意力机制介绍
Attention机制通俗的讲就是把注意力集中放在重要的点上，而忽略其他不重要的因素。其中重要程度的判断取决于应用场景，拿个现实生活中的例子，比如1000个人眼中有1000个哈姆雷特。根据应用场景的不同，Attention分为空间注意力和时间注意力，前者用于图像处理，后者用于自然语言处理。本文主要介绍Attention机制在Seq2seq中的应用。
我们知道在Seq2seq模型中，原始编解码模型的encode过程会生成一个中间向量C，用于保存原序列的语义信息。但是这个向量长度是固定的，当输入原序列的长度比较长时，向量C无法保存全部的语义信息，上下文语义信息受到了限制，这也限制了模型的理解能力。所以使用Attention机制来打破这种原始编解码模型对固定向量的限制。
Attention的原理就是计算当前输入序列与输出向量的匹配程度，匹配度高也就是注意力集中点其相对的得分越高。其中Attention计算得到的匹配度权重，只限于当前序列对，不是像网络模型权重这样的整体权重。
1）encode对输入序列编码得到最后一个时间步的状态c，和每个时间步的输出h，其中c又作为decode的初始状态z0。
2）对于每个时间步的输出h与z0做匹配也就是match操作，得到每个时间步的匹配向量α01，如图1。
3）对所有时间步的输出h与z0的匹配度α0，使用softmax做归一化处理，得到各个时间步对于z0的匹配分数。
4）求各个时间步的输出h与匹配分数的加权求和得到c0，作为decode的下一个时间步的输入，如图2。
5）计算各个时间步的输出h与z1的匹配度得到c1作为decode下一个时间步的输入，如此一步一步重复下去，如图3。
这样就可以把每个时间步重要的信息传给decode中，以上就是Attention机制的处理过程。其中match操作一般是求两个向量的相似度，通常有如下方法：
1）余弦相似度
2）一个简单的 神经网络，输入为hh和ww，输出为α
3）或者矩阵变换α=hTWzα=hTWz (Multiplicative attention，Luong et al., 2015)
在tensorflow1.0版本以后的api seq2seq库中，包含了两种Attention算法，他们的区别就是match操作的不同，因此也有人称他们为加法Attention和乘法Attention，具体内容下：
1）BahdanauAttention：论文 https://arxiv.org/abs/1409.0473 中的实现：
2）LuongAttention：论文 https://arxiv.org/abs/1508.04025 中的实现 ：
由于图片来自不同地方，所以符号有些不同，图4和图5中的h是上文所说的每个时间步的输出向量，d是decode中每个时间步的状态，也就是上文中的z，c是match后计算的权值加和后的向量用于decode中每个时间步的输入，a就是match操作中经过softmax后的匹配权重，v是一个向量，相当于w一样的权重需要去学习。有上面两个公式可以看出，BahdanauAttention和LuongAttention的区别就是在match过程中的计算方式不同，一个是将decode的状态与encode的输出求和，一个是求乘，所以才有了加法Attention和乘法Attention的叫法。
------------------------------------------------------------------更新---------------------------------------------------------------------
最近一段时间的学习,发现Attention的各种形式与用法,但是归根结底,都是同一种形式---Google的一般化Attention.
其中Q是query,K和V是一一对应的,相当于Key-Value的关系.一般情况下都会说求谁对谁的Attention,比如上面提到的Seq2seq中,decoder的隐状态z对encoder输出h的attention,那么隐状态z就相当于该式中的query,encoder的输出h就是key和value(这里key和value相等,也有不等的情况).所以如果说A对B的attention,那么A就是query,B就是key-value(key-value怎么分配看实际情况).这样,上文提到的内容就可以很容易的代入到一般会Attention中.先用query(decoder隐藏状态z)和key(encoder输出h)做点乘然后归一化,使用softmax计算权重得分,再与value(encoder输出h)相乘得到最后的向量.(attention的机制像极了key-value记忆网络的原理, 或者更准确的说是key-value记忆网络像极了attention的机制,使用query与key做匹配运算,求得相关度得分,然后使用该得分与value运算,得到最后的向量).
特别注意的是,如果Q,K,V的值都是一个的话,那么就称为Self Attention.
参考：
台大李宏毅课程
payattention to后面跟什么
pay attention to后加doing。pay attention to，这里的to是作为介词使用，介词后面可以接名词、代词、动名词或名词性从句，所以是pay attention to doing。pay attention to后面接动词时，动词要用动名词形式（即-ing形式），pay attention to意思是“注意；重视”。在pay attention to，give attention to，bring attention to等结构中的to是介词，所以接动词的时候，应该用动名词。例如：There are three main issues that we need to direct our attention to.我们需要注意的主要有三个问题。双语例句1、Please pay attention to what I am saying.请注意听我讲的话。2、You should always pay attention to personal grooming.你应随时注意个人仪容。3、I didn't pay attention to what she was saying.我没有注意她在说什么。4、In doing our work, we must pay attention to ways and means.做工作应注意方式方法。
pay attention to用法总结
attention to后 面可以直接加名词、代词或者动名词，但是值得我们注意的是，这里的to是一个介词，并不是能构成动词不定式的，这和1ook forward to是一 样的。用法：1. pay attention to doing sth2. pay attention to sth.因为to在这里做介词用。e.吕1. pay attention to stateaffairs.关心国家大事2. P1ease pay attention to takingcare of your baby. 。请注意照顾好你的小孩。
attention可数吗
pay attention to是“注意；重视”意思。[例句]Should I pay attention to all these warnings? 我要注意这些警告么?You should always pay attention to personal grooming. 你应随时注意个人仪容。You must pay attention to this problem before every thing. 你应该首先注意这个问题。Say your piece out and pay attention to our feelings. 把你的话都讲出来,并注意我们的情绪。attention和pay attention to的区别：意思不同、用法不同、侧重点不同一、意思不同1.attention意思： 注意；注意力；照料；留心；关怀；(口令)立正2.pay attention to意思：注意； 留意二、用法不同1.attention用法：表示“注意”时,是不可数名词; 用作可数名词时,指具体活动,表示“殷勤”“款待”,常用复数形式。要表达引起某人对某事的注意时，用call/draw one's attention to。例句：You should focus your attention on your work.你应该把注意力放到工作上。2.pay attention to用法：不直接加宾语，而是加动名词，to作为介词。pay attention to是固定的搭配词组，不可以用其他介词替换。例句：He called my attention to some new evidence.他要我注意一些新的证据。三、侧重点不同1.attention侧重点：用于一般现在时。2.pay attention to侧重点：于一般现在时或一般将来时。
attention可数吗
attention作“注意”解时，是不可数名词；作“殷勤”解时，常用复数形式。复数是：attentions. 扩展资料 例句： The headlines commanded her attention. 那些标题引起了她的注意。 I finally managed to get her attention. 我终于设法引起了她的注意。 An unusual noise arrested his attention. 一阵不寻常的嘈杂声引起了他的.注意。 Small children have a short attention span. 幼儿注意力持续时间短。 The story has attracted worldwide attention. 这件事已经引起了全世界的关注。
