<div dir="ltr">All of these ideas are good, but they've also been tried in the past.<div><br></div><div>One of the issues is that the conference organizers are focussed on a single year's conference, so they're heads down making that thing happen. Collecting feedback on talks is really something that _future_ years care about. However, the conference web site is provided by the current year, so any work they did on a review system would be diverting resources from the conference they signed up to deliver. This is especially true for 2017, where the conference team chose to not use the system previously used for LCA and build a new one, which diverted a lot of resources from other things.</div><div><br>That said, the papers chairs do informally collect feedback. If you have something positive (or negative) to say, I'd encourage you to reach out to the LCA Papers Chairs at <a href="mailto:papers-chair@linux.org.au">papers-chair@linux.org.au</a>.</div><div><br></div><div>Michael</div><div><br></div><div><br></div><div><br><div class="gmail_extra"><br><div class="gmail_quote">On Wed, Jan 25, 2017 at 7:02 PM, Tim Serong via Chat <span dir="ltr"><<a href="mailto:chat@lists.lca2017.linux.org.au" target="_blank">chat@lists.lca2017.linux.org.au</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><span class="gmail-">On 01/25/2017 06:08 PM, Michael Lake wrote:<br>
> Hi all<br>
><br>
> I'm generally in favour of a talk rating system but it would not be nice to have a system whereby the rating of all speakers is public knowledge.<br>
> Some speakers would be at the bottom of the barrel. That's good for the organisers to have but not to be made public just out of courtesy.<br>
<br>
</span>Good for speakers too.  If my talk sucked, I want to know about it.  But<br>
I take your point about ratings being non-public by default.<br>
<span class="gmail-"><br>
> One could though also have a public rating system of the top, say 10 talks.  That way the bottom of that list is still being rated amount the top 10% of all talks.<br>
<br>
</span>I like that idea.<br>
<span class="gmail-"><br>
> Having a way to have private non-anonymous or anonymous feedback to the speaker, either good or suggestions for improvement, is fraught with ethical problems. It would be good to provide a way for attendees to provide feed back but we can't have a system whereby people can just heap shit on some speaker anonymously. It's a difficult problem to solve.<br>
<br>
</span>If it's paper-based, everyone going into a talk gets one bit of paper<br>
(difficult to abuse).  If it's website based, all raters have to be<br>
registered conference attendees, be logged in, and are allowed one<br>
rating per talk (anonymously at rater's request).  In either case, if<br>
someone's going to be an asshole, at least they only get one shot per<br>
talk.  Most of us won't be assholes, so the constructive/positive should<br>
outweigh the nasty.  Worst case, all feedback could be moderated by<br>
conference organisers/volunteers if bad behaviour is seen to be a<br>
significant risk.<br>
<br>
Tim<br>
<div class="gmail-HOEnZb"><div class="gmail-h5"><br>
><br>
> Mike Lake<br>
><br>
> ______________________________<wbr>__________<br>
> From: Chat [<a href="mailto:chat-bounces@lists.lca2017.linux.org.au">chat-bounces@lists.lca2017.<wbr>linux.org.au</a>] on behalf of Tim Serong via Chat [<a href="mailto:chat@lists.lca2017.linux.org.au">chat@lists.lca2017.linux.org.<wbr>au</a>]<br>
> Sent: Wednesday, January 25, 2017 3:56 PM<br>
> To: <a href="mailto:chat@lists.lca2017.linux.org.au">chat@lists.lca2017.linux.org.<wbr>au</a><br>
> Subject: Re: [Chat] Collecting general feedback about the conference?<br>
><br>
> On 01/24/2017 09:24 PM, Jan Groth via Chat wrote:<br>
>> First of all: I had a great time in Hobart and would very much like to<br>
>> thank everyone who participated and contributed to the conference!<br>
>><br>
>> After Geelong 2016 this was my second Linuxconf, and it's probably<br>
>> only natural to compare the two events:<br>
>><br>
>> While 2017 certainly was a good conference, I must say that I found<br>
>> 2016 far more relevant for me. That is more talks about topics that I<br>
>> consider interesting and relevant, and fewer talks about topics that I<br>
>> didn't manage to connect to.<br>
>><br>
>> I'm sure that others have a different perception - which is perfectly<br>
>> fine - but I was wondering if there are channels to collect this kind<br>
>> of feedback (ideally in a more systematic and fine-grained way)?<br>
><br>
> There's nothing official along those lines for LCA 2017.  Some F/OSS<br>
> conferences have wound up with ad-hoc speaker feedback on third party<br>
> sites (lanyrd maybe?) but I'm not sure if that's happened for LCAs or<br>
> not offhand.<br>
><br>
>>From some previous discussions I've had there's at least a few ways<br>
> speaker feedback could potentially be facilitated in future:<br>
><br>
> - Build a rating thingy into the conference web site, so delegates can<br>
> rate talks (delegates have to remember to rate talks).<br>
> - Same as above, but with a mobile app.<br>
> - Hand out bits of paper at each talk to collect feedback (either "tick<br>
> the boxes", or a simpler "dump red/amber/green pieces of paper in a<br>
> bucket as a hand-wavey quality metric")<br>
><br>
> The paper based options probably get more feedback from more people than<br>
> the online ones, but are more load on volunteers.<br>
><br>
>> Taking that idea one step further: For future conferences, would it be<br>
>> worthwhile to collect feedback on a talk / presenter level?<br>
>><br>
>> * I've seen a few outstanding presentations and certainly wouldn't<br>
>> mind letting the speaker know about it.<br>
>><br>
>> * I also went to talks where someone presented massive walls of text<br>
>> and simply read out slide after slide after slide in a very monotonous<br>
>> voice. The guy next to me even fell asleep, I'm not making this up.<br>
>><br>
>> * Sometimes only very small things went wrong, e.g. the presenter<br>
>> typing into the bottom line of a console - which only the people in<br>
>> the front row could see, but everyone else being too polite to mention<br>
>> / yell out.<br>
>><br>
>> If I was a speaker I would be very happy to receive this kind of<br>
>> feedback and try to improve for the next time.<br>
><br>
> Likewise.  I really appreciate feedback when I've been a speaker,<br>
> because it helps me in my attempts to improve my presentations.<br>
><br>
> Cheers,<br>
><br>
> Tim<br>
> ______________________________<wbr>_________________<br>
> Chat mailing list<br>
> <a href="mailto:Chat@lists.lca2017.linux.org.au">Chat@lists.lca2017.linux.org.<wbr>au</a><br>
> <a href="http://lists.lca2017.linux.org.au/mailman/listinfo/chat" rel="noreferrer" target="_blank">http://lists.lca2017.linux.<wbr>org.au/mailman/listinfo/chat</a><br>
> UTS CRICOS Provider Code: 00099F DISCLAIMER: This email message and any accompanying attachments may contain confidential information. If you are not the intended recipient, do not read, use, disseminate, distribute or copy this message or attachments. If you have received this message in error, please notify the sender immediately and delete this message. Any views expressed in this message are those of the individual sender, except where the sender expressly, and with authority, states them to be the views of the University of Technology Sydney. Before opening any attachments, please check them for viruses and defects. Think. Green. Do. Please consider the environment before printing this email.<br>
><br>
><br>
<br>
<br>
</div></div><span class="gmail-HOEnZb"><font color="#888888">--<br>
Tim Serong<br>
Senior Clustering Engineer<br>
SUSE<br>
<a href="mailto:tserong@suse.com">tserong@suse.com</a><br>
</font></span><div class="gmail-HOEnZb"><div class="gmail-h5">______________________________<wbr>_________________<br>
Chat mailing list<br>
<a href="mailto:Chat@lists.lca2017.linux.org.au">Chat@lists.lca2017.linux.org.<wbr>au</a><br>
<a href="http://lists.lca2017.linux.org.au/mailman/listinfo/chat" rel="noreferrer" target="_blank">http://lists.lca2017.linux.<wbr>org.au/mailman/listinfo/chat</a><br>
</div></div></blockquote></div><br><br clear="all"><div><br></div>-- <br><div class="gmail_signature">Rackspace Australia</div>
</div></div></div>