lördag 22 februari 2020

A story about a tiny bot

Significance magazine

The prediction of the stock market is without question an interesting task. A basic motivation for it is financial gain. To accomplish this task there are a number of methods available, including time series forecasting, computer techniques, and technical and fundamental analysis.1 My focus is on a branch that analyses charts. I monitor the time series of hundreds of stocks, looking for known patterns in share price changes in order to make better investment decisions. I would like to tell you how I do that.

Upplagd av kl.

Smart city big data analytics: An advanced review

Wiley Online Library
With the increasing role of ICT in enabling and supporting smart cities, the demand for big data analytics solutions is increasing. Various artificial intelligence, data mining, machine learning and statistical analysis‐based solutions have been successfully applied in thematic domains like climate science, energy management, transport, air quality management and weather pattern analysis. In this paper, we present a systematic review of the literature on smart city big data analytics. We have searched a number of different repositories using specific keywords and followed a structured data mining methodology for selecting material for the review. We have also performed a technological and thematic analysis of the shortlisted literature, identified various data mining/machine learning techniques and presented the results. Based on this analysis we also present a classification model that studies four aspects of research in this domain. These include data models, computing models, security and privacy aspects and major market drivers in the smart cities domain. Moreover, we present a gap analysis and identify future directions for research. For the thematic analysis we identified the themes smart city governance, economy, environment, transport and energy. We present the major challenges in these themes, the major research work done in the field of data analytics to address these challenges and future research directions.

Upplagd av kl.

fredag 21 februari 2020

Introducing the Total Error Framework

Upplagd av kl.

Analysis in an imperfect world

Qvintensen webbtidskrift

When we observe the world, we sometimes make mistakes. Michael Wallace, on behalf of the measurement error topic group of the STRATOS Initiative, explains the potentially severe consequences of this often overlooked issue, and how statistics can help bring us back – or at least a little closer – to the truth.

Upplagd av kl.

R-paketet countrycode

Upplagd av kl.

torsdag 20 februari 2020

Om Sverige - opinionen


https://youtu.be/5GtLoi7Lkag

Axess TV
Vart är Sverige egentligen på väg? Viss typ av brottslighet minskar absolut, men andra typer ökar som gängkriminalitet, sprängningar och skjutningar där bland annat flera oskyldiga kvinnor drabbats. Betyder den upplevda otryggheten kanske mera än den faktiska? Flera samhällsområden förefaller befinna sig i kris. Alltifrån det yttre till det inre förs- varet, polisens uppklarningsprocent när det gäller alltifrån båtstölder till skjutningar lämnar mycket i övrigt att önska. Listan förefaller kunna bli lång: sjukvården, skolan, tiggeri i välfärdslandet, parallella klansamhällen, landsbygdens utveckling eller kan- ske avveckling, bostadsbristen, arbetslösheten bland unga och invandrare, den s.k. integrationen och kommuner i kris. Demoskops septembermätning visar på allt mer tilltagande pessimism beträffande utvecklingen i Sverige. Vad bör göras?

Medverkande i del 3: Peter Santesson, Opinionschef Demoskop, och Torbjörn Sjöström, VD Novus
Upplagd av kl.

onsdag 19 februari 2020

What is statistical bias and why is it so important in data science?

Image by Arek Socha from Pixabay
What is statistical bias and why is it so important in data science?
An essential concept to create accurate machine learning models.

Table of Content:
Introduction
What is statistical bias?
Types of statistical bias
Upplagd av kl.

tisdag 18 februari 2020

The core of AI is statistics

https://youtu.be/79Ly0PKtRNU

Mattias Villani, Linköpings Universitet, föreläser för en grupp masterstudenter i statistik om hur viktigt just statistik är för användandet och utvecklingen av AI. Föreläsningen hölls under en konferens som anordnades av Svenska statistikfrämjandet.
Upplagd av kl.

Anmäl dig nu till årsmötena för Statistikfrämjandet och Medlemsföreningarna!

  • Statistikfrämjandet
  • Cramérsällskapet
  • FMS - Föreningen för Medicinsk Statistik
  • Industriell Statistik
  • Surveyföreningen

    • Läs mer »
    Upplagd av kl.

    fredag 14 februari 2020

    Fel i SCB:s statistik – detta har hänt

    SVT Nyheter

    Under hösten 2019 visar det sig att det konsultbolag som SCB anlitat levererat ett så bristfälligt resultat att myndighetens arbetslöshetsstatistik inte stämmer och måste ändras. Nu framkommer det att även SCB:s nuvarande leverantör har haft omfattade kvalitetsproblem. Det här är bakgrunden till felaktigheterna i SCB:s undersökningar.

    Läs mer...
    Upplagd av kl.

    Välkommen till Surveyföreningens kvalitetsseminarium 20 februari


    OBS Anmäl dig senast den 17:e februari!

    Inom survey- och statistikbranschen i stort diskuteras numera ofta de ökade svårigheterna och ökade kostnaderna förknippade med att göra bra surveyundersökningar, oavsett om det gäller myndigheters offentliga statistikproduktion eller marknadsundersökningarnas beslutsunderlag till olika företag. Ofta gäller diskussionen då exempelvis frågor kring hur människor kan kontaktas idag och vilka systematiska fel som kan uppkomma på grund av bortfallet.

    Under de senaste åren har flera stora privata opinionsinstituten lagt om sina väljarbarometrar som når en stor publik. Trenden har gått bort från renodlade telefonundersökningar och mot såväl blandade undersökningar som webbundersökningar. Detta väcker flera frågor, både vad gäller de kvalitetsmässiga implikationerna, och vad gäller orsakerna. Är processen driven främst av kostnadsskäl eller av omsorg om kvalitet och anpassning till människors teknik- och kommunikationsvanor?
    Läs mer »
    Upplagd av kl.

    15 Best Machine Learning (ML) Books for 2020

    15 Best Machine Learning (ML) Books for 2020

    Artificial Intelligence (AI) and Machine Learning (ML) technologies have become key innovation accelerators for organizations looking for that extra edge. And with machine learning skills being in high demand, there’s a surge in interest in this field. Machine Learning books are a great starting point for enthusiasts who want to transition to these in-demand roles. In this article we list down top machine learning books to get you started on ML journey.

    Upplagd av kl.

    One of world's first online Masters in Machine Learning now open for enrolment

    Imperial News | Imperial College London

    Beginning on 14 September 2020, the degree is one of the first online courses that focuses on Machine Learning and its applications.

    The online part-time degree will teach students in the computational, mathematical and statistical foundations of Machine Learning. Applications are now open on the College website.

    Upplagd av kl.

    Tidigare statistiker på SCB: ”Herregud vad har vi gjort?”

    SVT Nyheter

    I höstas tvingades SCB ändra arbetslöshetsstatistiken efter felaktiga siffror från underleverantören Evry. Nu kan SVT avslöja att det även tidigare funnits problem med resultaten från Evrys telefonintervjuer.

    – Jag skulle inte lita på de siffrorna som Evry lämnat, säger den pensionerade statistikern Kjell Jansson när han tar del av en siffror från SCB:s och Evrys arbete med arbetskraftsundersökningen AKU.

    Upplagd av kl.

    A Gentle Intro to Probability and Statistics for Data Science

    A Gentle Intro to Probability and Statistics for Data Science

    Data Science is impossible without a solid knowledge of probability and statistics. But often we just lose our interest in this because of boring and complicated statistic terms. Yes, probability and statistics are boring, but today I want to change your attitude to this and show a little bit more convenient way to learn all the important concepts.

    This article is a detailed set of all the necessary statics steps you need to take before jumping into data science. Let’s go!

    Upplagd av kl.

    torsdag 13 februari 2020

    Who Will Win The 2020 Democratic Primary?

    Who Will Win The 2020 Democratic Primary?

    Our latest forecast for how many pledged delegates each candidate will win after all states have voted.

    FiveThirtyEight’s model simulates the primary season thousands of times to find the most likely outcome for each candidate. The chart shows how many delegates, on average, each candidate is projected to have pledged to them at each point in the primary season, along with a range of possible delegate counts. We’re also showing the distribution of simulated final pledged delegate counts in the table, where taller bars mean a more likely outcome. Right now, many candidates, even the front-runners, wind up with tall bars close to zero — generally, those are simulations where the candidate dropped out before having a chance to accumulate many delegates.

    Upplagd av kl.

    Fler utlandsfödda lämnar Sverige än folkbokföringen visar

    forskning.se

    Officiella siffror i Sverige överskattar antalet migranter som bor i landet. Det beror på att fler utlandsfödda lämnar Sverige än vad som tidigare varit känt, enligt en ny studie i demografi från Stockholms universitet.

    Upplagd av kl.

    SVT avslöjar: Fler av SCB:s underleverantörer har haft problem

    SVT Nyheter

    I höstas sparkade myndigheten SCB ut underleverantören Evry efter stora kvalitetsproblem med arbetslöshetssiffrorna. Nu kan SVT avslöja att SCB även haft omfattande problem med sin nuvarande leverantör av telefonintervjuer, Origo Group.

    Upplagd av kl.

    onsdag 12 februari 2020

    Stödröstning 1968-2018

    Upplagd av kl.

    Mätningarnas mätning

    Upplagd av kl.

    tisdag 4 februari 2020

    Rösthaveriet i Iowa

    Från SvD
    Sent på måndagen när invånarna i Iowa som första delstat hade valt bland Demokraternas presumtiva presidentkandidater så fanns ännu ingen vinnare. Partiet meddelade att de siffror som rapporterats in inte stämde och att redovisningen behövde fördröjas.

    Resultatet, när det väl kommer, finns här.

    Fiaskot var inte alldeles oväntat. Även för fyra år sedan blev resultatet av Demokraternas ”caucus”, nomineringsmöte, i Iowa fördröjt. Fast då främst beroende på att läget var så jämnt mellan Hillary Clinton och Bernie Sanders. Hon vann till slut, men misstankar spreds om valfusk från Clintonsidan.

    Upplagd av kl.

    Emissions – the ‘business as usual’ story is misleading

    Nature
    Stop using the worst-case scenario for climate warming as the most likely outcome — more-realistic baselines make for better policy.

    More than a decade ago, climate scientists and energy modellers made a choice about how to describe the effects of emissions on Earth’s future climate. That choice has had unintended consequences which today are hotly debated. With the Sixth Assessment Report (AR6) from the Intergovernmental Panel on Climate Change (IPCC) moving into its final stages in 2020, there is now a rare opportunity to reboot.

    In the lead-up to the 2014 IPCC Fifth Assessment Report (AR5), researchers developed four scenarios for what might happen to greenhouse-gas emissions and climate warming by 2100. They gave these scenarios a catchy title: Representative Concentration Pathways (RCPs)1. One describes a world in which global warming is kept well below 2 °C relative to pre-industrial temperatures (as nations later pledged to do under the Paris climate agreement in 2015); it is called RCP2.6. Another paints a dystopian future that is fossil-fuel intensive and excludes any climate mitigation policies, leading to nearly 5 °C of warming by the end of the century2,3. That one is named RCP8.5.

    Upplagd av kl.

    Analysis in an imperfect world

    Upplagd av kl.

    fredag 31 januari 2020

    Årsmöte i Svenska statistikfrämjandet den 18-19/3 2020

    Välkommen till årsmötesdagar i Svenska statistikfrämjandet och medlemsföreningarna 18-19/3!
    Onsdag den 18 mars är det dags för årsmöte i Svenska statistikfrämjandet, och dagen efter (torsdag 19/3) håller medlemsföreningarna sina årsmöten.

    Läs mer »
    Upplagd av kl.

    onsdag 29 januari 2020

    Anmälningsstatistiken jämfört med konstaterade fall

    Upplagd av kl.

    Osäker framtid för statistiska institutionen i Lund

    Foto: Charlotte Carlberg Bärg
    Lundagard.se
    Framtiden för statistiska institutionen som en egen institution har diskuterats tidigare, men har återaktualiserats under hösten 2019. Nu ser man över möjligheterna att slå samman institutionen med nationalekonomiska institutionen.

    Upplagd av kl.

    Hur kvalitetssäkrar ni indata i den här mätningen?

    Upplagd av kl.

    Administrative Records Mask Racially Biased Policing

    Upplagd av kl.

    In conversation with... Michael Wallace

    From Significance magazine

    Following our forays into podcasting last year, in 2020 we plan to bring you more audio interviews with a selection of people doing fantastic and fascinating work in the field of statistics and data science. And our first interview is with Michael Wallace, author of our February 2020 cover story on measurement error, "Analysis in an imperfect world".

    Wallace is an assistant professor of biostatistics in the Department of Statistics and Actuarial Science at the University of Waterloo, Ontario, Canada, and a member of the Significance editorial board.

    This interview with podcast host Niamh Cahill covers Wallace's career, research interests, and thoughts on statistics and data science.

    Listen to the podcast below, or subscribe to our SoundCloud channel.

    Upplagd av kl.

    CHECKLISTA FÖR UNDERSÖKNINGAR – rapportering och redovisning

    Från Surveyföreningen
    Aktörer som gör undersökningar eller skriver om undersökningar bör kunna svara på samtliga 12 frågor nedan.

    Läs mer »
    Upplagd av kl.
    Prenumerera på: Inlägg (Atom)