Versions Compared

Key

  • This line was added.
  • This line was removed.
  • Formatting was changed.

- LUONNOS

Melindan tuplakontrolli ei sovellu automaattisten tuplasiivousajojen toteuttamiseen, joten tähän on vuosien varrella pyritty kehittämään työkaluja. Käytettäviä algoritmeja kehitetttiin 2014-2015 yhteistyössä tekniikka- ja sisältöasiantuntijoiden kesken siten, että tietueissa tutkittavat piirteet perustuivat formaatin ja kuvailusääntöjen mukaisiin merkittäviin piirteisiin, joiden keskinäisiä painoarvoja hiottiin kokeilemalla työkaluja testiaineistoon. Vertailussa käytettävien painotuksia kehitettiin myös "kouluttamalla" algoritmeja Merge+ -ohjelman lokien perusteella - siis tutkimalla ihmisen yhdistämiä tietueita ja tunnistamalla näistä koneellisesti, mitkä piirteet ovat samankaltaisuuden määrittelyssä merkityksellisiä.

...