Teori informasi: Perbedaan antara revisi

Konten dihapus Konten ditambahkan
SieBot (bicara | kontrib)
Astari28 (bicara | kontrib)
Fitur saranan suntingan: 3 pranala ditambahkan.
 
(24 revisi perantara oleh 16 pengguna tidak ditampilkan)
Baris 1:
[[Berkas:Binary entropy plot.svg|jmpl|Fungsi entropi biner Bernoulli]]'''Teori informasi''' ([[bahasa Inggris|Inggris]]: ''information theory'') adalah disiplin ilmu dalam bidang [[matematika terapan]] yang berkaitan dengan kuantisasi data sehingga data atau [[informasi]] itu dapat disimpan dan dikirimkan tanpa kesalahan (error) melalui suatu kanal komunikasi. [[Entropi informasi]] (''information entropy)'' sering dipakai sebagai alat untuk maksud ini, dan biasanya dinyatakan sebagai banyaknya bit rerata yang diperlukan untuk penyimpanan dan pengiriman informasi tersebut. Sebagai contoh, jika keadaan cuaca harian dinyatakan dengan [[entropi]] 3 [[bit]], maka kita katakan bahwa cuaca itu mempunyai rata-rata 3 bit tiap harinya.
 
Aplikasi dari topik dasar dalam '''teori informasi''' meliputi [[kompresi data]] tanpa cacat (''lossless data compression'', pada file ZIP misalnya), kompresi data (''lossy data compression'', pada file MP3, misalnya), dan pengkodean kanal (''channel coding'', pada saluran DSL, ADSL dll). Biasanya teori informasi merupakan titik temu dari bidang –bidang matematika, statistika, [[ilmu komputer]], fisika, neurobiologi, dan teknik listrik serta komputer. Implementasi dari teori ini berdampak langsung dengan misi ruang angkasa, pemahaman mengenai lubang hitam dalam galaksi, dengan penelitian [[linguistika]] dan [[persepsi manusia]], dengan [[jaringan komputer]], jaringan [[Internet]] serta jaringan [[telepon genggam]].
 
Secara khusus, '''teori informasi''' adalah cabang dari [[matematika]] [[peluang]] dan [[statistik]], yang berkaitan dengan konsep [[informasi]] dan [[entropi informasi]] seperti telah dijelaskan di atas. [[Claude E. Shannon]] ([[1916]]-[[2001]]) dikenal sebagai "bapak dari teori informasi". Shannon mendefinisikan pengukuran dari [[entropi informasi]] (dalam bit) sebagai:
[[Berkas:Binary entropy plot.svg|thumb|Fungsi entropi biner Bernoulli]]
 
:<math>H = - \sum_{i} p_{i} \loglog_2 p_{i} \,</math>
Secara khusus, '''teori informasi''' adalah cabang dari [[matematika]] [[peluang]] dan [[statistik]], yang berkaitan dengan konsep [[informasi]] dan [[entropi informasi]] seperti telah dijelaskan di atas. [[Claude E. Shannon]] ([[1916]]-[[2001]]) dikenal sebagai "bapak dari teori informasi". Shannon mendefinisikan pengukuran dari [[entropi informasi]] sebagai:
 
:<math>H = - \sum_{i} p_{i} \log p_{i} \,</math>
 
Rumus ini jika diterapkan pada suatu sumber informasi, dapat menentukan kapasitas dari saluran yang diperlukan untuk mengirim data yang diterjemahkan ke dalam digit biner.
 
== Pranala luar ==
* [http://www.lecb.ncifcrf.gov/~toms/paper/primer NCIFCRF.gov] {{Webarchive|url=https://web.archive.org/web/20120829010323/http://www.lecb.ncifcrf.gov/~toms/paper/primer/ |date=2012-08-29 }}, Eprint, Schneider, T., "Information Theory Primer"
* [http://www.nd.edu/~jnl/ee80653/tutorials/sunil.pdf ND.edu], Srinivasa, S. "A Review on Multivariate Mutual Information"
* [http://www.conceptsearching.com/Web/home/technology/lateral-thinking.aspx Conceptsearching.com] {{Webarchive|url=https://web.archive.org/web/20100204133932/http://www.conceptsearching.com/Web/home/technology/lateral-thinking.aspx |date=2010-02-04 }}, Challis, J. , "Lateral Thinking in Information Retrieval"
* [http://jchemed.chem.wisc.edu/Journal/Issues/1999/Oct/abs1385.html Chem.wisc.edu], [[Journal of Chemical Education]], ''Shuffled Cards, Messy Desks, and Disorderly Dorm Rooms - Examples of Entropy Increase? Nonsense!''
* [http://www.itsoc.org/index.html ITsoc.org] {{Webarchive|url=https://web.archive.org/web/20090122063052/http://itsoc.org/index.html |date=2009-01-22 }}, IEEE Information Theory Society and [http://www.itsoc.org/review.html ITsoc.org] {{Webarchive|url=https://web.archive.org/web/20090122063122/http://itsoc.org/review.html |date=2009-01-22 }} review articles
* [http://www.inference.phy.cam.ac.uk/mackay/itila/ Cam.ac.uk], On-line textbook: "Information Theory, Inference, and Learning Algorithms" by [[David MacKay (scientist)|David MacKay]] - giving an entertaining and thorough introduction to Shannon theory, including state-of-the-art methods from coding theory, such as [[arithmetic coding]], [[low-density parity-check code]]s, and [[Turbo code]]s.
* [http://research.umbc.edu/~erill/Documents/Introduction_Information_Theory.pdf UMBC.edu], Eprint, Erill, I., "A gentle introduction to information content in transcription factor binding sites"
 
{{Bidang matematika}}
{{matematika-stub}}
 
{{Authority control}}
[[Kategori:Teori informasi]]
 
[[Kategori:Teori informasi| ]]
[[ar:نظرية المعلومات]]
[[Kategori:Matematika]]
[[bar:Informationstheorie]]
 
[[bg:Теория на информацията]]
 
[[bn:তথ্য তত্ত্ব]]
{{matematika-stub}}
[[ca:Teoria de la informació]]
[[ckb:بیردۆزی زانیاری]]
[[cs:Teorie informace]]
[[da:Informationsteori]]
[[de:Informationstheorie]]
[[en:Information theory]]
[[es:Teoría de la información]]
[[et:Informatsiooniteooria]]
[[fa:نظریه اطلاعات]]
[[fi:Informaatioteoria]]
[[fr:Théorie de l'information]]
[[gl:Teoría da información]]
[[he:תורת האינפורמציה]]
[[hr:Teorija informacije]]
[[hu:Információelmélet]]
[[io:Informo-teorio]]
[[it:Teoria dell'informazione]]
[[ja:情報理論]]
[[ka:ინფორმაციის თეორია]]
[[ko:정보 이론]]
[[lt:Informacijos teorija]]
[[lv:Informācijas teorija]]
[[nl:Informatietheorie]]
[[no:Informasjonsteori]]
[[pl:Teoria informacji]]
[[pt:Teoria da informação]]
[[ru:Теория информации]]
[[simple:Information theory]]
[[sk:Teória informácií]]
[[sl:Teorija informacij]]
[[sr:Теорија информације]]
[[sv:Informationsteori]]
[[ta:தகவல் கோட்பாடு]]
[[th:ทฤษฎีข้อมูล]]
[[uk:Теорія інформації]]
[[ur:نظریۂ اطلاعات]]
[[zh:信息论]]