Beberapa waktu yang lalu, saya memutuskan menggunakan backend Tensorflow pada package Keras setelah sebelumnya menggunakan backend Theano. Namun saat pertama kali akan menginstall package Tensorflow, proses installasi tidak berjalan begitu mulus, muncul error di console sebagai berikut

Traceback (most recent call last):
  File "C:\Users\abimahan\AppData\Local\Programs\Python\Python36\lib\site-packages\tensorflow\python\pywrap_tensorflow_internal.py", line 14, in swig_import_helper
    return importlib.import_module(mname)
  File "C:\Users\abimahan\AppData\Local\Programs\Python\Python36\lib\importlib\__init__.py", line 126, in import_module
    return _bootstrap._gcd_import(name[level:], package, level)
  File "", line 994, in _gcd_import
  File "", line 971, in _find_and_load
  File "", line 955, in _find_and_load_unlocked
  File "", line 658, in _load_unlocked
  File "", line 571, in module_from_spec
  File "", line 922, in create_module
  File "", line 219, in _call_with_frames_removed
ImportError: DLL load failed: A dynamic link library (DLL) initialization routine failed.

During handling of the above exception, another exception occurred:

Traceback (most recent call last):
  File "C:\Users\abimahan\AppData\Local\Programs\Python\Python36\lib\site-packages\tensorflow\python\pywrap_tensorflow.py", line 58, in
    from tensorflow.python.pywrap_tensorflow_internal import *
  File "C:\Users\abimahan\AppData\Local\Programs\Python\Python36\lib\site-packages\tensorflow\python\pywrap_tensorflow_internal.py", line 17, in
    _pywrap_tensorflow_internal = swig_import_helper()
  File "C:\Users\abimahan\AppData\Local\Programs\Python\Python36\lib\site-packages\tensorflow\python\pywrap_tensorflow_internal.py", line 16, in swig_import_helper
    return importlib.import_module('_pywrap_tensorflow_internal')
  File "C:\Users\abimahan\AppData\Local\Programs\Python\Python36\lib\importlib\__init__.py", line 126, in import_module
    return _bootstrap._gcd_import(name[level:], package, level)
ModuleNotFoundError: No module named '_pywrap_tensorflow_internal'

During handling of the above exception, another exception occurred:

Traceback (most recent call last):
  File "F:\Kuliah\Tesis\Progres Tesis\Script\progress\test LSTM\_LSTM.py", line 12, in
    from keras.models import Sequential
  File "C:\Users\abimahan\AppData\Local\Programs\Python\Python36\lib\site-packages\keras\__init__.py", line 3, in
    from . import utils
  File "C:\Users\abimahan\AppData\Local\Programs\Python\Python36\lib\site-packages\keras\utils\__init__.py", line 6, in
    from . import conv_utils
  File "C:\Users\abimahan\AppData\Local\Programs\Python\Python36\lib\site-packages\keras\utils\conv_utils.py", line 9, in
    from .. import backend as K
  File "C:\Users\abimahan\AppData\Local\Programs\Python\Python36\lib\site-packages\keras\backend\__init__.py", line 84, in
    from .tensorflow_backend import *
  File "C:\Users\abimahan\AppData\Local\Programs\Python\Python36\lib\site-packages\keras\backend\tensorflow_backend.py", line 5, in
    import tensorflow as tf
  File "C:\Users\abimahan\AppData\Local\Programs\Python\Python36\lib\site-packages\tensorflow\__init__.py", line 22, in
    from tensorflow.python import pywrap_tensorflow  # pylint: disable=unused-import
  File "C:\Users\abimahan\AppData\Local\Programs\Python\Python36\lib\site-packages\tensorflow\python\__init__.py", line 49, in
    from tensorflow.python import pywrap_tensorflow
  File "C:\Users\abimahan\AppData\Local\Programs\Python\Python36\lib\site-packages\tensorflow\python\pywrap_tensorflow.py", line 74, in
    raise ImportError(msg)
ImportError: Traceback (most recent call last):
  File "C:\Users\abimahan\AppData\Local\Programs\Python\Python36\lib\site-packages\tensorflow\python\pywrap_tensorflow_internal.py", line 14, in swig_import_helper
    return importlib.import_module(mname)
  File "C:\Users\abimahan\AppData\Local\Programs\Python\Python36\lib\importlib\__init__.py", line 126, in import_module
    return _bootstrap._gcd_import(name[level:], package, level)
  File "", line 994, in _gcd_import
  File "", line 971, in _find_and_load
  File "", line 955, in _find_and_load_unlocked
  File "", line 658, in _load_unlocked
  File "", line 571, in module_from_spec
  File "", line 922, in create_module
  File "", line 219, in _call_with_frames_removed
ImportError: DLL load failed: A dynamic link library (DLL) initialization routine failed.

During handling of the above exception, another exception occurred:

Traceback (most recent call last):
  File "C:\Users\abimahan\AppData\Local\Programs\Python\Python36\lib\site-packages\tensorflow\python\pywrap_tensorflow.py", line 58, in
    from tensorflow.python.pywrap_tensorflow_internal import *
  File "C:\Users\abimahan\AppData\Local\Programs\Python\Python36\lib\site-packages\tensorflow\python\pywrap_tensorflow_internal.py", line 17, in
    _pywrap_tensorflow_internal = swig_import_helper()
  File "C:\Users\abimahan\AppData\Local\Programs\Python\Python36\lib\site-packages\tensorflow\python\pywrap_tensorflow_internal.py", line 16, in swig_import_helper
    return importlib.import_module('_pywrap_tensorflow_internal')
  File "C:\Users\abimahan\AppData\Local\Programs\Python\Python36\lib\importlib\__init__.py", line 126, in import_module
    return _bootstrap._gcd_import(name[level:], package, level)
ModuleNotFoundError: No module named '_pywrap_tensorflow_internal'


Failed to load the native TensorFlow runtime.

See https://www.tensorflow.org/install/install_sources#common_installation_problems

for some common reasons and solutions.  Include the entire stack trace
above this error message when asking for help.

Setelah berselancar untuk menemukan jawaban, akhirnya saya mengetahui bahwa hal tersebut hanya terjadi jika saya menggunakan Tensorflow versi 1.6 keatas. Dan yang lebih membuat prihatin adalah, error tersebut hanya terjadi pada CPU yang belum support AVX feature (harap maklum, hardware yang saya gunakan sudah agak outdated untuk keperluan Deep Learning dan kawan-kawannya). Untuk itu, saya punya dua opsi jika ingin tetap menggunakan Tensorflow sebagai backend di Keras.

SOLUSI PERTAMA

Solusi pertama yang paling masuk akal adalah dengan melakukan downgrade dari Tensorflow versi 1.6 ke versi 1.5 atau yang lebih rendah dengan mengetikkan perintah berikut pada command prompt

pip install --upgrade --ignore-installed tensorflow==1.5

SOLUSI KEDUA

Solusi yang kedua adalah dengan menginstall package Tensorflow dengan menggunakan file .whl yang dibuild sesuai dengan arsitektur komputer saya. File .whl dapat di download melalui situs https://github.com/fo40225/tensorflow-windows-wheel/tree/master/1.6.0/py36/CPU/sse2 kemudian install file tersebut. Jika belum mengetahui bagaimana cara menginstall file .whl, dapat melihat di tutorial berikut.

Oke sekian, jika ada yang ingin didiskusikan dapat meninggalkan komentar dbawah.
Salam

Pada tulisan kali ini saya akan berbagi tentang cara update package pip yang sudah outdated. Kenapa kita harus update package pip yang sudah uotdated? Tentu saja, biar sangar.

Oke tak perlu berlama-lama lagi, pada artikel ini saya akan memberikan 2 alternatif cara untuk update package pip. Cara yang pertama adalah dengan melakukan update satu per satu, dan yang kedua adalah dengan melakukan update keseluruhan secara otomatis.


CARA PERTAMA

- Pada cara yang pertama ini adalah dengan melakukan cek terhadap package pip yang outdated dengan mengetikkan perintah berkut pada command prompt

pip list --outdated

- Setelah itu, melakukan update terhadap package yang ingin kita update dengan perintah berikut

pip install [package_name] --upgrade


CARA KEDUA

Pada cara kedua ini, kita akan melakukan update secara otomatis kepada semua package pip yang outdated. Perintah yang bisa ketikkan adalah sebagai berikut

pip list --outdated --format=freeze | grep -v '^\-e' | cut -d = -f 1  | xargs -n1 pip install -U

Sedangkan untuk versi pip yang lebih lama, dapat menggunakan perintah berikut

pip freeze --local | grep -v '^\-e' | cut -d = -f 1  | xargs -n1 pip install -U

Perintah grep digunakan untuk men-skip definisi package yang dapat diedit ("-e"). Sedangkan parameter -n1 pada perintah xargs digunakan untuk mencegah gagalnya update secara keseluruhan apabila ada satu package yang gagal di update.

Sekian untuk tulisan kali ini, salam.

Karena satu dan lain hal, akhirnya saya memutuskan untuk hijrah dari madzhab 32bit menuju madzhab 64bit. Walaupun secara penggunaan tidak terlalu berbeda secara signifikan, namun ada beberapa hal yang harus disesuaikan dengan arsitektur yang digunakan sekarang.

Salah satunya adalah penyesuaian package-package python. Jika sama-sama menggunakan 32bit, proses pemindahan akan lebih sederhana karena tinggal copy paste folder python yang lama ke folder python yang baru, maka otomatis package yang sudah di install di sistem yang lama akan tercopy ke sistem yang baru. Namun jika dari 32bit ke 64bit hal ini tidak bisa dilakukan karena package pada python membutuhkan kalkulasi yang lebih akurat berdasarkan arsitektur komputer yang digunakan. Sehingga mau tidak mau harus melakukan instalasi package dari awal lagi.

Tetapi jika kita melakukan instalasi satu per satu dari awal maka akan memakan waktu yang cukup lama. Nah untuk menghindari itu, maka kita bisa melakukan hal berikut ini

- Hal yang pertama kita lakukan adalah dengan mengcopy list package yang telah kita install sebelumnya kedalam sebuah file dengan mengetikan perintah berikut pada command prompt

pip freeze > packages.txt

Setelah kita mengetikkan perintah tersebut maka akan terbuat file pada direktori C:\Windows\System32 dengan nama packages.txt yang berisi list package yang kita install.
Setelah itu kita copy file tersebut ke sistem yang baru.

- Setelah itu, kita dapat melakukan instalasi package python pada sistem yang baru dengan list package yang sama dengan package yang ada pada sistem sebelumnya dengan mengetikkan di command prompt perintah berikut (letakkan file packages.txt pada direktori C:\Windows\System32 di sistem yang baru)

pip install -r packages.txt

Sekian, apabila ada yang ingin didiskusikan silahkan tinggalkan di kolom komentar

Beberapa waktu yang lalu, waktu komputer saya masih ber-madzhab 32bit, saya mengalami kesulitan saat akan menggunakan package Keras pada bahasa pemrograman python. Namun sebelum itu, apa itu Keras? Bukan, bukan keras yang itu. Keras adalah package python yang biasa digunakan untuk Neural Network, Machine Learning, dan semacamnya. Nah, pada saat menjalankan sampel kode yang menggunakan package keras muncul error seperti berikut ini

ModuleNotFoundError: No module named 'tensorflow'

Error nya cukup jelas, seharusnya kita tinggal install package tensorflow dan masalah pun terselesaikan. Namun ternyata, package tensorflow hanya tersedia untuk komputer dengan arsitektur 64bit saja. Oleh karena komputer saya 32bit, maka saya mencoba berputar-putar di situs stackoverflow dan alhamdulillah ketemu lah solusi nya, yaitu dengan mengganti backend tensorflow dengan backend theano. Berikut langkah-langkah secara rinci nya

- Pertama yang harus dilakukan adalah meng-install package Theano dengan mengetikkan perintah berikut pada command prompt

pip install theano

- Setelah proses instalasi package selesai, pergi lah ke direktori C:\Users\%Nama User%\.keras lalu buka file keras.json menggunakan text editor favorit kalian. Atau jika file tersebut belum ada, maka kita bisa membuat sendiri file tersebut dan kemudian isi dengan kode berikut

{
    "image_data_format": "channels_last",
    "epsilon": 1e-07,
    "floatx": "float32",
    "backend": "tensorflow"
}


setelah itu dari kode tersebut, ubahlah tensorflow menjadi theano untuk mengubah backend yang akan kita gunakan menjadi Theano, lalu simpan.

Sekian, semoga bermanfaat. Apabila ada hal yang ingin didiskusikan silahkan tinggalkan di kolom komentar.
Salam

Beberapa waktu yang lalu karena ingin memulai lembar kehidupan yang baru (halah) komputer yang biasa saya gunakan saya install ulang. Dan salah satu proses yang cukup merepotkan setelah install ulang adalah setting evelopment environment dari awal lagi.

Dan hal yang kadang terjadi dan cukup menjengkelkan ketika setting DevEnv adalah gagalnya instalasi karena belum terpenuhinya System Requirement dari aplikasi yang ingin kita install karena sistem yang baru saja kita install ulang. Oleh karena itu daripada harus bolak balik googling setiap kali install ulang, saya coba untuk mendokumentasikan nya disini.

Masalah yang akan kita bahas kali ini adalah gagalnya proses instalasi  package statsmodels pada sistem operasi windows. Jadi pada saat saya akan menginstall package statsmodels yang akan digunakan untuk keperluan tesis saya, proses instalasi gagal dilakukan dan muncul error berikut

error: Microsoft Visual C++ 14.0 is required. Get it with "Microsoft Visual C++ Build Tools": http://landinghub.visualstudio.com/visual-cpp-build-tools

Sebenarnya error nya sangat jelas dan masalah akan terselesaikan dengan saya menginstall Visual C++ Build Tools di alamat yang disediakan. Namun yang menjadi masalah adalah size dari Visual C++ Build Tools tersebut. Size program ketika di download sih kecil, tapi ketika akan di install diharuskan mendownload data tambahan yang ukurannya bergiga-giga. Jika saya lanjutkan, tentu saja hal tersebut cukup memakan banyak kuota waktu. Jadi setelah googling beberapa saat, solusi yang saya dapat adalah sebagai berikut

- Pertama adalah download package statsmodels yang masih berupa file .whl di situs https://www.lfd.uci.edu/~gohlke/pythonlibs/

- Kemudian install file .whl yang kita download tadi. Jika belum tau cara instalasi file .whl, dapat melihat caranya di tulisan saya sebelumnya.

Oke kiranya cukup sekian untuk kali ini, semoga bermanfaat!

Sudah cukup lama blog ini nganggur, dan karena satu dan lain hal (baca: pengangguran) maka saya putuskan untuk ngurusin blog ini lagi. Sebenarnya sudah ada beberapa draft yang saya tulis, tapi kali ini mari mulai dengan sesuatu yang ringan.

Salah satu sebab yang membuat saya cukup tertarik dengan bahasa pemrograman python adalah banyaknya package yang tersedia secara gratis, baik untuk keperluan statistik, web development, dan lain sebagainya.

Selain package ini dapat memudahkan kita dalam kehidupan berbangsa dan bernegara, cara installnya juga cukup mudah. Terdapat beberapa cara untuk menginstall package yang ada di python, cara yang paling mudah adalah dengan menggunakan perintah pip pada command prompt (pastikan pip sudah ditambahkan pada user path).

CARA PERTAMA

Untuk contoh kali ini adalah menginstall package statsmodels. Statsmodels adalah package python yang biasa digunakan untuk keperluan statistik. Setelah membuka command prompt (open as administrator, dan pastikan komputer terhubung dengan jaringan internet) lalu ketikkan perintah berikut

pip install statsmodels

Kemudian enter dan tunggu sampai proses instalasi selesai.

CARA KEDUA

Namun untuk beberapa kasus, apabila instalasi gagal dilakukan, kita dapat melakukan instalasi dengan cara lain yaitu dengan menginstall package menggunakan file .whl.

Walaupun cara yang kedua ini relatif lebih panjang di banding dengan cara yang pertama, namun cara ini cukup ampuh untuk beberapa kondisi. Misalkan kita ingin menginstal package python, namun komputer di rumah kita tidak mempunyai akses internet.

Untuk langkah pertama, kita harus men-download terlebih dahulu package yang akan kita install di situs https://www.lfd.uci.edu/~gohlke/pythonlibs/ (pilih berdasar versi python dan tipe komputer yang kita punya) kemudian pindahkan ke lokasi yang mudah kita akses.

Setelah itu, kita buka command prompt lalu pindah ke direktori tempat kita menyimpan file .whl tersebut, lalu ketikkan perintah berikut ini

pip install nama-package.whl

Kemudian enter dan tunggu sampai instalasi selesai.