Blog moved

New content will be posted at: http://cristianadam.eu!

Lenovo Fn-Ctrl Swap

Lenovo laptop keyboards have always had the Fn key as the left most key on the keyboard, like this:

If you are a full touch typist (or simply got used with an external computer keyboard) you would expect Ctrl to be the left most key on the keyboard. And this Fn and Ctrl key swap would drive you crazy.

I used to have a Lenovo W510, which had a bios option to swap Fn and Ctrl keys.

Recently I've got a Lenovo SL500, an older, consumer Lenovo model, which with an SSD drive does its job just fine :) The problem with the SL500 is that it doesn't have the Fn and Ctrl key swap in bios!

The good news is that some people have hacked the Lenovo bios files and swapped the bytes for Fn and Ctrl keys. The hacked bios files can be downloaded from here:  FN-CTRL swap on all Lenovo laptops.

The problem is that when you run WINUPTP.EXE you (might) get an error message like this:

Bummer.

Lenovo provides also an ISO image with the firmware update. Probably with a DOS update utility.

The bad news was that this ISO image was "special". If you burned it to a disk no files were present. If you tried to open it with 7-zip you would get just a Bootable_HardDisk.img file with was 512 bytes in size.

Since we know there must be a DOS firmware utility involved, the ISO file must be in an old DOS format. IsoBuster (one can download an evaluation copy) confirmed this:


The bios file is – $0a6a000.fl1, which was also present in the Windows bios update package. Also worth mentioning the PCDOS_JP label, which points to IBM PC DOS instead of MS DOS. This makes sense since Lenovo used to be part of IBM.

From the first image we can see that NERO Burning Rom was used to create the ISO file. Since I don't have access to NERO Burning Rom I needed something else.

ISO format is not compressed, which means that all the files are somewhere in the ISO file. Since I had the original $0a6a000.fl1 and the modified version all I needed was a program which would search and replace the content of the $0a6a000.fl1 file.

I googled a bit after such an utility, no luck, then decided to roll my own program.

Below is the C++ source code for my breplace program. You can get x64 binaries for Linux, macOS and Windows from GitHub. The "magic" function in this program is std::search which finds the position of the $0a6a00.fl1 fle in the ISO file.

#include <vector>
#include <iostream>
#include <fstream>
#include <algorithm>
#include <string>

size_t readFileToVector(std::istream& file, std::vector<char>& buf)
{
     file.seekg(0, std::ios_base::end);
     size_t size = file.tellg();
     file.seekg(0, std::ios_base::beg);

     buf.resize(size);
     file.read(&buf[0], size);

     return size;
}

int main(int argc, char** argv)
{
     std::vector<std::string> arguments(argv, argv + argc);
     if (arguments.size() != 5)
     {
         std::cout << "usage: breplace <file_container> <file_to_be_replaced>";
         std::cout << "<file_to_replace> <dest_file_container>" << std::endl;
         return 1;
     }

     std::vector<char> container;
     std::ifstream containerFile;
     containerFile.open(arguments[1], std::ios_base::binary | std::ios_base::in);
     size_t containerSize = readFileToVector(containerFile, container);

     std::vector<char> toBeReplaced;
     std::ifstream toBeReplacedFile;
     toBeReplacedFile.open(arguments[2], std::ios_base::binary | std::ios_base::in);
     size_t fileSize = readFileToVector(toBeReplacedFile, toBeReplaced);

     std::vector<char> toReplace;
     std::ifstream toReplaceFile;
     toReplaceFile.open(arguments[3], std::ios_base::binary | std::ios_base::in);
     readFileToVector(toReplaceFile, toReplace);

     std::vector<char> destination;
     std::ofstream destinationFile;
     destinationFile.open(arguments[4], std::ios_base::binary | std::ios_base::out);

     std::vector<char>::iterator itpos = std::search(
         container.begin(), container.end(), toBeReplaced.begin(), toBeReplaced.end());

     if (itpos == container.end())
     {
         std::cout << "File's content " << arguments[2] << " was not found" << std::endl;
         return 1;
     }

     size_t beforeFileSize = std::distance(container.begin(), itpos);
     std::cout << "File's content " << arguments[2] << " found at position: ";
     std::cout << beforeFileSize << std::endl;

     destination.resize(containerSize);
     std::copy(container.begin(), container.begin() + beforeFileSize, destination.begin());
     std::copy(toReplace.begin(), toReplace.end(), destination.begin() + beforeFileSize);
     std::copy(container.begin() + beforeFileSize + fileSize, container.end(),
               destination.begin() + beforeFileSize + fileSize);

     destinationFile.write(&destination[0], containerSize);

     return 0;
}

Then I ran the tool as breplace.exe 6auj19uc.iso $0A6A000.FL1 $0A6A000.FL1_new 6auj19uc_fn_ctrl_swap.iso. In order to be sure that things are as they should be I did a file comparison between the two ISO files using Total Commander:

Things looked "legit" thus decided to burn the new ISO image to a disk and proceed with the bios update.

Everything worked just fine. Now the Lenovo SL500 has the Fn and Ctrl keys swapped! w00t!

Before you decide to flash your Lenovo laptop double check the bios / ISO files. This can brick your laptop!

(ro) Diacriticele, internetul și Unicode

Pentru a publica texte în limba română pe internet știm că trebuie să folosim „Unicode”. Conform Wikipedia „Unicode (pronunțat în engleză /ˈjuːnɪˌkəʊd/) este un format definit de către Unicode Consortium pentru codarea, stocarea și interpretarea textelor pe suporturi informatice”.

Fiecare caracter, simbol are un număr de „ordine”. Mai jos avem numerele de ordine ale caracterelor specifice limbii române:

• ă - litera latină mică a cu breve - U+0103
• Ă - litera latină mare A cu breve - U+0102
• â - litera latină mică a cu accent circumflex - U+00E2
• Â - litera latină mare A cu accent circumflex - U+00C2
• î - litera latină mică i cu accent circumflex - U+00EE
• Î - litera latină mare I cu accent circumflex - U+00CE
• ș - litera latină mică s cu virgula dedesubt - U+0219
• Ș - litera latină mare S cu virgulă dedesubt - U+0218
• ț - litera latină mică t cu virgulă dedesubt - U+021B
• Ț - litera latină mare T cu virgulă dedesubt - U+021A
• „ - ghilimele stânga jos (dublu 9 jos) - U+201E
• ” - ghilimele dreapta sus (dublu 9 sus) - U+201D
• « - ghilimele ascuțite stânga - U+00AB
• » - ghilimele ascuțite dreapta - U+00BB
• – - linia de dialog (en dash) - U+2013

În trecutul apropiat au existat sisteme de operare care au avut familii de fonturi care nu conțineau ș și ț cu virgulă. Browserele afișau pătrățele, sau literele arătau diferit deoarece alt font a fost folosit pentru afișaj.

Pentru a combate această problemă există mai multe soluții:

• nu se folosesc diacritice. Soluție nerecomandată, dar răspândită ajutată de comoditatea celor care scriu astfel de texte. hotnews.ro WTF ?!
• se folosesc ş și ţ cu sedilă în loc de ș și ț cu virgulă. Soluție nerecomandată, foarte răspândită ajutată de aranjamentul moștenit de la Microsoft și de soluția „Română cu Alt Dreapta” de la diacritice.ro.
• se folosesc ș și ț cu virgulă împreună cu un cod javascript care adaptează pagina în funcție de sistemul de operare. Soluție recomandată. Wikipedia în limba română folosește această tehnică.
• se folosesc ș și ț cu virgulă împreună cu un font specific (@font-face). Soluție recomandată. kmkz.ro folosește familiile de fonturi Futura și Frutiger, catavencii.ro folosește familia de fonturi Open Sans, ș.a.m.d.

Ultima soluție mi se pare cea mai elegantă. Pagina web va arată la fel pe toate sistemele de operare și există multe familii de fonturi pe care le putem folosi de la Google Fonts (avut grijă la „Latin Extended”) sau să le avem generate de către Font Squirrel și să le avem local pe server.

kmkz.ro au ales varianta sigură și au generat fonturile cu Font Squirrel și le-au pus pe server. Dar din când în când au articole care arată bizar. Mai jos am pus capturi de ecran cu această bizarerie:

Mozilla Firefox 34 (bug #1128330)
Internet Explorer 11 (bug #1111623)
Google Chrome 39

Firefox și Internet Explorer afișează ă, ș și ț bizar, ca și cum breve-le și virgula ar fi după ă, ș și ț!

După un pic de muncă de investigație am aflat de simbolurile diacritice combinatorii din cadrul Unicode - Combining Diacritical Marks (U+0300 – U+036F).

Astfel putem avea combinațiile (literele din stânga sunt combinații):

• ă - litera latină mică a și breve-ul - U+0061 și U+0306
• Ă - litera latină mare A și breve-ul - U+0041 și U+0306
• â - litera latină mică a și accentul circumflex - U+0061 și U+0302
• Â - litera latină mare A și accentul circumflex - U+0041 și U+0302
• î - litera latină mică i și accentul circumflex - U+0069 și U+0302
• Î - litera latină mare I și accentul circumflex - U+0049 și U+0302
• ș - litera latină mică s și virgula dedesubt - U+0073 și U+0326
• Ș - litera latină mare S și virgula dedesubt - U+0053 și U+0326
• ț - litera latină mică t și virgula dedesubt - U+0074 și U+0326
• Ț - litera latină mare T și virgula dedesubt - U+0054 și U+0326

Literele arată ca cele necombinate, cum ne putem da seama de diferență? Simplu, copiați o literă în „notepad” și ștergeți-o cu „Backspace”, o să observați că se șterge breve-ul, accentul circumflex sau virgula prima și apoi litera de bază.

Pagina de la Kmkz se vede aiurea deoarece fonturile generate de Font Squirrel nu includ diacriticele combinatorii (U+0300 – U+036F). Putem verifica asta la Glypviewer și apoi introducând http://www.kmkz.ro/wp-content/themes/kmkz_v3/fonts/frutiger/frutigerroce-roman-webfont.woff la „Remote URL”.

Font Squirrel poate fi configurat să includă diacriticele combinatorii astfel:

Google Fonts nu exportă diacriticele combinatorii. Dacă vreți să folosiți un font de acolo, descărcați-l ca ttf/otf și apoi transformați-l cu Font Squirrel.

Google Chrome 39 ar fi trebuit să fi afișat pagina aiurea, dar dintr-un motiv sau altul afișează pagina corect.

La fileformat.info am aflat de exemplu că ț-ul a fost introdus în Unicode în versiunea 3.0.0 din Septembrie 1999, pe când virgula a fost introdusă în Unicode în versiunea 1.1.0 din Iunie 1993! Tot în versiunea 1.1.0 a fost introdus și ţ-ul cu sedilă.

Am decis să testez un Windows XP fără fonturi actualizate să văd cum afișează Internet Explorer 6.0 o pagină de test (vezi codul sursă la pastebin.com/tuavSbY4):

Familia de fonturi Arial
Familia de fonturi Tahoma

Se poate observa că problema diacriticelor lipsă nu ar fi fost rezolvată cu fonturile care nu au ș și ț cu virgulă (Tahoma fiind printre puținele familii de fonturi care vine cu ș și ț pe Windows XP). Dar avem o îmbunătățire, putem vedea caracterul de bază și nu doar un pătrățel :)

Ca fapt divers, pagina de test arată „interesant” în poza de previzualizare a serviciului de scurtare de linkuri goo.gl:

În articolul Aranjamente de tastatură românească am pus la dispoziție trei pachete de instalare pentru tastaturile românești folosite în lumea Windows.

Mai jos aveți aceleași trei pachete de instalare, dar de data aceasta literele (ăĂîÎșȘțȚ) sunt generate folosit diacriticele combinatorii:

• Română (Standard) – aranjamentul „primar” din SR-13392:2004
• Română (Programatori) – aranjamentul „secundar” din SR-13392:2004
• Română (Moștenit)* – aranjamentul „moștenit” de la Microsoft

*Aranjamentul „Română (Moștenit)” vine cu unele îmbunătățiri, pentr
u a afla mai multe vezi articolul de mai sus.

Nu știu ce software au folosit cei de la Kmkz pentru a produce textele cu diacriticele combinate, dar acum se poate face același lucru folosind Windows!

Nu recomand folosirea diacriticelor combinate, dar este bine să știm despre existența lor :)

P.S. 

Cristiana Cobliș a menționat caracterul util al diacritcelor combinate în contextul fonturilor care nu conțin diacriticele directe. Google Fonts conține multe fonturi care nu conțin diacriticele directe, mai ales ț-ul.

Am reușit să găsesc un font care îndeplinește această condiție: Righteous. Mai jos avem o captură de ecran cu Google Chrome 39 și fontul Righteous:

Din păcate doar Google Chrome randează pagina corect. Mozila Firefox 34 sau Internet Explorer 11 au probleme.

Este mult mai simplu să facem browserele să afișeze corect diacriticele combinate decât să convingem toți autorii de fonturi să adauge literele lipsă, în special ț-ul :)